Компания Lenovo представила три смартфона с поддержкой Project Tango. Project Tango: зачем это нужно и где применяется

Основанный на платформе Google проект Tango даёт смартфонам и планшетным ПК чувство пространства, наподобие простого 3D-сканера. Прямо сейчас ваш телефон не может этого, но в это же время в следующем году, возможно, сможет.

Всем известные технологии меняются под воздействием того, как люди используют их, а большинство этого не замечает.

Проект Tango позволяет мобильному устройству не только увидеть пространство вокруг - выяснить, где пол, стены, потолок и мебель - но также определить местоположение устройства в пределах этого пространства и его ориентацию.

Подумайте о Tango, как платформе, которая превращает смартфон в Kinect-подобное устройство или пульт дистанционного управления Wii, так как оба работают аналогично. (Это сразу же предполагает использование смартфона в качестве универсального периферийного устройства для консоли видеоигр.)

Откуда происходит Tango?

Во главе с бывшим членом команды Microsoft Kinect Джонни Ли, проект Tango развивается уже годы. На самом деле, история проекта является хрестоматийным примером того, как происходит переход идеи от концепции до реализации.

Летом прошлого года гиганты производства процессоров Qualcomm и Intel предоставили базовые устройства для проекта Tango разработчикам, для программирования представленных ими наборов микросхем. А теперь производители потребительских смартфонов и планшетных ПК активно работают над продуктами Tango.
Технология Tango и что она делает

Tango работает путем объединения сигналов от различных датчиков и обработки их для дальнейшего применения с очень большой скоростью. В число этих датчиков входят такие, как инфракрасный излучатель и инфракрасная камера, которая улавливает отраженный свет. Широкоугольная камера добавляет визуальные подсказки о местоположении. Система Tango также опирается на высокоточные акселерометры, гироскопы и барометры.

Google предлагает три API, - один для разработчиков игр, другой для использования Java - для интеграции приложений в Tango, и ещё один для приложений, которые имеют свои собственные видеодвижки, типа игр.

Google уже проделали всю основную работу по оптимизации системы, чтобы она работала так, как должна. Разработчикам ПО и оборудования остаётся лишь включиться в процесс и поддержать его. И они с радостью делают это.

В числе этих компаний и Lenovo, где работают теперь сотрудники, начинавшие этот проект ещё в составе Motorola и имеющие опыт и знания по нему. Также подключены Qualcomm и Intel, Nvidia и LG. Велика вероятность, что все эти компании выпустят продукты с технологией Tango уже в этом году.

И всё-таки, для чего же она - Tango?

Датчики в вашем смартфоне уже могут ориентироваться на основе движения. Но они подвержены "дрейфу", потому что их данные основаны на оценке движения самого телефона. Tango постоянно соотносит положение телефона его фактическим окружением для большей точности.

Маячки помогают отслеживать местоположение в помещении, примерно. Ваш телефон может сказать, как далеко он находится от маяка в известном ему месте. Усовершенствование Tango в том, что он способен определить своё положение там, где никто не потрудился поставить маяк, что важно для точности внутри помещения. Он может видеть дверь, лестницы и цветочные горшки и выяснить, где он находится внутри здания. Так что, если вы должны были "пометить" место внутри помещения в приложении, чтобы его мог найти кто-то другой, следующий человек может не только определить в какой комнате оно находится, но и узнать точное место. Если приложение магазина хочет предоставить информацию о расположении товаров на полках, она могло бы обеспечить наибольшую точность с этой системой.

Смартфон с Tango можно использовать как рулетку, для измерения любых размеров и расстояний, и с Tango вы можете быть уверены, что ваш беспилотник не разобьётся, врезавшись в пешехода или любой неподвижный объект.

Tango позволяет достичь эффекта дополненной реальности с недорогим Google Cardboard, применяя его вместо более совершенных и навороченных виртуальных шлемов. Предстаьте себе игру в

Очки Google, автоматизированные машины, дополнительная реальность и носимые вычислительные устройства, лишь некоторые из множества интересных технологий, которые, вероятно, будут определять будущее, а сегодня Google рассказала ещё об одной технологии к и без того растущему списку.

Первоначально Google дебютировал с программой Project Tango в феврале, заявляя новый 5-дюймовый Android-смартфон, который получит около 200 счастливых разработчиков. Проект является попыткой расширить взаимодействие смартфонов между собой и человеком за пределами их дисплея. Мощные камеры, 3D-датчики, сложные алгоритмы и тонны других технологий упакованы внутри этих устройств и обещают тонны достижений в технической индустрии.

Сегодня Google представила новый Project Tango Tablet, в качестве части Google (ATAP) Advanced Technology & Projects Group. Новый планшет, который, согласно текущим данным, получит практически 4000 счастливчиков-разработчиков, которые помогут Google понять мир и трехмерную среду вокруг нас с мобильной и технической точки зрения.

Осознание пространства и движения имеет фундаментальное значение для того, как мы взаимодействуем с окружающей средой и друг с другом, но мобильные устройства ограничивают этот мир 5-дюймовым экраном вашего Galaxy S5, например. Google хочет изменить это. Технологии планшета Project Tango могут распознать наше 3D-окружение и интегрировать его в технологии, приложения, игры или даже карты для инвалидов. Существует куча преимуществ, но мы пока не знаем о планах Google.

Куда больше Project Tango Tablet впечатляет характеристиками и технологиями, которые компании Google удалось упаковать в планшет. Если вы думали, что Samsung Galaxy S5 или iPad Air впечатляет технологиями, планшет Tango это устройство, которое захочет каждый потребитель, но получить не сможет.

Новые планшеты Google Tango работают на 4-ядерных мобильных процессорах NVIDIA K1 с графическим чипом на 192 ядрах, 4 Гб оперативной памяти и 128 Гб встроенной памяти. Очевидно, что вам понадобится много места для отображения и записи окружающей среды в 3D, тем не менее, характеристики планшета впечатляют. 7-дюймовый Full HD дисплей сопровождается поддержкой 4G LTE, Wi-Fi, Bluetooth, несколькими камерами для съемки и 3D захвата, датчики для восприятия глубины и усовершенствованные алгоритмы «строительства» трехмерного изображения, которые позволяют устройству понять пространство и движение человека. Странно звучит, не так ли? В сторону умные технологии, представьте себе игры, которые объединят в себе все эти функции. Мы можем ждать их в ближайшие годы, наряду с беспрецедентным опытом, если проект получит развитие.

Если говорить о планшетах потребительского класса, Project Tango ушел далеко вперед. Наряду с и другими Android-планшетами, с 1-2 Гб оперативной памяти и 16-32 Гб встроенной памяти, Project Tango выглядит устройством мечты для миллионов потребителей. К сожалению, мы пока не можем получить подобного устройства, лишь приближенные разработчики компании получат Project Tango.

Конференция разработчиков Google I / O является ежегодным мероприятием производителя, где мы надеемся узнать больше о развитии Google Project Tango. Нам интересно знать, как производитель видит проект в рамках мобильного рынка. Разработчики помогут компании с разработкой приложений, которые будут использовать особенности и преимущества новых технологий, опираясь на технику и датчики, чтобы продемонстрировать нам новое мобильное будущее.

Сможет ли общество и наши устройства, мобильные игры или даже сектор здравоохранения извлечь выгоду из Проекта Танго, предстоит выяснить в будущем. Мы бы хотели, чтобы планшет Tango мог использовать 3D-принтер, что обещает море интересных часов. Вы только представьте себе возможности.

Планшеты Project Tango будут распространены среди счастливых разработчиков позднее в этом году, стоимостью чуть выше 1000$ каждый, а вы можете посетить сайт ATAP за дополнительной информацией.

Что такое Tango

Во-вторых, Tango работает на мобильных устройствах. Те же функции можно было бы реализовать и по-другому (например, через айпэд и ), но это хлопотно. А видеопроцессор Tango маленький, выполняет сразу несколько функций и потребляет очень мало энергии (по сравнению с аналогами). Конечно, это заслуга не Google, а небольшой компании Movidius, которая занимается технологиями компьютерного зрения.

1 из 5

2 из 5

3 из 5

4 из 5

5 из 5

Что умеет Tango

Пока с технологией работает только , и большинство из них выглядят как демонстрация возможностей. Но Tango можно применять по-разному: что-то уже используется, что-то только разрабатывается.

Навигация внутри зданий

Обычные карты не подходят для навигации внутри помещений: в зданиях есть стены, несколько этажей, лестницы и лифты. А объемная карта помещения поможет найти нужные ворота во Внуково, отвести в интересующий зал Эрмитажа или проводить до магазина в большом торговом центре. Google может договориться с организациями о сотрудничестве, прислать человека с планшетом, а потом нанести на карту информацию о заведениях.

Автономные дроны

Одна из главных проблем, которую решают инженеры дронов, - как сделать аппараты автономными. Два года назад научная группа из Университета Пенсильвании прототип Tango на самодельный дрон, чтобы посмотреть, поможет ли это ориентироваться. Ученые задавали базовые координаты, а потом уносили дрон в разные стороны - каждый раз он возвращался примерно в одну и ту же точку.

Дрон с чипом для ориентирования уже есть на рынке - видеопроцессор Myriad 2, который лежит в основе Tango, помогает аппарату DJI Phantom 4 избегать столкновения с препятствиями.

Конечно, можно сделать дрон, который ориентируется в комнате и без Tango, но для этого нужно дополнительное оборудование или на стенах, или на корпусе аппарата. В Швейцарском технологическом институте свою систему ориентирования, но она была настолько тяжелой, что сократила длительность полета в два раза.

Роботы, которые умеют ориентироваться в пространстве

Это самая фантастическая идея о Tango, и она уже в работе. В 2014 году на МКС 14-гранных роботов Spheres с установленными прототипами Tango - в NASA хотели узнать, смогут ли они ориентироваться на космической станции. У американского агентства уже был подобный проект: робота пытались научить ориентироваться в невесомости по ультразвуку. Все получалось, но только в очень маленьком помещении. В NASA надеются, что скоро Spheres будут летать по станции, помогать космонавтам и осматривать космические корабли снаружи.

Фотографии с изменяемым объектом фокусировки

На многих новых смартфонах, например iPhone 7 Plus, LG G5, Huawei P5, установлены двойные камеры. Они нужны, чтобы снимать широкоформатные фотографии с насыщенными цветами и низким уровнем шума в сумерках. Камеры для Tango могут владеть похожим набором функций и, кроме того, будут иметь датчик глубины изображения. Это позволит менять область фокусировки на уже сделанном снимке.

Игры с настоящей дополненной реальностью

У Tango есть карта помещения, к которой можно привязать игру. Это большой плюс. Если выйдет с поддержкой технологии, то покемон появится не по центру экрана на фоне изображения с камеры, а спрячется за конкретным диваном прямо в вашей комнате. Его пришлось бы искать по-настоящему. Пока большинство игр для Tango используют одну идею - игровые объекты, например гоночная трасса, небоскреб, динозавр, могут как бы стоять на реальных предметах в комнате. Самые интересные примеры - автора Katamari Damacy и в сюрреалистическом мире.

Простое проектирование и виртуальная реальность

Самые полезные приложения для Tango составляют схему квартиры, позволяют расставить в интерьере виртуальную мебель, чтобы понять, как она смотрится и поместится ли на свободное место. В обоих случаях смартфон, во-первых, избавляет от необходимости делать замеры, во-вторых, работает с настоящими площадями.

В случае с расстановкой мебели Tango переносит что-то из виртуального мира в реальный. Но это сработает и в обратную сторону - смартфон может отсканировать объект, чтобы перенести его в виртуальную реальность или в редактор 3D-моделей. Поскольку разработчики Tango и работают вместе, их проекты наверняка пересекутся.

Какие проблемы есть у технологии

Неизвестно, насколько затратной Tango станет для аккумулятора. Pokémon Go тратит заряд быстрее, если играть с включенной камерой, а ведь игра не использует датчик глубины изображения и видеопроцессор. В Phab 2 Pro стоит очень емкий аккумулятор на 4050 миллиампер-час, это на тысячу миллиампер-час больше, чем у аккумулятора в Galaxy S7.

Работа с Tango требует 4 гигабайт оперативной памяти, дополнительный процессор и два новых датчика. Они увеличат и стоимость, и размер смартфонов. Но для Tango пока нет интересных приложений, и это нормально - технология существует не так давно, а у многих разработчиков еще не было к ней доступа. Пока у Google не появится полезного сервиса, например внутренней навигации, у производителей не будет причин ставить дополнительную электронику. Вероятно, Tango на некоторое время останется нишевой технологией.

Небольшая группа инженеров ATAP (Advanced Technology and Projects) в компании Google занимается разработкой перспективных технологий. Сегодня она представила свой новый проект Tango . Это очень красивая технология построения 3D-модели окружающего пространства с помощью смартфона.

Группа ATAP сконструировала 5-дюймовый смартфон, оснащённый стереокамерой, сенсорами и программным обеспечением, которые отслеживают положение смартфона в 3D-пространстве, а также сканируют окружающий мир в реальном времени со скоростью 250 тыс. измерений в секунду. Всё это объединяется в единую 3D-модель с помощью уникального процессора Myriad 1 , разработанного стартапом Movidius.

Когда модель готова, телефон может постоянно определять своё местоположение внутри неё. На базе этой модели можно создавать интересные игры, когда виртуальные объекты в смартфоне совмещаются с реальными объектами окружающей действительности. Например, вы можете играть на смартфоне в футбол, отбивая мячик от стены собственной квартиры. Или управлять настоящим роботом в соседней комнате, двигая его по 3D-модели этой комнаты. Или играть в прятки с анимированным персонажем в своём собственном доме. В общем, возможности открываются невероятные.

Можно представить, что с помощью краудсорсинга пользователи составят всеобъемлющую 3D-модель всего мира - и каждый сможет легко ориентироваться в пространстве в любой точке мира, в любом здании.

В ближайшие месяцы ATAP намерены выпустить SDK для создания программ на новом оборудовании. Первые 200 устройств разошлют разработчикам после 14 марта. Чтобы принять участие в программе, нужно придумать интересное приложение в сфере навигации внутри помещений, игр для одного или нескольких игроков или алгоритмы обработки данных с сенсоров Tango.

Телефон работает под Android, так что API для доступа к информации об ориентации, позиционировании и расстоянии до объектов можно использовать со стандартными Android-приложениями, написанными на Java, C/C++, а также на игровом движке Unity. Первые версии алгоритмов и API скоро закончат, но проект и после этого останется в статусе эксперимента.

Название Tango не имеет никакого отношения к аргентинским танцам: этим словом в международном фонетическом алфавите обозначается буква T, которая, в свою очередь, связана с внутренним кодовым именем проекта в Google.

Project Tango - это платформа «машинного зрения», с помощью которого мобильное устройство умеет точно определять свое местоположение в любом помещении: создав его 3D-модель, можно впоследствии осуществлять навигацию ровно по тому же принципу, по которому это делает человек. Точно так же, как вы всегда знаете, в каком положении и в какой точке помещения находится ваше тело и куда с какой скоростью оно движется, далеко ли стена, окно и дверь, и куда ведет эта дверь (для этого мозг обрабатывает информацию, получаемую от глаз, вестибулярного аппарата и, главное, из памяти), так и смартфон при помощи инфракрасных и гироскопических датчиков, акселерометров, камер и схем помещения может сам ориентироваться в пространстве с шестью степенями свободы (три оси координат и три вектора движения).

С помощью технологии Tango можно совместить реальное и виртуальное пространство

Зачем это нужно?

Для разного рода роботов и дронов, которые будут передвигаться из точки А в точку Б сами без участия человека, необходимость технологий машинного зрения очевидна. Но смартфон?

Во время загрузки произошла ошибка.

Виртуальный музей

Для смартфона уже придумано два приложения с поддержкой Tango. GuidiGO - это гид по музеям с дополненной реальностью, в котором вы видите окружающую действительность через экран смартфона. Рядом с экспонатами появляются информационные сообщения, стрелки «вспыхивают» на полу и указывают, куда пройти к следующему экспонату и т.п. Сама по себе дополненная реальность - не новость, но раньше для привязки смартфона к местоположению необходимо было размещать вокруг множество специальных меток, считываемых камерой, устанавливать Bluetooth-маяки, вешать наклейки с QR-кодами и т.п. - то есть, всегда требовалась какая-то «доработка» реальности, чтобы ее можно было потом «дополнить».

С Project Tango ничего не требуется: платформа содержит в том числе и инструменты сканирования окружающего пространства, поэтому методом краудсорсинга получится быстро «описать» весь мир. Получится эдакая Wikimapia, только подробная и в 3D. Ну, а с учетом массового нашествия шлемов виртуальной реальности на основе смартфонов фильмы «Терминатор» и «Робокоп» перестанут быть научной фантастикой.

Геопозиция в виртуальной реальности

Второе приложение - это Glympse: известный сервис для передачи своего местоположения в режиме реального времени. Раньше Glympse использовал только стандартные средства определения местоположения - спутники и беспроводные сети. Теперь же, благодаря indoor-позиционированию средствами Project Tango и дополненной реальности можно сделать стены прозрачными и найти друг друга, скажем, в торговом центре или аэропорту.

Во время загрузки произошла ошибка.

Огромные перспективы открывает Project Tango и для игр с дополненной реальностью: это могут быть не только условные «настолки», но и интерактивные квесты в реальности. Кроме того, можно использовать платформу для дизайна интерьеров, производить обмер помещений и т.п. - например, прямо на экране нарисовать в своей комнате тумбочку подходящего размера, и смартфон создаст ее чертеж.

Аппаратная часть

С аппаратной точки зрения PHAB2 Pro для реализации функций Project Tango оснащен камерой с fisheye-объективом (отслеживает движение), ToF-камерой и инфракрасными датчиками. ToF-камера (ToF расшифровывается как Time of flight) работает по принципу радара: она освещает сцену и фиксирует время, проходящее до того момента, как отраженный свет попадает обратно в камеру. Скорость света постоянна, поэтому, зная время, легко рассчитать расстояние до объекта и сформировать трехмерное изображение.