Вчера на конференции Google по вводу-выводу Google продемонстрировал будущее виртуальной реальности — и не все из картона. Это удивительно, потому что предыдущие авантюры Google в космос были, ну, немного нерешительными.
Не поймите меня неправильно: Google Cardboard, минималистичная виртуальная оболочка для смартфонов , безусловно, опрятна, но ее ограничения очевидны. Это один из знаменитых 20% проектов Google — это труд любви нескольких сотрудников, и это видно. Картон имеет узкое поле зрения, размытость изображения, отсутствие позиционного слежения и отвратительную задержку. Это рецепт плохого погружения и болезни ВР.
У Google Cardboard нет оголовья, и это не упущение. Без головного ремня пользователи должны держать его на своих лицах, заставляя их поворачиваться с помощью туловища. Это замедляет их с ощутимой задержкой. И это нормально — мы говорим о гарнитуре из картона. Это по-прежнему ценный инструмент для привлечения людей в виртуальную реальность, но это не изменит правила игры.
Все это начинает меняться. Google использует немаловажную долю мировых интеллектуальных ресурсов, и на конференции IO этого года начала демонстрировать некоторые из этих возможностей в пространстве виртуальной реальности. Объявления в три раза.
- Во-первых, есть существенное усовершенствование гарнитуры Cardboard.
- Во-вторых, есть VR-камера, созданная для создания цельного трехмерного изображения.
- Наконец, есть Tango VR, новая платформа VR / AR, построенная на загадочном 3D-сенсорном планшете Google.
Готовы? Давайте копаться в.
Новая картонная гарнитура
Новый дизайн для Google Cardboard является определенным улучшением — он добавляет поддержку для более крупных телефонов (до шести дюймов), включает поддержку iOS и добавляет небольшой физический рычаг сбоку гарнитуры для ввода. Он также разработан, чтобы его было легче строить и контролировать.
Кроме того, это в значительной степени та же самая история: маленькие, стандартные линзы, картонная оболочка и много укачивания, если вы используете его слишком долго. Это заметное улучшение, но мы довольно близки к пределу для картонных оболочек, и Google находится в режиме ожидания, пока они не начнут создавать что-то более полезное.
VR камера
Новая камера, разработанная совместно с GoPro, называется Jump . Он состоит из 16 камер GoPro (общая стоимость около 10 000 долларов США), установленных на круглом пластиковом креплении. Пока что мирские: подобные установки для производства VR-видео уже на рынке. То, что становится действительно крутым, — это так называемый «Jump Assembler», часть программного обеспечения, созданного Google, чтобы сократить острые артефакты VR.
Чтобы понять это программное обеспечение, вы должны понять проблему, которую оно пытается решить. Джон Кармак из Oculus рассказывает о проблемах с 3D панорамным захватом .
«То, что они в итоге делают, это то, что у вас есть срезы, снятые с нескольких камер, поэтому прямо вперед это подходящее стерео […], а затем здесь это подходит для этого [угла]. Но это означает, что если вы смотрите на то, что было правильным для глаз здесь, но вы смотрите краем глаза здесь, […] это не правильное неравенство для глаз. А потом, что еще хуже, если вы [закатываете голову], все становится плохо, потому что оно настроено только на глаза. «
Прыжок — это способ исправить это. Google использует технологию машинного зрения для сравнения изображений и определения трехмерной геометрии сцены. Программное обеспечение использует эту реконструкцию, чтобы создать чистую перспективу без стежков с идеальным стерео со всех сторон.
Google планирует разрешить просмотр такого рода контента через YouTube с помощью Google Cardboard — хотя пока нет слов о поддержке более сложных гарнитур VR, таких как Oculus Rift.
Это уже огромная победа. Тем не менее, технология может использоваться, чтобы делать больше — намного больше. Во время демонстрации Google показывает виртуальную камеру, перемещающуюся внутри кольца, плавно обновляя перспективу. Прямо сейчас Google переводит трехмерные данные в стереопанорамы. Иллюзия сработает от любого поворота, но сломается, если вы будете поворачивать голову или двигаться.
Тем не менее, в будущем Google может показать вам восстановленную трехмерную геометрию напрямую, предоставляя вам полный опыт VR-видео. Возможно тот, который поддерживает каждую ось вращения, а также значительную степень позиционного отслеживания. Это еще не реализовано, но это дразнящая возможность для большого шага вперед в VR-видео.
Танго В.Р.
У Google Cardboard много проблем, но даже лучший пример мобильной VR, гарнитура Gear VR Gear VR , все еще есть один существенный недостаток — нет позиционного отслеживания.
Отслеживание вращения довольно просто. Вы можете использовать гироскопы, чтобы определить, насколько сильно поворачивается ваша голова, а магнитные полюсы Земли являются удобным ориентиром для предотвращения дрейфа. Это составляет пару долларов на датчики, которые уже установлены в большинстве смартфонов.
Позиционное отслеживание — это целая другая пластинка путина. Разные компании решали эту проблему по-разному. Oculus использует внешнюю камеру в паре с отслеживанием точек на гарнитуре, что позволяет отслеживать ее с помощью машинного зрения.
HTC и Valve применяют другой подход к своей гарнитуре Vive. , используя множество базовых станций Lighthouse с вращающимися барабанами, чтобы подметать всю комнату лазерным светом. Трекеры на гарнитуре и контроллерах покрыты световыми датчиками, которые могут обнаруживать (с чрезвычайно точной синхронизацией), когда они поражены этим лазером. Проверяя точное время и выполняя некоторые основные геометрические вычисления, любые три датчика могут совместно определять точное положение устройства в пространстве относительно базовых станций.
Оба эти подхода имеют свои преимущества, и мы можем обсуждать их относительные достоинства. Однако у обоих есть недостаток, который становится критически важным в мобильном мире: вам необходимо внешнее оборудование для отслеживания гарнитуры.
Излишне говорить, что это проблема для мобильной гарнитуры. Смысл мобильного VR в том, чтобы освободить себя от кабелей и инфраструктуры, необходимых для высокопроизводительных настольных систем. Итак, что мы можем с этим поделать? Ответ, по крайней мере, по мнению Google, заключается в использовании технологии «SLAM» ( одновременное расположение и отображение ) в сочетании с датчиком глубины для отслеживания точек в мире. При этом создается трехмерная сетка окружения, чтобы определить, где находится устройство в пространстве относительно его начальной позиции.
Google уже поставил некоторые ранние аппаратные средства с этой функциональностью в виде планшета Tango. , что мы рассмотрели здесь раньше. Google считает, что датчик может революционизировать способ взаимодействия с устройствами. Как пишет разработчик Джонни Ли в видео ниже,
«Вместо того, чтобы втиснуть всю нашу жизнь в этот очень маленький прямоугольник [экрана смартфона], Project Tango разрабатывает технологии, которые помогают всему, и все точно понимают, где они находятся. Где угодно. Не только там, где есть хорошее покрытие GPS, хорошее покрытие WIFI […] Устройства, которые мы используем, поделятся нашим пониманием пространства ».
Эта технология имеет захватывающие приложения в виртуальной реальности, и недавно Google начал демонстрировать их.
Это впечатляет, но это также первые дни. Valve использует готовую кобуру для своего опыта в виртуальной реальности вместе с честным оружием NERF. Сам планшет не предназначен для виртуальной реальности — он тяжелый, с большой задержкой, а эргономика просто ужасная.
Тем не менее, это может быть самая впечатляющая демоверсия мобильного VR, которую когда-либо видел мир — строго из-за позиционного отслеживания, которое она обеспечивает. Гарнитура позволяет вам свободно перемещаться в любом помещении (при условии, что камера достаточно освещена). Это открывает некоторые захватывающие возможности для приложений смешанной реальности.
Многие из недостатков скоро исправятся: Google также объявил, что он сотрудничает с производителем процессоров Qualcomm, и создал смартфон, содержащий полный набор процессоров Tango для проекта и оборудование для его поддержки. Эти смартфоны станут эталонным дизайном для будущего Tango-совместимого смартфона, который должен гораздо лучше подходить для приложений VR.
Что касается самого позиционного отслеживания, то отслеживание выглядит плавным. Но то, что хорошо выглядит на экране компьютера, может показаться другим, когда вы внутри него. HoloLens от Microsoft: использует аналогичную технологию для позиционирования себя и имеет заметные глюки в своей стабильности.
В своем выступлении Джонни Ли упоминает, что отслеживание при хороших условиях является точным до «нескольких миллиметров или сантиметров». Это впечатляет, но не совсем до миллиметрового стандарта виртуальной реальности. Похоже, может потребоваться еще одно или два поколения, прежде чем трекинг станет достаточно хорошим, чтобы запустить привязанную виртуальную реальность настольного компьютера за свои деньги.
Будущее, Работает на Google
Если вы соберете все это вместе, то через два-три года вы начнете видеть форму чего-то интересного. Представьте на мгновение, что через несколько лет новые смартфоны будут оснащены аппаратным обеспечением Tango, кобурой VR и версией Android, оптимизированной для VR с малой задержкой. В этом будущем нередко можно увидеть людей, уверенно идущих по улице, приклеенных к лицу телефоном, погруженных в свою дополненную реальность.
В этом будущем VR-камеры есть везде, и вы можете мгновенно перейти к VR-видео из всего на Земле. VR — это дешево, VR — вездесуще, а VR — это всегда комфортный, захватывающий опыт, доступный миллионам людей. Это мечта, и Google приблизил ее к реальности.
Что вы думаете? Вы заинтересованы в VR-видео? Вы видите себя, покупая мобильную гарнитуру VR? Дайте нам знать об этом в комментариях!