Стратегия AR от Apple уже начинает объединяться

Будущее головных уборов расширенной реальности и смарт-очков все еще очень сильно меняется. В этом году может появиться долгожданный Волшебный скачок. Microsoft Hololens висела в состоянии предпринимательской деятельности — одна, из которой она может, наконец, выйти в следующем году. Маленькие смарт-очки, такие как ODG, могут стать лучше с очередными чипами Qualcomm, но не ожидайте чудес.

Тогда есть Apple. Как сообщало IT NEWS в апреле, Apple работает над мощной гарнитурой, способной как AR, так и VR. Независимо от того, является ли эта версия прототипом «что, если» или что-то похожее на то, что Apple может отправить через 2 года, это все догадывается. Но вам не нужно ждать до 2020 года: планы Apple по виртуальной магии в прямом эфире, прямо сейчас, на iPad и iPhone, которые вы сейчас являетесь.

Apple продемонстрировала обновленный инструментарий дополненной реальности ARKit 2 вместе с iOS 12 на Всемирной конференции разработчиков в начале этого месяца. И у этого уже есть удивительное количество ключевых обновлений, которые значительно улучшают, как iOS может справиться с дополненной реальностью. Эти биты и куски, объединенные, являются дорожной картой для того, где AR должна двигаться, если она должна перейти от более загруженной игры к принятию массового рынка на уровне Fortnite.

Apple AR не живет на гарнитуре (пока), но, по словам Apple, это не имеет значения. «Мы считаем, что сейчас очень важно, мы получили его на сотнях миллионов устройств, iPhone и iPad», — сказал IT NEWS вице-президент Apple по маркетингу компании Greg Joswiak. «Мы считаем, что это невероятно отличное место для начала, потому что многие из нас уже несут iPhone в карманах».

Мультиплеерные миры

Если набор слоев на вершине нашего мира будет частью нашего будущего, тогда каждый должен уметь их видеть. Общие миры AR — относительно новая вещь: Google продемонстрировал свои первые многопользовательские приложения AR месяц назад на своей собственной конференции разработчиков, и многопользовательская поддержка Apple в ARKit 2 делает подобные вещи.

Мой первый практический опыт многопользовательского AR в iOS 12 был действительно впечатляющим, хотя долгое время держать iPad в вертикальном положении можно утомительно. Игра в одном помещении в реальном пространстве кажется совершенно увлекательной, но это также открывает совместные проекты или постоянные виртуальные объекты, с которыми многие люди могли бы посещать и взаимодействовать. На данный момент это наборы Lego на таблицах, которые смешивают физические части и виртуальные. Подумайте об общих деталях театров, специфичных для сайта, которые Уильям Гибсон мечтал много лет назад. Или следующая волна голограмм в классных комнатах. Или экспериментальные арт-проекты, например, приложение Google AR AR doodle, которое уже существует.

Live image detection with iOS 12 & ARKit 2. Display digital information attached to physical objects. Feels like playing in the future ✨ #arkit #ios12 pic.twitter.com/b0bc9CiL8n

— Harley Turan (@hturan) June 9, 2018

Обнаружение объекта, с всплывающей информацией

Возвращаясь к Google Glass, будущая фантазия волшебных очков заключается в том, что они каким-то образом представят аннотации на первое место в мире вещей. Google Lens, входящая в систему Google Oreo OS от Google в прошлом году и Android P в этом году, может распознавать объекты через камеру и автоматически искать соответствующую информацию. ARKit 2 также может использоваться не только для просмотра объектов, но и для привязки к ним информации. Возможно, это информация о покупке, или чье-то имя плавает над головой, или имя динозавра, или статистика игрока, парящая над спортсменами в будущем спортивном событии. Вышеприведенная демо разработчик обещает.

Control your iPhone with your eyes. Just look at a button to select it and blink to press. Powered by ARKit 2. #ARKit #ARKit2 #WWDC #iOS pic.twitter.com/ow8TwEkC8J

— Matt Moss (@thefuturematt) June 7, 2018

Мониторинг лица и глаз

Наблюдение за глазами приближается к VR, что позволяет улучшить графику и больше способов контролировать вещи с помощью простых движений глаз — или даже сделать прямой контакт для потрясающих интимных социальных событий. В AR его можно использовать для управления зависанием интерфейсов, изменения событий на основе эмоций или выражений или картографических аватаров, чтобы делать то, что кукла мимикой.

#UnityARKitPlugin ARKit2 — the hits keep coming — just added an example to show new face tracking features… and you thought I couldn’t embarrass myself more than I already have 🙂 pic.twitter.com/ZOzhjfRKTf

— Jimmy A (@jimmy_jam_jam) June 5, 2018

ARKit 2 может отслеживать движение глаз, используя камеру TrueDepth, обращенную к iPhone X, которая, вероятно, также попадет на другие iPhone Apple, которые появятся в этом году, и, возможно, будущие iPad от iPad. Результаты, основанные на экспериментах разработчиков, которые наблюдаются в Twitter, уже впечатляют. Это может быть пробный пробег, чтобы развиваться, где последуют будущие технологии отслеживания будущего Apple. Возможно, в конце концов это будет в гарнитурах. Или он будет использоваться, чтобы найти способы не просто читать то, что мы смотрим, и делать контролируемые глазом интерфейсы hands-free, но превращать наши выражения и эмоции в информацию. Или это могло бы помочь создать совершенно новую волну мемуадских марионеток.

Adding shadows to a virtual object was a big step for immersion in #AugmentedReality …now we have “scene reflection” from @Apple #ARKit2 #WWDC18 #iOS12 where #AR objects reflect the real-world scene around them like this virtual bowl reflecting a real banana on the table! 🤯 pic.twitter.com/Ouih720AMA

— Helen Papagiannis, Ph.D. (@ARstories) June 11, 2018

Виртуальные объекты живут повсюду

Сохранение виртуальных вещей — когда вы «оставляете» виртуального плюшевого медведя на реальной таблице, и он все еще присутствует, когда вы возвращаетесь на более поздний сеанс AR — похоже, что он готов перепрыгнуть через приложения. iOS 12 может обрабатывать AR в браузере или где-либо еще благодаря новому распространенному формату, разработанному с Pixar, называемому USDZ, и именно так Apple превратит 3D-файлы в объекты AR-ready.

Пока что он нацелен на все устройства iOS. Это может быть универсальным форматом повсюду, но это может быть большая битва. ARKit 2 также может улучшить эти виртуальные вещи: 3D AR-творения теперь могут отображать в них объекты реальной жизни. Это, плюс реалистичные тени, может заставить все почувствовать себя еще более настоящим.

iPhone AR теперь, гарнитура AR позже

Мы не будем знать гораздо больше о том, как Apple видит на самом деле AR, пока iOS 12 не придет в свою окончательную форму с гораздо более поддерживаемыми приложениями. И кто знает: возможно, новые iPhone, ожидаемые в сентябре, будут иметь несколько усовершенствований аппаратного обеспечения, чтобы сделать AR еще лучше (например, камеры TrueDepth 2).

Но вот что: эта легендарная гарнитура Apple, всякий раз, когда она прибывает, становится все более и менее тяжелым грузом с каждым современным продвижением ARKit. В определенный момент гарнитура сводится к соображениям конструкции, ограничениям батареи и достижению реальной цены. Потому что на самом деле это будет кишка iPhone 13 (или что-то еще, что называется iPhone 2020), просто переполненная в другую форму.

В конце концов, у Apple уже есть много этого материала AR, работающего на вашем iPhone и iPad уже: ему просто нужно выяснить, как привязать его к голове. Есть долгий путь, но работа изнутри кажется, что это может быть самый умный путь.