Техника
8K

Vision Pro: что нужно знать о шлеме смешанной реальности от Apple

Что он умеет, когда выйдет и сколько будет стоить
25
Vision Pro: что нужно знать о шлеме смешанной реальности от Apple
Аватар автора

Артём Мазанов

добавил Vision Pro в вишлист

Страница автора

5 июня Apple представила шлем смешанной реальности Vision Pro. Это первый абсолютно новый продукт компании за несколько лет.

Как писали СМИ, работа над этим шлемом стартовала еще в 2015 году. Изначально Apple планировала создать легкие очки смешанной реальности, которые можно было бы носить с собой. Но инженеры отказались от этой идеи из-за технологических трудностей и начали работать над более громоздким устройством. Презентация устройства несколько раз переносилась, но в 2023 году Apple все же рассказала о нем.

Рассказываем, что уже известно о шлеме.

Как работает Vision Pro

Vision Pro — шлем смешанной реальности. Он может работать в двух режимах: полностью скрывать реальный мир или дополнять его. Переключаться между режимами можно с помощью колесика Digital Crown. Чтобы размыть реальный мир или, наоборот, проявить его, нужно прокрутить колесико.

Apple не раскрыла массу устройства. По словам журналистов, Vision Pro весит меньше 500 грамм. Apple использовала легкие материалы — корпус выполнен из алюминия. Для максимального снижения веса компания отказалась от встроенного аккумулятора. Пользователям придется носить с собой в кармане внешний или подключать шлем к источнику питания.

Управлять устройством нужно взглядом и движениями рук. Физических контроллеров нет. Например, для открытия приложения или окна нужно коснуться большого пальца указательным. А для прокрутки можно просто двигать запястьем. Камеры и сенсоры устройства обнаруживают руки пользователя, даже если они находятся на коленях.

За авторизацию отвечает Optic ID. Это новая технология аутентификации, похожая на Touch ID и Face ID. Она сканирует радужную оболочку глаз того, кто надел шлем, и сравнивает ее с данными владельца устройства. Apple утверждает, что система может различить даже близнецов.

Технология EyeSight поможет частично оставаться в реальном мире. Когда пользователь Vision Pro общается с другими людьми, они могут увидеть его глаза через шлем. Но на самом деле это съемка изнутри устройства, стекло непрозрачное.

Глаза отображаются на экране, если пользователь находится в режиме дополненной реальности. То есть, видит окружающий мир, но использует AR-технологии.

Если пользователь находится в режиме виртуальной реальности и вообще не видит реальный мир, на дисплее Vision Pro другим людям будет показываться анимация, а не глаза пользователя. Если они к нему подойдут, владелец Vision Pro увидит их сквозь виртуальную реальность, и на дисплее появятся его глаза.

Вот как будет выглядеть шлем, когда пользователь будет находиться в режиме виртуальной реальности. Источник: Apple
Вот как будет выглядеть шлем, когда пользователь будет находиться в режиме виртуальной реальности. Источник: Apple

Люди с проблемами со зрением тоже смогут пользоваться Vision Pro. Но им придется дополнительно купить линзы Zeiss, которые затем нужно закрепить на устройстве.

Гарнитура подстраиваться под конкретного пользователя. При первой настройке расстояние между линзами-экранами изменится в зависимости от расстояния между глазами. Пользователи смогут регулировать упругость и длину ремешка, который удерживает шлем на голове.

Vision Pro умеет снимать трехмерные фото и видео. Эти файлы можно потом просматривать на шлеме и будто возвращаться во время, когда их отсняли.

Также в Vision Pro открываются обычные фото и видео из библиотеки iCloud. Панорамные фотографии растягиваются вокруг поля зрения пользователя, как будто он прямо сейчас находится на месте съемки.

Трехмерные фото и видео — еще один вид воспоминаний. Источник: Apple
Трехмерные фото и видео — еще один вид воспоминаний. Источник: Apple

Новая гарнитура работает под управлением visionOS. Это новая операционная система со своим магазином приложений. Пользователям будут доступны все стандартные приложения: Safari, «Сообщения», «Заметки», FaceTime и «Карты». Apple обещает поддержку сотни приложений, популярных на Айфонах и Айпадах.

Apple не объяснила, почему в названии устройства есть слово Pro. Впервые с 2006 года компания представила сразу профессиональное устройство, пропустив более простую версию для обычных пользователей.

В случае с Айфонами, Макбуками, часами и наушниками разница между обычной линейкой и продвинутой очевидна — это более мощное устройство, которое предназначено для определенных задач. Журналисты отмечают, что на презентации Apple почти не уделила внимания профессиональным задачам, для которых подойдет это устройство, а показала лишь бытовое применение.

Технические характеристики

Компания их почти не озвучила. Но вот что уже известно:

  • два дисплея, которые выполнены по технологии microLED. Они способны отображать 23 миллиона пикселей. Каждый дисплей дает разрешение больше, чем 4К;
  • пять датчиков, 12 камер, шесть микрофонов и два динамика;
  • Vision Pro работает на двух чипах: M2 Ultra и новом R1;
  • задержка вывода изображения с камер составляет 12 миллисекунд;
  • есть активная система охлаждения;
  • от внешнего аккумулятора устройство может проработать до двух часов.
Камеры и датчики в Vision Pro. Источник: Apple
Камеры и датчики в Vision Pro. Источник: Apple
Динамики в Vision Pro. Источник: Apple
Динамики в Vision Pro. Источник: Apple

Для чего нужен Vision Pro

Пока ответа на этот вопрос нет. Это первый продукт Apple, после презентации которого сложно выделить хотя бы узкую группу людей, которые могут купить устройство для регулярного использования. Но все же есть несколько ключевых сценариев, ради которых можно приобрести шлем.

Фильмы и сериалы. Это один из самых вероятных популярных сценариев. На старте продаж покупателям будет доступен каталог фильмов из Apple TV+ и Disney+. Пользователи смогут менять размер виртуального экрана и перемещать его в пространстве. Также будет отдельный режим для просмотра кино — имитация зала кинотеатра с затемнением фона вокруг. Apple использует формат Immersive Video, который позволяет смотреть видео с углом зрения 180 градусов.

Скорее всего, отслеживание глаз позволит пользователям четко фокусироваться на определенных объектах из фильма и больше погружаться в просмотр. Корреспондент The Verge пишет, что разница в картинке по сравнению с обычными мониторами напоминает переход от SD-телевизора к 4K-устройству.

Для просмотра фильма можно выбрать любой задний фон. Например, переместиться в горы. Источник: Apple
Для просмотра фильма можно выбрать любой задний фон. Например, переместиться в горы. Источник: Apple

Спортивные события. Их можно будет смотреть с дополнительным контентом на виртуальном экране: расстановкой команд, счетом и ходом игры. Но это касается только тех игр, которые игры Apple снимает собственными камерами. Они позволят владельцу Vision Pro ощутить себя прямо на площадке. Во время презентации показали дополнительные возможности при просмотре баскетбольных и футбольных матчей, а также гонок «Формулы 1».

По данным Business Insider, транслировать спортивные события будет телеканал ESPN. Пользователи смогут смотреть до пяти игр одновременно и переключаться между камерами.

Как могут выглядеть несколько трансляций на одном экране. Источник: Apple
Как могут выглядеть несколько трансляций на одном экране. Источник: Apple

Игры. На старте пользователи смогут сыграть в более чем 100 тайтлов сервиса Apple Arcade. Для этого понадобится контроллер, например, от Xbox или PlayStation. Во время презентации компания уделила много времени играм и пообещала развивать это направление.

Apple объявила о партнерстве с компанией Unity. Пользователям шлема будут доступны игры и программы, созданные на движке разработчика.

Для игр подойдет стандартный контроллер от Playstation. Источник: Apple
Для игр подойдет стандартный контроллер от Playstation. Источник: Apple

Созвоны. Apple несколько раз за время презентации показала, как пользователи могут использовать шлем для созвонов с коллегами в FaceTime. Другие участники беседы видят цифровое представление собеседника.

Это не потоковое видео — лицо генерирует нейросеть.

Цифровой аватар пользователя Vision Pro. Источник: Apple
Цифровой аватар пользователя Vision Pro. Источник: Apple

Рабочие задачи. Vision Pro можно использовать как дополнение к Макбуку. Снимать шлем для этого не придется. Один из сценариев: вывести в дополнительную реальность некоторые окна, а основную работу продолжать делать на ноутбуке. Гарнитура поддерживает физическую клавиатуру и трекпад.

Владелец Vision Pro сможет вывести на виртуальный экран несколько приложений одновременно, а потом переключаться между ними поворотом головы. Apple уверяет, что пользователь без труда прочтет даже самый мелкий текст.

Мнения журналистов, которые смогли протестировать шлем

После презентации Vision Pro показали журналистам, которые были аккредитованы на WWDC. Они не смогли его испытать, устройство можно было только осмотреть и сфотографировать. Но некоторые издания все же получили приглашение на тестирование. Каждый журналист провел со шлемом около получаса. Во время демонстраций Apple показывала заготовленные ролики с 3D-эффектами, включая фрагменты из «Аватара».

В основном отзывы на шлем положительные. Журналисты называют Vision Pro лучшим устройством в линейке гарнитур дополненной и виртуальной реальности, хвалят качество изображения, отслеживание взгляда и движений рук. Без критики тоже не обошлось. Журналисты пока не поняли, для кого создан этот продукт и в каких сценариях его будут массово использовать.

The Wall Street Journal. Джоанна Стерн назвала шлем очень удобным и сравнила с «гигантскими Apple Watch в хорошем смысле». Она считает, что эта гарнитура значительно комфортнее, чем Oculus Quest 2.

Стерн рассказала, что через 15 минут после начала тестов начала ощущать вес устройства и дискомфорт. Инженеры Apple объяснили, что шлем не был настроен под ее лицо. Журналистку также немного тошнило, в ответ на это компания пообещала доработать гарнитуру к следующему году.

Журналистка отметила, что в Vision Pro очень легко переключаться между реальным и цифровым мирами. Колесико Digital Crown позволяет плавно регулировать степень погружения в AR и VR.

Стерн похвалила качество 3D-эффектов: «Мне действительно показалось, что огромный динозавр проломил стену прямо передо мной», — рассказала она.

Reuters. Стивен Неллис отметил, что устройство еще не предназначено для массового рынка. Во время тестов представителей прессы осматривал врач, чтобы убедиться в том, что гарнитура им подходит и будет работать так, как задумано. Также один раз устройство пришлось перезагрузить.

Неллис тоже похвалил качество 3D-эффектов и назвал ощущения от демонстраций поразительными. Журналист отметил, что детали из реальной жизни могут испортить такую идеальную обстановку. Например, дешевая пластиковая бутылка.

The Verge. Нилай Патель подтвердил, что перед началом тестирования журналистов осматривал врач. Его лицо также отсканировали с помощью Айфона, чтобы подобрать нужный размер маски. Еще отсканировали голову по бокам для калибровки звука. Шлем пока не универсальный — его нельзя просто передать другому человеку.

По словам Пателя, он ещё не видел VR-дисплея с таким высоким разрешением. Но он был намного тусклее, чем реальный свет в комнате, и журналисту пришлось привыкать к освещению после завершения тестов.

Патель пока не уверен в том, что это устройство станет массовым. Ему непонятно, кто будет его целевой аудиторией. Журналист сомневается, что шлем будет удобно носить во время массовых мероприятий. Например, днях рождения.

Financial Times. Патрик Макги рассказал, что не смог найти журналиста, который остался бы недоволен шлемом после окончания тестирования. Как и корреспондентку The Wall Street Journal, Макги поразила демонстрация с динозавром. Он вскрикнул, когда хищник попытался укусить его за руку в дополненном мире.

Макги считает, что у Apple получилось сделать качественную систему навигации. По его мнению, вряд ли можно разработать более интуитивно понятный переход от одного приложения к другому. Он похвалил точность отслеживания рук и глаз.

Сколько стоят Vision Pro и где их можно купить

Продажи Vision Pro начнутся в начале 2024 года. Когда точно — пока неизвестно. Сначала шлем можно будет купить только в США за 3499 $⁣ (284 573 ₽). Но затем его обещают начать продавать в других странах. Скорее всего, в РФ устройство не получится купить официально, потому что Apple покинула российский рынок.

Как пишет Bloomberg, Apple планировала продавать Vision Pro примерно по себестоимости. Но компания все равно может зарабатывать на нем около 25 миллиардов долларов в год.

Вероятно, проблемы с покупкой устройства возникнут и в США. Для правильной работы Vision Pro насадка на устройстве должна идеально подходить пользователю и плотно прилегать к лицу. Ее будут поставлять в нескольких формах и размерах. Испытать и подобрать нужную можно будет в физических магазинах.

Журналисты рассказали, что перед началом тестирования Vision Pro их лица отсканировали, чтобы подобрать маски. Такая точность нужна в том числе для корректной работы датчиков и камер. Сканирование вряд ли получится провести в домашних условиях, только если Apple не разработает специальное приложение.

Мы постим кружочки, красивые карточки и новости о технологиях и поп-культуре в нашем телеграм-канале. Подписывайтесь, там классно: @t_technocult

Артём МазановЧто вы думаете о новом устройстве Apple? Расскажите, что вам в нем нравится, а что нет:
  • friendЕсли на практике всё будет как на презентации то это революционное устройство. Мир фильма "первому игроку приготовиться" становится ещё ближе))6
  • Василий Анисимов> Сканирование вряд ли получится провести в домашних условиях, только если Apple не разработает специальное приложение. В смысле? Они же прям на презентации показали, как очки сканируют.0
  • Rodney MullenДумаю, что это будет прорыв и новый огромный рынок. Мы уже придумали концепцию приложения для них, сейчас вот жду не дождусь, когда дадут доступ к SDK чтобы начать разработку.0
  • Артём МазановВасилий, речь про подбор тканевой маски перед покупкой. Она никак не регулируется и должна плотно прилегать. Некоторые журналисты писали, что на них немного просвечивала из-за того, что не точно подобрана. На презентации показывали сканирование лица для других задач)2
  • Lupus EstДумаю эта штука с батареей на 2 часа умрет как и прочие проекты подобных устройств. Лет через 5-6, ну 10 следующая версия, без дурацкого проводного аккумулятора, которого хватает всего на 2 часа, и в форм-факторе обычных очков - да, наверно взлетит, заменив собой тот же телефон. Это будет полностью другое устройство, не плюсом к чему-то, а именно самодостаточная вещь, включающая в себя камеру, телефон и тд. Да, оно такое будет круто. А это… ну как временный мертворожденный этап - пусть будет.3
  • Sergey AveryanovСмотрел ролик про него на канале Marques Brownlee и он гораздо более скептичен насчет массы. Журналистам предусмотрительно выдавали шлем не более чем на полчаса и за это время дискомфорта у них действительно не возникало, но устройство явно задумано для более длительного использования и там уже может быть хуже. А вообще странный девайс и вряд ли будет кому-то интересен кроме энтузиастов ибо: 1. Дорого 2. Автономности нет, а без нее весь смысл дополненной реальности теряется, зачем дополнять реальность сидя у розетки? Впрочем, даже если бы была, то помнится Google Glasses активно стебали за нелепый вид пользователя в них. Тут эта нелепость умножается на 10. 3. Сценарии использования непонятны - сидеть на диване и смотреть видосы в в VR? Короче говоря ничего кроме вау-эффекта я не увидел. Может в следующих поколениях этот девайс станет более полезным, но пока это просто дорогая и бестолковая игрушка.4
  • Lupus, у мобильных телефоном тоже когда-то были батареи на два часа)3
  • тьфунатебя ¯\_(ツ)_/¯На презентации выглядело круто. EyeSight вообще бомба. Но в массы в таком виде вряд ли пойдет. 2 часа работы - слишком мало. Для работы точно нет, не на все фильмы хватит. Думаю ставки будут на следующие поколения. Первый айфон тоже был очень сырым. Как и первые яблочасы.1
  • Василий АнисимовАртем, ну может сделают несколько размеров в комплекте, как ремешки часов/затычки в наушниках.0
  • Артём МазановВасилий, да, но при этом Apple сама пишет, что для подбора надо будет прийти в физический магазин. Кажется, что на первом этапе все же просто так шлем будет не купить, слишком эту точность все отмечают0
  • Василий АнисимовАртем, про некоторые ремешки часов они, кстати, так же говорили. Но в итоге, вроде, какую-то замеряли придумали.0
  • Василий АнисимовSergey, повторяете точь-в-точь, что до этого люди говорили про первые айфоны и айпады - дорого, приложений нет, автономности нет, ничего не умеет, нет физической клавы, большая фоторамка, растянутый айфон и тд 🙂 Я, например, как разработчик, хотел бы попробовать использовать ее для работы, вместо мониторов. Тогда и появляется "смысл дополнять реальность сидя у розетки".0
  • Sergey AveryanovВасилий, автономность в один день и 2 часа это две большие разницы. Тогда людям было непривычно, что телефон за день разряжается - кнопочные аппараты жили гораздо дольше. Но практика показала, что с автономностью в один день вполне можно жить. 2 часа же это совсем другая история - снять устройство с зарядки утром, пользоваться весь день, а вечером поставить на зарядку уже не выйдет. По приложениям - даже если бы они были, я не вижу каких-то преимуществ ни удобстве ни в скорости в использовании приложений в шлеме относительно компьютера/смартфона. VR это игры и потребление контента впервые очередь благодаря эффекту присутствия который она может обеспечить, но Apple никогда не была прои игры и у меня есть сомнения что она сможет успешно зайти на этот рынок. Для AR как я уже и сказал это устройство практически бесполезно - кому нужна AR дома или в офисе? Разработчику оно может быть и интересно - я же сразу оговорился, что устройство для энтузиастов. Но коммерческий успех обеспечивает массовый пользователь, а не энтузиасты и я сильно сомневаюсь что даже маркетологи от бога которые работают в Apple смогут продать эту штуку массовому пользователю.3
  • Sergey AveryanovВасилий, pro это маркетологическая ерунда для оправдания ценника ибо профессионалы и энтузиасты это разное. Какие профессиональные задачи может решать данный девайс и которые не могут решить с той же производительностью более простые и доступные устройства? Никакие.3
  • divasoftCGВасилий, а студии не начнут, так как у пользователей не будет этих очков, потому что нет причины их покупать. Все, круг замкнулся. Уже десятки раз разные компании наступали на эти же грабли с очками, ну огрызку видимо нужно наступит на свои собственные.1
  • Sergey AveryanovВасилий, Вы говорите так, будто за что бы Apple не взялась, все у нее получается. Вот только это такая же компания как и другие у и у нее есть своя пачка провальных проектов о которых фанбои не любят вспоминать. В лучшем случае этот шлем станет нишевым устройством (еще более нишевым чем другие VR ибо цена). В худшем провалится. Это если в следующем поколении не будет какого-то радикального улучшения, а я думаю его не будет.1
  • Виталий СекретЧушь собачья. Неудобный и ненужный вообще. Считаю что проигрывает как минимум устройством от SONY и VALVE.0
  • Lupus EstMary, честно, что бы вот на 2 часа - я такого не помню. В 97м году, когда у меня появился телефон, батарейки в нем уже хватало на целый день, даже больше. Возможно сильно раньше, когда они только-только появились, так действительно было.0
  • Lupus, я имела ввиду САМЫЕ первые телефоны (весом в килограмм, и ценой тоже в несколько тысяч долларов)1
  • Igor MandrinВиталий, Sony тут не рядом даже. У них слишком узкоспециализированное устройство. Apple пытается влезть в нишу OQ3. Но цена сыграет значительную роль. OQ не хватает главной фишки Apple - дизайн операционки, приложений и взаимодействия пользователя со всем этим. Дальше чистый маркетинг. Устройство Valve хорошее получилось для своего времени, но опять же, оно привязано к компу, и помимо игр вариантов взаимодействия не много. Если кто-то ищет устройство для работы с хорошим экраном, то нужно смотреть в сторону Pimax. Дешевле Apple в 2,5 раза с очень хорошим экраном. Для игр каждый день OQ3 будет за глаза. Да даже Pico 4 все ещё очень хороший вариант. Apple, как всегда станет таким макбуком на рынке PC - нишевое для фанатов марки и жертв рекламы.0