Notebookcheck Logo

Мета ИИ дебютирует на гарнитурах Quest 3

Антони Гамильтон-младший опробует Meta AI в игре Quest (Источник изображения: Meta)
Антони Гамильтон-младший опробует Meta AI в игре Quest (Источник изображения: Meta)
В продолжение мультимодального ИИ в умных очках Ray Ban Meta, владельцы Quest 3 в США и Канаде скоро смогут использовать Meta AI, находясь в гарнитуре. Meta откажется от существующих голосовых команд на Horizon OS, поскольку Meta AI with Vision сможет обрабатывать как голосовые команды, так и визуальный ввод Passthrough.

Гарнитуры Quest получат экспериментальное обновление с Meta AI в августе этого года. Функция будет ограничена голосовыми командами на Quest 2, но Meta AI на гарнитуре Quest 3 будет обладать всеми мультимодальными возможностями, как в умных очках Ray Ban Meta. Кроме того, Meta AI на этих гарнитурах смешанной реальности сможет получать в режиме реального времени данные о погоде, спорте или местных новостях через Bing.

Одной из функций, которую компания анонсирует в Quest 3, является Meta AI with Vision. Хотя владельцы "умных" очков Ray Ban Meta пользуются этой функцией с апреля, это первый случай, когда приложение получит доступ к проходным камерам основной гарнитуры Quest 3. Meta ничего не говорила о выпуске API passthrough для сторонних разработчиков, но это кажется вполне вероятным, тем более что все больше разработчиков просят предоставить им такой доступ.

Возможно, в более поздних обновлениях пользователи смогут задавать вопросы не только о физических объектах, но и об объектах в VR-среде, поскольку Meta заявляет, что ее визуальная функциональность ИИ доступна только в Passthrough "для начала". Однако в настоящее время возможности Meta AI with Vision ограничены анализом объектов в реальном окружении, снятых с помощью фронтальных камер passthrough. Помимо визуального ввода, существуют и другие возможности использования Meta AI в смешанной реальности с помощью голосовых команд. Это фактически заменяет существующие голосовые команды на гарнитурах Quest, поскольку эти скоро будут устаревшими.

Meta AI with Vision впервые был запущен на смарт-очках Ray-Ban в качестве бета-версии, ограниченной США и Канадой. Аналогично, экспериментальные функции искусственного интеллекта на гарнитурах Quest также будут ограничены странами ЕС. Meta - как Apple и другие технологические гиганты, базирующиеся в США - испытывает трудности с регуляторами конфиденциальности данных в ЕС, и в результате решила не выпускать будущие мультимодальные модели ИИ в этом регионе, несмотря на то, что Llama имеет открытый исходный код. Компания планирует выпустить только текстовую версию своей модели Llama 3, чтобы обслуживать пользователей в ЕС.

Источник(и)

Этот важный материал точно понравится твоим друзьям в социальных сетях!
'
Sarfo Ashong-Listowell, 2024-07-29 (Update: 2024-08-15)