Мета ИИ дебютирует на гарнитурах Quest 3
Гарнитуры Quest получат экспериментальное обновление с Meta AI в августе этого года. Функция будет ограничена голосовыми командами на Quest 2, но Meta AI на гарнитуре Quest 3 будет обладать всеми мультимодальными возможностями, как в умных очках Ray Ban Meta. Кроме того, Meta AI на этих гарнитурах смешанной реальности сможет получать в режиме реального времени данные о погоде, спорте или местных новостях через Bing.
Одной из функций, которую компания анонсирует в Quest 3, является Meta AI with Vision. Хотя владельцы "умных" очков Ray Ban Meta пользуются этой функцией с апреля, это первый случай, когда приложение получит доступ к проходным камерам основной гарнитуры Quest 3. Meta ничего не говорила о выпуске API passthrough для сторонних разработчиков, но это кажется вполне вероятным, тем более что все больше разработчиков просят предоставить им такой доступ.
Возможно, в более поздних обновлениях пользователи смогут задавать вопросы не только о физических объектах, но и об объектах в VR-среде, поскольку Meta заявляет, что ее визуальная функциональность ИИ доступна только в Passthrough "для начала". Однако в настоящее время возможности Meta AI with Vision ограничены анализом объектов в реальном окружении, снятых с помощью фронтальных камер passthrough. Помимо визуального ввода, существуют и другие возможности использования Meta AI в смешанной реальности с помощью голосовых команд. Это фактически заменяет существующие голосовые команды на гарнитурах Quest, поскольку эти скоро будут устаревшими.
Meta AI with Vision впервые был запущен на смарт-очках Ray-Ban в качестве бета-версии, ограниченной США и Канадой. Аналогично, экспериментальные функции искусственного интеллекта на гарнитурах Quest также будут ограничены странами ЕС. Meta - как Apple и другие технологические гиганты, базирующиеся в США - испытывает трудности с регуляторами конфиденциальности данных в ЕС, и в результате решила не выпускать будущие мультимодальные модели ИИ в этом регионе, несмотря на то, что Llama имеет открытый исходный код. Компания планирует выпустить только текстовую версию своей модели Llama 3, чтобы обслуживать пользователей в ЕС.