Google DeepMind's Genie 2 - генератор 3D-миров в реальном времени

Google DeepMind, дочерняя компания Google, занимающаяся исследованиями в области искусственного интеллекта, по адресу анонсировала Genie 2основополагающую модель мира, которая может создавать "управляемые действиями, играбельные 3D-среды" для быстрого создания прототипов и обучения агентов ИИ.

Компания утверждает, что Genie 2 опирается на работу своего предшественника и может создавать "огромное разнообразие богатых 3D-миров" Она может моделировать взаимодействие объектов, анимацию персонажей, физику, а также неигровых персонажей (NPC) с их анимацией и взаимодействием. Модель воспринимает как текстовые, так и визуальные подсказки.

Genie 2 может запоминать части мира, которые не видны игроку, и визуализировать их, когда они снова становятся видимыми, подобно тому, как работает Level of Detail (LOD) в играх, регулируя сложность объектов и окружения в зависимости от поля зрения игрока (FOV).

Модель может генерировать новый контент в режиме реального времени и поддерживать постоянство мира "до минуты" Она также может визуализировать окружение с разных точек зрения, в том числе от первого лица, от третьего лица или в изометрии.

Она также может генерировать такие продвинутые эффекты, как дым, взаимодействие объектов, гидродинамика, гравитация, продвинутое освещение и отражения. Компания DeepMind утверждает, что модель позволяет быстро создавать прототипы новых концепций и идей. Вы также можете создавать агентов ИИ и управлять ими с помощью простых подсказок.

Многие компании создают фундаментальные модели мира, которые могут моделировать и создавать представления окружающей среды. Например, Decart's Oasis позволяет Вам играть в созданную ИИ версию Minecraft в реальном времени, а стартап World Labs, основоположник ИИ Фей Фей Ли, также имеет 3D-генератор https://www.notebookcheck.net/World-Labs-new-AI-system-can-make-interactive-3D-worlds-from-2D-images.927741.0.html.