Google DeepMind представила модель Genie 4 для интерактивных виртуальных миров
Google DeepMind представила Genie 4 — новую модель мира для создания интерактивных виртуальных симуляций в реальном времени. Система генерирует окружение на ходу и прогнозирует, как оно будет меняться в ответ на действия пользователя.
В созданном мире можно перемещаться с помощью клавиатуры, а сценой управлять текстовыми командами. Пользователь может менять положение камеры, настраивать погоду, добавлять людей и различные объекты. Это позволяет редактировать окружение без ручной работы в игровом движке или другом специализированном программном обеспечении.
Звук, диалоги и реалистичная физика
Одним из главных нововведений DeepMind называет генерацию звука. Genie 4 способна самостоятельно создавать шум ветра и прибоя, а также музыку, синхронизируя аудиосопровождение с происходящим в сцене.
Персонажи в виртуальных мирах могут разговаривать с пользователем и реагировать на его действия в реальном времени. Кроме того, модель должна точнее воспроизводить столкновения, аэродинамику и естественные движения людей, что делает симуляции более правдоподобными.
Для работы со сложными сценариями используется Gemini 3.8 Flash. Эта модель отслеживает происходящее, разбивает поставленную цель на последовательность шагов и проверяет по отдельным кадрам, выполнен ли каждый из них.
Связка с Gemini и возможное применение
Genie 4 опирается на несколько моделей семейства Gemini. Gemini Omni отвечает за внешний вид и поведение виртуального мира, а другие модели помогают сохранять связность симуляции. DeepMind также тестирует связку Genie 4 с Gemini 4 Argon для задач робототехники: система разбивает задачу на этапы, после чего Genie 4 визуализирует их в симулированной среде.
По данным компании, модель уже испытывают представители киноиндустрии, журналистики, образования, разработки игр и инженерии. Режиссёры используют симуляции для подготовки черновых дублей сцен, фотожурналисты превращают архивные снимки в объёмные окружения, а разработчики могут за несколько секунд собирать прототипы без написания кода для игрового движка.
DeepMind подчёркивает, что Genie 4 пока остаётся ранней экспериментальной моделью. Сейчас доступ к ней получили только ограниченные группы тестировщиков. В дальнейшем технологию планируют предоставить подписчикам Google AI Ultra через Project Genie, где ранее использовалась Genie 3. Ранний доступ также должны открыть партнёрам через Gemini API и Google AI Studio, однако сроки компания пока не назвала.
