Содержание
Open Dreamer: открытая world model для интерактивных миров
Команда исследователей при поддержке Reactor выпустила Open Dreamer — открытую реализацию подхода Dreamer 4. Модель генерирует продолжение мира Minecraft кадр за кадром и учитывает действия игрока: вместо заранее записанного ролика получается интерактивная сцена, которая меняется в ответ на управление.
Что именно открыли
Авторы опубликовали код обучения на JAX и Flax, отдельный минимальный модуль для локального запуска и браузерную демонстрацию. В ней можно переключаться между настоящей игрой и сгенерированным моделью миром. В основе системы — видеотокенизатор и модель динамики на 1,6 млрд параметров, которая предсказывает следующий визуальный кадр и следующее действие.
Токенизатор сжимает видео примерно в 100 раз, а модель использует пространственное внимание внутри кадра и причинное внимание между кадрами. Авторы также раскрыли практический рецепт обучения: 200 тысяч шагов, оптимизатор Muon, экспоненциальное усреднение весов и набор приёмов, которые помогли не допустить ухудшения картинки при снижении ошибки обучения.
Почему это больше, чем генератор видео
Обычная видеомодель создаёт готовую последовательность, а world model должна поддерживать состояние сцены и реагировать на команды пользователя. Такой подход может стать основой для игровых прототипов, интерактивных роликов, симуляторов и новых форм контента, где зритель влияет на происходящее прямо во время просмотра.
Для креаторов релиз важен как ранняя демонстрация следующего шага после text-to-video: генерация превращается из производства клипа в создание управляемого визуального пространства. Пока Open Dreamer остаётся исследовательским проектом и требует серьёзных вычислительных ресурсов — при обучении авторы использовали ускорители B200 и добились загрузки вычислений на уровне 57–58%.
Что доступно сейчас
На странице проекта можно попробовать демо и изучить полный код пайплайна. При этом в опубликованной версии пока нет полного цикла обучения агента с reinforcement learning и не приведены итоговые FVD-оценки, поэтому воспринимать Open Dreamer как готовый игровой движок рано. Главная ценность релиза — воспроизводимый открытый фундамент для разработчиков интерактивных AI-миров.