Runway показала GWM Worlds 2

Runway показала GWM Worlds 2

GWM Worlds 2 создает интерактивный мир в реальном времени с разрешением 720p и частотой 24 кадра в секунду. Вместе с картинкой модель генерирует звук, а сама сцена продолжается столько, сколько пользователь с ней взаимодействует.

Можно ходить, ездить, двигать камеру, общаться с персонажами и менять окружение обычными текстовыми командами. Например, включить свет, заставить героя побежать или устроить пожар.

Самое интересное, управление можно передать ИИ агенту. Он сам двигается по миру, взаимодействует с объектами и выполняет поставленную задачу. По сути Runway превращает генеративное видео в симулятор для обучения и тестирования агентов.

Есть даже мультиплеер. Один человек может управлять персонажем, второй менять окружающий мир, либо несколько игроков могут взаимодействовать внутри одной сцены.

Пока это исследовательская версия. При резких движениях камеры качество может падать, а длинные сессии постепенно теряют стабильность. Но направление уже выглядит как следующий шаг после обычной генерации видео, когда ИИ создает не ролик, а целый интерактивный мир.