Agora-1: Многопользовательская модель мира с открытым исходным кодом для симуляции в реальном времени

Odyssey выпустила Agora-1 — первую мультиагентную мировую модель, которая позволяет нескольким участникам (людям или ИИ) совместно использовать и взаимодействовать в одной сгенерированной симуляции мира в реальном времени. Модель поддерживает до четырёх игроков в общей симуляции deathmatch, где каждый пиксель генерируется моделью в реальном времени, работая как обученный игровой движок.

Архитектура: Разделение симуляции и рендеринга

Agora-1 разделяет мировую модель на два различных обученных компонента:

• Модель симуляции: Обучена на внутреннем состоянии игры (например, GoldenEye), изучает динамику игрового процесса и то, как состояния переходят в зависимости от действий игрока.
• Модель рендеринга: Мировая модель на основе DiT, которая, используя общее состояние игры (не подсказки или изображения), генерирует согласованные визуальные представления с нескольких точек зрения одновременно.

Такое разделение аналогично современному игровому движку, но оба компонента полностью обучены на данных. Модель напрямую манипулирует базовым состоянием игры, что позволяет генерировать совершенно новые уровни, сохраняя динамику игрового процесса.

Ключевые возможности

• До 4 одновременных участников в общей симуляции.
• Потоковая передача пикселей в реальном времени, генерируемая Agora-1.
• Общее состояние мира отслеживает здоровье, положение и другие атрибуты агентов.
• Может генерировать новые уровни, согласованные с динамикой исходной игры.

Сравнение с предыдущими работами

Предыдущие подходы, такие как Multiverse, объединяют состояния агентов в единое представление, в то время как Solaris объединяет участников по размерности последовательности (не масштабируется линейно с количеством игроков). Оба сталкиваются с проблемами согласованности, когда игроки теряют друг друга из виду. Подход Agora-1 с разделением избегает этих ограничений.

Сценарии использования

Odyssey нацелена на приложения в области игр, робототехники, обороны, образования и обучения фундаментальных моделей. Архитектура может масштабироваться для обработки всё более сложных симуляций и представлений состояний, выходящих за рамки GoldenEye.