Agora-1 : Modèle de monde multi-agent open source pour simulation partagée en temps réel

Odyssey a publié Agora-1, le premier modèle du monde multi-agent qui permet à plusieurs participants — humains ou IA — de partager et d'interagir dans la même simulation générée en temps réel. Le modèle prend en charge jusqu'à quatre joueurs dans une simulation de deathmatch partagée, où chaque pixel est généré par le modèle en temps réel, fonctionnant comme un moteur de jeu appris.

Architecture : simulation et rendu découplés

Agora-1 sépare le modèle du monde en deux composants appris distincts :

• Modèle de simulation : entraîné sur l'état interne du jeu (par exemple, GoldenEye), il apprend la dynamique du gameplay et comment les transitions d'état se produisent à partir des actions des joueurs.
• Modèle de rendu : un modèle du monde basé sur DiT, conditionné par l'état de jeu partagé (et non par des invites ou des images) pour générer des représentations visuelles cohérentes depuis plusieurs points de vue simultanément.

Ce découplage est analogue à un moteur de jeu moderne, mais les deux composants sont entièrement appris à partir de données. Le modèle manipule directement l'état sous-jacent du jeu, permettant de générer des niveaux entièrement nouveaux tout en préservant la dynamique du gameplay.

Capacités clés

• Jusqu'à 4 participants simultanés dans une simulation partagée.
• Streaming de pixels en temps réel généré par Agora-1.
• L'état du monde partagé suit la santé, la position et d'autres attributs des agents.
• Peut générer des niveaux inédits cohérents avec la dynamique du jeu source.

Comparaison avec les travaux précédents

Les approches antérieures comme Multiverse concatènent les états des agents en une seule représentation, tandis que Solaris empile les participants le long de la dimension de séquence (ne s'adaptant pas linéairement au nombre de joueurs). Les deux peinent à maintenir la cohérence lorsque les joueurs se perdent de vue. L'approche découplée d'Agora-1 évite ces limitations.

Cas d'utilisation

Odyssey cible des applications dans les jeux vidéo, la robotique, la défense, l'éducation et la formation de modèles fondamentaux. L'architecture peut être étendue pour gérer des simulations et des représentations d'état de plus en plus complexes, au-delà de GoldenEye.