Mercredi, Microsoft a présenté Muse, un modèle d’IA générative conçu pour transformer la manière dont les jeux vidéo sont imaginés, développés et préservés. Fondé sur le World and Human Action Model (WHAM), Muse peut générer des visuels de jeux, prédire les commandes des manettes, ou même combiner les deux pour créer des séquences de jeu dynamiques. Cette innovation, développée en collaboration avec Ninja Theory, de Xbox Game Studios, vise à donner aux développeurs de jeux vidéo et aux créateurs d’histoires de nouveaux outils pour enrichir leurs processus créatifs.
Les recherches consacrées à Muse, publiées dans la revue internationale Nature, ont été menées par les équipes Game Intelligence et Teachable AI Experiences (Tai X) de Microsoft Research. Le modèle a été entraîné sur plus d’un milliard d’images et d’actions de manette issues de Bleeding Edge, un jeu multijoueur développé par Ninja Theory. Cet ensemble de données représente plus de sept années de jeu continu, ce qui donne à Muse une compréhension approfondie des mondes en 3D, de la physique et des interactions des joueurs.
Comment fonctionne Muse
Les capacités de Muse reposent sur son aptitude à générer des séquences de jeu cohérentes, variées et persistantes. Par exemple, à partir d’une invite, Muse peut créer un extrait de jeu de deux minutes qui respecte les mécaniques du jeu (cohérence), introduit des variations (diversité) et conserve les éléments clés tout au long de la séquence (persistance). Les premières versions du modèle manquaient de précision, mais un entraînement itératif sur des grappes de GPU avancées, notamment les H100 de NVIDIA, a considérablement amélioré ses performances.
L’une des fonctionnalités les plus remarquables de Muse est son potentiel pour faire revivre des jeux classiques. En analysant les données de jeu et les éléments visuels, Muse pourrait optimiser d’anciens titres pour les appareils modernes et les rendre accessibles à de nouvelles générations de joueurs. « D’innombrables jeux classiques liés à du matériel vieillissant ne sont plus jouables », a déclaré Fatima Kardar, vice-présidente corporate de Microsoft chargée de l’IA appliquée aux jeux vidéo. « Muse pourrait changer la manière dont nous préserverons et découvrirons ces jeux à l’avenir. »
L’IA dans le jeu vidéo : un outil pour les développeurs, pas un remplacement
Malgré les capacités de Muse, Microsoft insiste sur le fait que l’IA n’a pas vocation à remplacer les développeurs humains. Dom Matthews, directeur de Ninja Theory, a souligné que Muse est un outil destiné à renforcer la créativité, et non à s’y substituer. Le rôle de l’IA dans le jeu vidéo reste toutefois un sujet controversé. Alors que les studios continuent d’adopter des outils fondés sur l’IA, les inquiétudes concernant l’automatisation et la suppression d’emplois persistent. Microsoft a rassuré les développeurs en affirmant que les créateurs de jeux resteront au centre de ses initiatives dans le domaine de l’IA.
Les futures applications de Muse
Microsoft explore déjà le potentiel de Muse pour les modèles d’IA jouables en temps réel et le prototypage de nouvelles expériences de jeu. L’entreprise envisage également des applications au-delà du jeu vidéo, notamment dans l’aménagement intérieur et la modélisation architecturale, grâce à la capacité de Muse à visualiser et à parcourir des espaces en 3D.
« Au-delà du jeu vidéo, je suis enthousiasmé par le potentiel de cette technologie pour permettre la création d’assistants d’IA capables de comprendre les choses et d’en proposer une visualisation : réaménager la cuisine de votre maison, repenser un espace commercial, construire un jumeau numérique d’un atelier d’usine afin de tester et d’explorer différents scénarios », a déclaré Peter Lee, président de Microsoft Research, dans un billet de blog.