Bien que le sujet n’est pas fréquemment abordé, l’intelligence artificielle révolutionne l’industrie du jeu vidéo en ouvrant la voie à de nouvelles méthodes de création. Parmi les projets les plus innovants à ce jour, MarioVGG, développé par Virtuals Protocol, propose un modèle capable de générer des séquences de gameplay de Super Mario Bros à partir de simples instructions textuelles. Ce concept remet en question les paradigmes traditionnels du développement en permettant de produire du contenu sans moteur de jeu classique. Comment fonctionne-t-il ? Quels sont ses atouts et ses limites ? Et surtout, que réserve l’avenir pour ce type de technologie ?
MarioVGG repose sur une approche innovante de la génération de contenu. Contrairement aux moteurs de jeu traditionnels qui calculent des interactions en temps réel, ce modèle génère des séquences vidéo image par image, en fonction de simples instructions textuelles telles que "sauter", "courir", ou encore "éviter un ennemi". Il tente ainsi de simuler les mécaniques fondamentales du jeu, comme la gravité, les collisions ou encore les interactions avec l’environnement.
Hao AI Lab à l'Université de Californie, San Diego a sélectionné Super Mario Bros. comme référence pour évaluer les performances de l'IA en raison de ses défis uniques qui testent la prise de décision en temps réel et l'adaptabilité. Contrairement aux jeux au tour par tour ou aux environnements statiques, Super Mario Bros. exige que les modèles d'IA traitent l'information et réagissent rapidement dans un monde dynamique à défilement horizontal.
Ce fonctionnement prend en compte plusieurs aspects, tout d'abord via la Diffusion vidéo, le modèle prend en entrée une image initiale et une action décrite en texte, puis génère la frame suivante en conséquence. La Cohérence spatiale et physique joue aussi son rôle, MarioVGG s'assure que le personnage ne traverse pas les obstacles et n’enfreint pas les règles du jeu. Finalement, l’entraînement est comme toutes les IA, une étape cruciale pour assurer son bon fonctionnement et l’optimiser au maximum, le modèle est alimenté par une base de 737 000 images de gameplay, il apprend au fur et à mesure à reproduire les mouvements et animations typiques de Super Mario Bros.
Cette approche ouvre des perspectives fascinantes, surtout en termes d'automatisation et de création de contenu procédural.
Mario VGG excelle dans la simulation physique réaliste car Mario sait sauter, tomber, interagir avec les plateformes et les ennemis avec une fidélité impressionnante.
La génération autonome de niveaux est parfaitement réalisée en enchaînant les séquences vidéo, c’est ainsi que le modèle produit des environnements dynamiques.
Et finalement, l’accessibilité, car tout cela ne nécessite aucun besoin en programmation, ce qui pourrait démocratiser les processus de création de jeux et ainsi le rendre accessible au grand public.
Ses principales limites
Cependant, on observe une limitation dans la résolution proposée et la vitesse, la sortie reste limitée à 64×48 pixels, avec un délai de plusieurs secondes pour générer chaque frame, limitant ainsi le principe d'interactivité. De plus, à la différence de modèles comme Genie (DeepMind), MarioVGG ne permet pas un contrôle en temps réel du personnage.
Une certaine complexité des interactions, bien que Mario peut courir et sauter, il est encore incapable de gérer des mécaniques plus avancées comme les combats ou les énigmes.
Quel impact pour le développement de jeux vidéo ?
L’arrivée de modèles comme MarioVGG peut soulever diverses interrogations sur l’impact qu’il pourrait engendrer mais la question que nous nous posons aujourd’hui : les moteurs de jeu traditionnels sont-ils menacés ?
Actuellement, MarioVGG est davantage un outil expérimental qu’un véritable concurrent à des moteurs comme Unity ou Unreal Engine. Cependant, il ouvre tout de même de nouvelles perspectives et opportunités sur divers sujets comme :
La création de niveaux dynamiques intégrés dans des jeux pourraient générer des variantes infinies de niveaux à partir d’instructions simples. Un Prototypage rapide permettant aux développeurs de produire des séquences de jeu sans passer par une phase de codage extrême. L’accessibilité, c'est-à-dire de permettre à des profils de tous niveaux, même aux non-programmeurs de concevoir des expériences interactives uniquement avec du texte.Toutefois, il faut être réaliste, les technologies sont encore loin de proposer une alternative viable aux moteurs de jeu classiques.
MarioVGG se distingue par sa capacité à générer des vidéos cohérentes et à simuler des physiques réalistes, bien qu'il soit limité par une résolution basse et l'absence de gameplay interactif. En revanche, Genie (DeepMind) excelle dans la création de jeux jouables à partir de descriptions textuelles, mais nécessite une expertise ou une connaissance approfondie en programmation. Les modèles de renforcement, quant à eux, permettent une interaction en temps réel avec l'environnement, comme une IA jouant à Mario, mais ils présentent une complexité d'entraînement et une spécialisation élevée.
Pour que l’IA devienne un acteur majeur dans la création de jeux vidéo, il lui reste encore plusieurs étapes à franchir comme :
Ces avancées pourraient transformer l’IA en un véritable assistant créatif, capable de compléter l’imagination humaine et non pas de la remplacer.
MarioVGG est une étape clé dans l’évolution du jeu vidéo par IA, en prouvant que l’on peut générer des expériences interactives sans moteur de jeu conventionnel. Si ses performances actuelles restent limitées, il esquisse un avenir où la création vidéoludique pourrait être automatisée et accessible à tous.
Reste à voir si, un jour, ces modèles seront capables de rivaliser avec la créativité humaine… ou de la sublimer.
Connectez-vous à l'innovation et à l'apprentissage avec Almera – Votre portail vers l'excellence en IA.
