Décidément, l'intelligence artificielle est partout. Elle se faufile dans notre quotidien de manière très naturelle et les plus grandes entreprises veulent rentrer dans la course et prendre leur part du gâteau. Du côté de San Diego, l'organisme de recherche à l'Université de Californie, Hao AI Lab, s'est amusé à tester l'intelligence artificielle aux jeux vidéo.

Ainsi, si vous vous demandiez si l'intelligence artificielle pouvait jouer à Super Mario Bros., la réponse est oui. Et si vous vous interrogez sur quel modèle d'IA est plus fort et pourrait vous battre lors d'une prochaine session, Hao AI Lab a la réponse.
Pourquoi ChatGPT est-il si nul à Super Mario Bros ?

Pour pouvoir définir quelle IA est la meilleure à Super Mario Bros. Hao AI Lab a passé le jeu de 1985 dans un émulateur et l'a intégré à un framework développé en interne, Gaming Agent. Ainsi, les différentes intelligences artificielles ont pu prendre le contrôle de Mario. Elles ont reçu des instructions assez basiques, comme “si un obstacle ou un ennemi est proche, bouge/saute à gauche pour l'éviter” ainsi que des captures d'écran du jeu. Elles ont pu générer des entrées sous forme de code Python pour jouer. Chaque modèle a appris à planifier des manœuvres complexes et à développer de stratégies.

Selon les testes effectués par l'organisme de recherche à l'Université de Californie, Hao AI Lab, ChatGPT-4o d'OpenAI n'est vraiment pas doué à Super Mario Bros. Si Gemini 1.05 Pro se débrouille plutôt bien, Claude (3.7 suivi de 3.5) écrase les autres intelligences artificielles.

Contrairement aux autres domaines, les modèles d'IA qui se basent sur le raisonnement, à l'instar de ChatGPT, n'ont pas brillé à Super Mario Bros.. Cela s'explique par le fait que ces derniers sont plus longs à la détente. Effectivement, les modèles à raisonnement prennent quelques secondes pour choisir une action. Mais dans un jeu comme Super Mario Bros., une seconde peut être cruciale et peut faire toute la différence.

Ainsi, si les modèles à raisonnement sont allégrement meilleurs dans la majorité des domaines, ils ne sont pas près de vous battre à Super Mario Bros. En revanche, Claude 3.7 s'est montré particulièrement impressionnant et s'impose comme un adversaire digne de ce nom