ChatGPT vs. Atari 2600 : L'IA s'effondre dans un affrontement d'échecs rétro

Dans le cadre d'une expérience surprenante mêlant IA de pointe et jeux anciens, l'architecte d'infrastructure américain Robert Caruso a testé les capacités de ChatGPT à jouer aux échecs contre Video Chess sur l'emblématique Atari 2600 - une console sortie pour la première fois en 1977. Le match s'est déroulé via l'émulateur Stella, et le résultat n'a pas été beau à voir pour l'IA moderne.

M. Caruso a détaillé ses conclusions dans un article publié sur LinkedIn, décrivant l'échec spectaculaire de ChatGPT, même dans la difficulté la plus facile du jeu.

"ChatGPT a subi une défaite totale au niveau de difficulté débutant", a-t-il noté.

Malgré la configuration initiale de l'échiquier et des instructions claires, ChatGPT a rapidement perdu pied. Il mélangeait les pièces d'échecs - confondant une tour avec un fou, par exemple -, manquait des coups évidents de son adversaire et perdait régulièrement de vue l'état de l'échiquier.

Même le passage à la notation standard des échecs n'a pas aidé. L'IA, construite par OpenAI, oubliait sans cesse les coups précédents, commettait des erreurs flagrantes et ne parvenait pas à maintenir une stratégie cohérente tout au long du match.

Technologie rétro, véritable défi

L'Atari 2600 - équipé d'un modeste processeur 8 bits cadencé à seulement 1,19 MHz et doté d'une mémoire vive de 128 octets - est une pierre angulaire de l'histoire du jeu. Video Chess a été l'une des réalisations techniques les plus remarquables de la console, offrant un adversaire d'échecs étonnamment compétent dans des limites matérielles extrêmes. Il était suffisamment difficile pour donner du fil à retordre aux joueurs occasionnels et reste un joyau rétro.

Caruso a admis qu'il s'attendait à une expérience légère et nostalgique. Au lieu de cela, il a vu ChatGPT s'efforcer de respecter les règles de base du jeu d'échecs. L'IA a demandé à plusieurs reprises de redémarrer la partie, a promis d'"apprendre de ses erreurs" et pourtant, après 90 minutes, n'a pas réussi à fournir une performance stable. Le match a été interrompu et Atari a été déclaré vainqueur.

Pourquoi ChatGPT a-t-il échoué?

Si ChatGPT excelle dans la conversation, l'écriture et la résolution de problèmes, il ne dispose pas d'un moteur d'échecs dédié comme Stockfish. Il comprend les règles du jeu d'échecs en théorie, mais peine à jouer de longues parties de manière fiable, en particulier en l'absence d'un échiquier visuel ou d'une connexion à un moteur d'échecs adéquat.

Bien que cette expérience soit plus excentrique que scientifique, elle met en évidence un point important: l'IA d'aujourd'hui a encore des limites évidentes lorsqu'elle est poussée au-delà de sa force principale, à savoir la génération de langage.

Comme l'a dit Caruso avec un clin d'œil:

"Vous avez joué à Atari aujourd'hui? ChatGPT préférerait que ce ne soit pas le cas."