CraftGPT apporte ChatGPT à Minecraft, propulsé par Redstone

Le YouTubeur sammyuri a développé une version fonctionnelle de ChatGPT entièrement intégrée à Minecraft. Baptisé CraftGPT, ce projet ambitieux compresse un vaste modèle de langage en 439 millions de blocs, utilisant uniquement les mécanismes de redstone de Minecraft. Malgré son envergure, CraftGPT s'appuie sur un modèle relativement petit, composé de seulement 5 millions de paramètres, entraîné en Python grâce au jeu de données TinyChat de HuggingFace.

La page GitHub du projet souligne clairement les limites : « Il ne faut pas avoir de trop grandes attentes. Le modèle a tendance à dévier du sujet, à produire des réponses grammaticalement incorrectes ou à produire des résultats erronés. De plus, sa fenêtre contextuelle est très réduite, avec seulement 64 jetons. Les conversations de la vidéo de présentation montrent le modèle à son meilleur, et non pas nécessairement à ses performances moyennes. »

Pour gérer l'ampleur de la construction, sammyuri a utilisé le mod Distant Horizons, qui garantit que tous les blocs restent chargés et opérationnels. Même avec une configuration Redstone haute performance pour accélérer les taux de réponse, générer une réponse peut prendre des heures. Le créateur prévient que sans serveur Minecraft multithread, les utilisateurs risquent d'attendre beaucoup plus longtemps pour obtenir des résultats.

Le vocabulaire de CraftGPT est limité à 1 920 jetons, ce qui rend ses capacités conversationnelles assez basiques. Il peut gérer de courts échanges en anglais, mais peine à maintenir la cohérence lors d'interactions prolongées. Malgré ces restrictions techniques, le projet démontre jusqu'où les passionnés de Minecraft sont prêts à pousser les mécanismes du jeu et la créativité qu'offre la redstone.

La construction de Sammyuri a attiré l'attention par son ampleur et son ambition, dominant les structures Minecraft standard et bloquant même la lumière du soleil dans l'environnement du jeu. Au-delà de sa nouveauté, elle illustre également la représentation visuelle de la logique computationnelle dans l'univers du jeu. Le projet n'est pas conçu pour une utilisation pratique, mais comme une démonstration de faisabilité, alliant informatique et ingénierie Minecraft.

La vidéo de présentation de CraftGPT illustre les réactions de l'IA en temps réel dans Minecraft. Si certaines interactions donnent lieu à des réponses absurdes, d'autres se rapprochent étonnamment d'un dialogue cohérent. Pour les curieux, sammyuri a partagé tous les fichiers et instructions sur la page GitHub du projet, permettant ainsi aux passionnés de Minecraft et d'IA d'expérimenter le modèle eux-mêmes.

CraftGPT témoigne de la créativité de la communauté Minecraft, alliant codage, IA et la logique unique du jeu basée sur les blocs. Ce n'est pas une question de rapidité ou de précision, mais d'imagination : il s'agit d'imaginer ce qui peut être réalisé lorsqu'un jeu sandbox rencontre l'intelligence artificielle, même s'il faut des heures pour en voir les résultats.

Regardez le dernier résumé de Minecraft Live ici ! Nouvelles mises à jour directement depuis le flux YouTube de Mojang.

Ce projet souligne également la fascination persistante pour l'intégration de l'IA dans des environnements inattendus, offrant à la fois un défi et une démonstration ludique aux joueurs et aux développeurs. Si CraftGPT ne remplacera peut-être jamais les outils d'IA conventionnels, il offre une perspective unique sur la manière dont les idées informatiques peuvent être concrétisées physiquement dans l'univers de Minecraft.