Sony a breveté les didacticiels de jeux vidéo générés par l'IA et le système d'assistance Ghost

Sony a breveté cette année des didacticiels de jeux vidéo générés par l'IA, révélant un système conçu pour insérer l'intelligence artificielle directement dans le jeu en direct afin de guider les joueurs à travers les sections difficiles. La demande de brevet décrit une méthode qui remplace ou complète les didacticiels traditionnels par un personnage "fantôme" piloté par l'IA qui démontre les actions à l'intérieur du jeu lui-même.

L'idée a fait surface publiquement après avoir été signalée par Boing Boing, bien qu'elle ait reçu une plus grande attention à la suite d'une couverture par Kotaku.

Le document, déposé en avril et publié plus tard en 2025, décrit ce que Sony appelle "l'assistance fantôme". Dans ce système, une session de jeu se connecte à un moteur d'IA qui génère un personnage fantôme capable de progresser sur les mêmes chemins interactifs que le joueur. Au lieu de messages statiques ou de vidéos préenregistrées, le fantôme apparaît dans le monde actif du jeu et effectue les actions nécessaires pour progresser.

Le brevet précise que les actions du fantôme sont liées au moment spécifique auquel le joueur est confronté, plutôt qu'à un segment de tutoriel généralisé. Le système est conçu pour ne s'activer que lorsqu'un mode dédié est activé, ce qui laisse entendre que les joueurs pourraient s'en passer complètement. Sony décrit également des niveaux d'assistance réglables, allant de superpositions visuelles indiquant les objectifs à des démonstrations complètes de l'utilisation des boutons. Au niveau le plus élevé, le fantôme peut accomplir la tâche à la place du joueur.

"Les actions interactives du personnage fantôme sont configurées pour faire progresser le personnage fantôme le long d'un chemin interactif du jeu" - Dépôt de brevet de Sony

Au-delà des démonstrations de mouvement et de combat, l'IA fantôme est décrite comme conversationnelle. Le dépôt de brevet indique que le système peut utiliser le langage naturel pour communiquer avec le joueur, répondre à des questions ou expliquer verbalement des mécanismes. Cette interaction ressemble aux outils d'IA conversationnelle actuels, bien que Sony ne cite aucun modèle spécifique. L'entreprise utilise à plusieurs reprises le terme "IA" tout en évitant les références directes aux systèmes génératifs généralement associés à de grands modèles de langage.

Les données de formation sont abordées en détail. Sony indique que l'IA serait entraînée sur "une pluralité de sources de séquences d'entraînement", ce qui lui permettrait d'analyser le jeu en direct et d'offrir des réponses contextuelles. Ces sources peuvent inclure des enregistrements de sessions de joueurs précédentes, à l'intérieur et à l'extérieur du réseau de Sony, ainsi que du matériel en ligne tel que des descriptions de sites web ou des messages sur les médias sociaux. Le brevet indique également que le traitement pourrait être réparti entre plusieurs unités de serveurs au sein d'un centre de données, plutôt que de s'appuyer uniquement sur le matériel local.

Une autre section met l'accent sur l'adaptabilité. Le modèle d'IA est décrit comme capable d'apprendre en permanence à partir de nouveaux scénarios de jeu au fur et à mesure que le joueur progresse. Cela permettrait au fantôme d'affiner ses réponses au fil du temps, en s'adaptant à différents styles de jeu ou à différentes approches d'un même défi. Sony considère qu'il s'agit d'un moyen de réduire la frustration sans forcer les joueurs à suivre des structures didactiques rigides.

L'apparence du personnage fantôme est intentionnellement flexible. Selon le dossier, il peut prendre la forme de personnages d'autres jeux, de personnages de films ou de dessins générés par les utilisateurs. Cette personnalisation est présentée comme facultative, mais elle soulève des questions de licence et de cohérence que le brevet ne résout pas.

"Le personnage fantôme peut être représenté comme un personnage de film, une figurine d'un autre jeu ou un personnage créé par l'utilisateur" - Dépôt de brevet de Sony

Sony fournit un exemple détaillé pour illustrer la manière dont le système pourrait fonctionner en pratique. Dans ce scénario, le fantôme apparaît sous les traits de Yoda de Star Wars, offrant à la fois des démonstrations physiques et des conseils vocaux pendant le jeu. L'exemple décrit Yoda exécutant des mouvements, parlant au personnage du joueur et apparaissant à l'écran comme faisant partie de la scène du jeu pendant que des instructions sont données.

"À titre d'exemple, le personnage fantôme peut être une représentation animée de l'omniscient Yoda de la Guerre des étoiles" - Dépôt de brevet de Sony

Le dépôt de brevet explore également l'intégration du matériel au-delà de la console elle-même. Sony suggère que le système pourrait suivre le regard du joueur ou utiliser une caméra pour capturer des images de la pièce dans laquelle se trouve le joueur. Ces fonctionnalités sont présentées comme des améliorations optionnelles qui pourraient aider l'IA à déterminer si un joueur est confus ou désengagé. Le document ne précise pas comment les données seraient stockées ou protégées, ce qui laisse en suspens la question de la protection de la vie privée.

Malgré les détails, le brevet reste spéculatif. Sony a l'habitude de déposer des brevets qui ne parviennent jamais aux consommateurs. Ce document est également décrit comme une évolution d'un brevet similaire déposé en 2023, ce qui suggère une approche lente et itérative plutôt qu'un lancement imminent. S'il était mis en œuvre, le système nécessiterait probablement un matériel et une infrastructure de serveur plus puissants que ceux offerts par la PlayStation 5 actuelle.

Le principe de ce brevet consiste à remplacer l'enseignement passif par une démonstration active pilotée par l'IA. Il part du principe que regarder une tâche exécutée en temps réel, dans la session du joueur, est plus efficace que de lire des instructions ou de rejouer des vidéos statiques. On ne sait pas encore si les joueurs accueilleront favorablement la présence d'une IA capable de parler, d'agir et même de prendre le contrôle.

Sony n'indique pas quand, ni si, ce système apparaîtra dans un produit commercial. Tout lancement devrait correspondre à une future génération de console, compte tenu des exigences techniques décrites. Pour l'instant, les didacticiels de jeux vidéo générés par l'IA et brevetés par Sony n'existent que sur le papier, esquissant une vision qui mêle le jeu en direct, l'apprentissage automatique et l'enseignement interactif.

Lire aussi, Sony a confirmé le programme mensuel PlayStation Plus de janvier 2026, avec Need for Speed Unbound, Disney Epic Mickey: Rebrushed, et Core Keeper disponibles sur PlayStation 4 et PlayStation 5 du 6 janvier au 2 février.