Une intelligence artificielle a passé 141 heures à tenter de terminer Minecraft. GPT-6 Astra était parvenu à construire une ferme à Blazes et à récupérer plusieurs perles de l’Ender. Puis un Creeper a détruit son coffre et son lit. Après ce revers, l’IA a passé plusieurs heures à principalement cultiver des pommes de terre.
L’expérience a été menée par Vals AI pour tester la capacité d’un agent à contrôler un ordinateur de manière autonome pendant une très longue période. Son objectif dans Minecraft était simple à comprendre, mais nettement plus difficile à accomplir : progresser jusqu’à vaincre l’Ender Dragon.
En bref
- GPT-6 Astra a joué à Minecraft pendant 141 heures.
- L’IA a construit une ferme semi-automatique à Blazes et récupéré six bâtons de Blaze.
- Elle a également obtenu trois perles de l’Ender.
- Un Creeper a détruit son coffre ainsi que son lit.
- Après cet incident, Astra a passé plusieurs heures à principalement cultiver des pommes de terre.
141 heures pour tenter de vaincre l’Ender Dragon
Vals AI n’a pas fourni à Astra un outil capable de lire directement les données internes de Minecraft ou des commandes spécialement conçues pour le jeu. Selon l’entreprise, l’agent devait progresser en utilisant les commandes normales d’un ordinateur et en interprétant ce qui se passait à l’écran.
Une première expérience de trois heures avait déjà montré des résultats prometteurs. Astra avait réussi à combattre plusieurs créatures, construire un portail du Nether, fabriquer un bateau et retrouver son chemin jusqu’à sa base. Vals AI a alors décidé de prolonger considérablement le test.
Ce n’est d’ailleurs pas la première expérience récente mêlant Minecraft et intelligence artificielle. En août, nous présentions une IA entièrement construite dans Minecraft avec 445 782 blocs de commande. Le principe était cependant très différent : ici, l’IA ne fonctionne pas dans Minecraft, elle contrôle directement le jeu comme le ferait un joueur.
Vals AI avait également publié les trois premières heures de cette expérience, durant lesquelles Astra était déjà parvenue à construire son portail vers le Nether.
Une ferme à Blazes et trois perles de l’Ender
Sur 141 heures, Astra est allée beaucoup plus loin. L’IA a atteint une forteresse du Nether et réussi à construire une ferme semi-automatique à Blazes. Elle a ainsi récupéré six bâtons de Blaze.
Elle a ensuite trouvé une forêt biscornue, éliminé plus de six Endermen et obtenu trois perles de l’Ender. Elle commençait donc à réunir les ressources nécessaires pour fabriquer des yeux de l’Ender et rechercher un stronghold.
Vals AI estime qu’Astra est allée plus loin dans Minecraft que les autres systèmes d’intelligence artificielle précédemment testés par l’entreprise. Elle n’était toutefois pas encore arrivée au combat contre l’Ender Dragon.
Puis un Creeper détruit son coffre
C’est finalement l’une des créatures les plus connues de Minecraft qui va faire dérailler l’expérience. Astra avait placé plusieurs de ses ressources importantes dans un coffre lorsqu’un Creeper s’en est approché.
L’explosion détruit le coffre, mais également le lit installé à proximité. L’IA perd ainsi des objets accumulés pendant sa progression ainsi que le point de réapparition qu’elle avait défini.
La scène a été conservée par Vals AI, qui a publié la séquence de l’explosion du Creeper et le bilan des 141 heures de jeu.
Et Astra se met à cultiver des pommes de terre
C’est surtout la suite qui a attiré l’attention. Après cet important revers, Astra ne reprend pas immédiatement sa progression vers l’End. Selon Vals AI, elle passe au contraire plusieurs heures à principalement cultiver des pommes de terre.
Les spectateurs qui suivaient l’expérience en direct sur Twitch ont même commencé à lui demander d’accélérer et de reprendre son objectif principal.
Son comportement face aux Creepers devient également beaucoup plus prudent. Lorsqu’une forme verte apparaît devant elle, Astra prend par exemple soin de vérifier dans son raisonnement qu’il s’agit de canne à sucre et non d’un Creeper.
Astra n’est évidemment pas devenue « traumatisée » par les Creepers. Cette formulation, reprise par plusieurs publications, humanise beaucoup le comportement du modèle. L’expérience montre surtout que sa stratégie et sa manière d’évaluer certains dangers ont changé après cet échec.
Pourquoi tester une IA dans Minecraft ?
Derrière l’anecdote du Creeper, Minecraft constitue en réalité un terrain particulièrement intéressant pour évaluer un agent autonome. Une partie demande d’explorer, de gérer un inventaire, de mémoriser des lieux, de fabriquer des objets et surtout d’enchaîner de nombreuses étapes pour atteindre un objectif lointain.
Une simple erreur peut également coûter plusieurs heures de progression. L’agent doit alors être capable de comprendre ce qui s’est passé, de revoir son plan et de poursuivre sa partie malgré la perte de ressources.
Les rapports entre Minecraft et l’intelligence artificielle deviennent d’ailleurs de plus en plus fréquents. Modrinth a récemment renforcé ses règles concernant les projets créés avec l’IA, notamment face à l’augmentation des contenus générés automatiquement sur la plateforme.
Dans le cas de Vals AI, l’objectif est différent. Minecraft sert ici de banc d’essai pour déterminer jusqu’où un agent peut aller lorsqu’on le laisse utiliser seul un ordinateur pendant plusieurs jours, sans outil spécialement conçu pour le jeu.
Astra n’a finalement jamais atteint l’Ender Dragon. Elle aura tout de même réussi à atteindre le Nether, à automatiser en partie la récupération de bâtons de Blaze et à commencer à réunir les ressources nécessaires pour rejoindre l’End. Pour Vals AI, il s’agit de la meilleure progression obtenue jusqu’ici par l’un des systèmes testés dans Minecraft.
Sources : Vals AI
