Minecraft et intelligence artificielle

Oasis de Decart : un jeu généré par une IA

Fin 2024, la startup Decart a dévoilé Oasis, un moteur de jeu expérimental dans lequel chaque image est générée en temps réel par un modèle transformer. Oasis n'est pas un mod de Minecraft, même s'il ressemble au monde de blocs de Mojang. C'est un programme distinct, sans aucun code de jeu traditionnel : pas de moteur physique, pas de moteur de rendu 3D, pas de système de collisions. Tout ce que voit le joueur est le résultat d'un modèle génératif qui prend vos actions (clavier + souris) et prédit l'image suivante.

Techniquement, Oasis repose sur une architecture transformer entraînée sur une grande quantité de séquences de gameplay de Minecraft. Le modèle a appris à simuler la physique des blocs, le cycle du jour et de la nuit, le comportement des mobs, l'interface d'inventaire et des interactions de base uniquement à partir de motifs visuels, sans aucune règle de jeu codée en dur.

Le résultat est impressionnant comme démonstration de ce que l'IA peut faire, mais loin d'être jouable :

• Physique incohérente : les blocs disparaissent ou apparaissent parfois sans raison. La gravité ne fonctionne que de façon sélective. L'eau s'écoule dans des directions imprévisibles.
• Aucune persistance : le monde ne retient pas les modifications. Si vous faites un demi-tour de 180 degrés puis revenez, le paysage n'est plus le même qu'un instant plus tôt.
• Hallucinations visuelles : l'interface d'inventaire affiche parfois des objets que vous n'avez pas. La barre d'accès rapide change au hasard d'une image à l'autre.
• Basse résolution : la version publique tourne en 360p à environ 20 FPS. La faire tourner en local demande un GPU puissant.

Malgré ses limites, Oasis a ouvert une nouvelle voie pour l'industrie du jeu vidéo. À ce moment-là, Decart avait levé 21 millions de dollars. D'autres entreprises, dont Google DeepMind (avec le projet Genie 2), travaillent sur des systèmes similaires. Minecraft est devenu de fait un banc d'essai pour les moteurs de jeu génératifs, car son aspect en blocs est plus facile à imiter que le photoréalisme.

Projets de recherche : Minecraft comme laboratoire d'IA

Depuis des années, Minecraft sert de terrain d'essai pour l'intelligence artificielle. Le monde ouvert, la physique simple, les règles claires et l'énorme base de joueurs en font un excellent banc d'essai. Voici les projets les plus importants :

VOYAGER (NVIDIA, 2023)

VOYAGER est un agent d'IA autonome créé par des chercheurs de l'université Stanford et de NVIDIA. Il utilise GPT-4 comme « cerveau » pour planifier et prendre des décisions dans Minecraft. Contrairement aux bots précédents, VOYAGER peut découvrir de nouvelles compétences par lui-même, sans supervision humaine : il apprend à fabriquer de nouveaux objets, à explorer des biomes, à combattre des mobs et à construire des abris. L'agent se constitue une bibliothèque de compétences à laquelle il revient lors des sessions suivantes.

Résultats clés : VOYAGER a collecté 3,3 fois plus d'objets uniques que les modèles précédents, a progressé seul dans l'arbre technologique jusqu'à l'outillage en diamant et a parcouru 2,3 fois plus de terrain.

MineDojo (NVIDIA, 2022)

MineDojo est un environnement de recherche open source pour entraîner des agents d'IA dans Minecraft. Il fournit des milliers de descriptions de tâches (par exemple « construire une maison en bois », « tuer un creeper ») et juge automatiquement si l'agent les a accomplies. MineDojo comprend aussi une base de 730 000 vidéos YouTube et de 7 000 pages de wiki que les agents peuvent utiliser pour apprendre. Le projet a reçu le prix NeurIPS 2022 du meilleur jeu de données.

MineRL (Carnegie Mellon, depuis 2019)

La MineRL Competition est un concours dans lequel des équipes de recherche construisent des agents d'IA qui jouent à Minecraft. La tâche principale : obtenir un diamant en partant de zéro, sans connaissance préalable du jeu. Le concours existe depuis 2019.

Project Malmo (Microsoft Research)

Le plus ancien des grands projets d'IA sur Minecraft. Lancé par Microsoft Research en 2016, Project Malmo est une plateforme pour entraîner des agents d'apprentissage par renforcement dans Minecraft. Bien que Microsoft possède Mojang, Project Malmo n'a débouché sur aucune fonction d'IA publique dans le jeu. Il reste un outil de recherche.

Expériences d'IA dans Minecraft en 2026

En 2026, Minecraft a de nouveau servi de terrain d'essai pour de nouveaux modèles d'IA et des simulations inhabituelles. Voici les plus grosses expériences (état en octobre 2026).

GPT-6 Astra et 141 heures de jeu

En septembre 2026, Vals AI, une entreprise qui teste de façon indépendante des modèles d'IA, a décrit une partie de 141 heures jouée par GPT-6 Astra d'OpenAI. Selon Vals AI, le modèle est allé plus loin dans le jeu que tout système d'IA précédent : il a construit une ferme à blazes semi-automatique, collecté 6 bâtons de Blaze et récupéré 3 perles de l'Ender dans le Nether. Puis l'explosion d'un creeper a détruit le coffre contenant ses objets les plus précieux et le lit qui définissait son point de réapparition. Pendant les heures suivantes, le modèle a surtout cultivé des pommes de terre, tandis que les spectateurs du stream Twitch l'encourageaient à continuer de jouer. En savoir plus sur le test de GPT-6 Astra.

Ender Dragon vaincu en 8 minutes et 43 secondes

Le 20 septembre 2026, une vidéo est apparue sur X, dans laquelle un duo de modèles, GPT-6 Astra et Jev de TypeSafe AI, bat l'Ender Dragon dans Java Edition en 8 minutes et 43 secondes, pour un coût total inférieur à un dollar. Astra fixait les objectifs, Jev choisissait les actions d'après les données sur l'état du jeu, et la bibliothèque Mineflayer contrôlait le personnage. L'expérience a été préparée par Ronak Malde. Ce n'était pourtant pas un speedrun sur un monde aléatoire : la partie s'est déroulée en version 1.16.5 en difficulté Paisible, sur une seed choisie avec le portail de l'End déjà actif, selon un itinéraire vérifié au préalable dans un monde de test. Le dragon est mort de six explosions de lits lors de son premier atterrissage. Le record humain Any% RSG est de 6:39.813 (voir les records de speedrun). Détails de la partie.

Une mouche du vinaigre au cerveau simulé

Le projet NeuroCraft Fly, présenté par Evan Sinclair Smith le 4 septembre 2026, fait tourner dans Minecraft un réseau de 166 700 neurones simulés. Il a été recréé à partir du connectome MaleCNS v1.0, une carte du système nerveux d'une drosophile mâle établie par l'équipe HHMI Janelia avec la participation de Google Research. Les événements du jeu, comme la lumière, la nourriture et les attaques, entrent dans le réseau sous forme de signaux d'entrée, et l'activité de certains neurones se traduit par le mouvement de la mouche virtuelle. Le projet a été réalisé avec l'aide de GPT-6 Astra. L'auteur souligne qu'il ne s'agit pas d'une copie numérique d'une mouche consciente : le connectome ne fournit que le câblage, et la manière dont les stimuli du jeu atteignent le réseau et dont l'activité des neurones devient mouvement a été décidée par les créateurs de la simulation. En savoir plus sur NeuroCraft Fly.

Simulation : Minecraft se bat lui-même

Cette expérience n'utilise pas d'IA, seulement des statistiques. Dans la vidéo « Running Minecraft Until It Beats Itself » du 6 septembre 2026, la chaîne RedLogic a utilisé une simulation de Monte-Carlo pour vérifier si les mobs seuls peuvent vaincre l'Ender Dragon. Les mobs ne peuvent pas poser d'yeux de l'Ender, donc la simulation suppose un monde issu d'une seed choisie dans lequel le portail de l'End situé sous un biome de stalagmites de glace est déjà actif. Un Enderman pose une citrouille sculptée sur des blocs de neige, ce qui crée un golem de neige, les creepers dégagent un chemin jusqu'au portail, et les golems dans l'End touchent par accident des cristaux de l'End avec leurs boules de neige. Selon la simulation, le dragon meurt au bout de 1,975 milliard d'années. Aucun monde n'a pourtant tourné aussi longtemps : au lieu de compter chaque tick, la simulation tirait au hasard des temps d'attente entre événements. En savoir plus sur la simulation.

Notch et la programmation avec l'IA

Markus « Notch » Persson, le créateur de Minecraft, a qualifié en janvier 2026 les partisans de l'écriture de code avec l'aide de l'IA d'« incompétents ou malveillants », et le 14 juillet il a écrit simplement « Reject AI ». Une semaine plus tard, il a admis qu'il pourrait essayer le vibe coding parce qu'il a du mal à recruter des programmeurs, et le 10 août il a partagé la transcription de sa propre conversation avec une IA avec le commentaire « Maybe it's time to eat some crow », c'est-à-dire qu'il admettait avoir peut-être eu tort. En 2024, Persson a annoncé son studio Bitshift Entertainment et dévoilé le roguelike Levers and Chests comme son prochain jeu. En savoir plus sur le changement d'avis de Notch.

Mods d'IA pour Minecraft

La communauté des moddeurs commence à intégrer des grands modèles de langage (LLM) à Minecraft. Voici les projets les plus intéressants qui fonctionnent sur les versions actuelles du jeu.

PNJ Inworld AI

Inworld.ai est une plateforme de création de PNJ pilotés par l'IA. L'intégration disponible pour Minecraft permet de créer des personnages non joueurs avec lesquels on discute dans le chat en langage naturel. Les PNJ ont une personnalité, gardent le souvenir des conversations précédentes et réagissent au contexte (heure de la journée, lieu, inventaire du joueur). Sur les serveurs RPG, cela crée un niveau d'immersion inédit : les villageois répondent aux questions, les gardes racontent des légendes et les marchands marchandent les prix.

Custom NPCs propulsé par GPT

Le mod Custom NPCs (une modification Forge populaire depuis longtemps) a été étendu par la communauté avec une intégration de l'API OpenAI. Chaque PNJ peut avoir un prompt système qui définit sa personnalité, ses connaissances et son comportement. Les conversations des PNJ sont générées en temps réel par GPT-4 ou GPT-4o. Les coûts de l'API sont à la charge de l'opérateur du serveur ; avec un multijoueur actif, ils peuvent atteindre plusieurs dizaines de dollars par mois.

Baritone (un bot de pathfinding avancé)

Baritone est un bot de pilotage automatique pour Minecraft qui creuse, construit, explore et récolte des ressources tout seul. Bien qu'il n'utilise pas d'IA générative (il s'appuie sur des algorithmes A* et des heuristiques), c'est l'un des outils d'automatisation les plus avancés de la communauté. Baritone peut déterrer des diamants seul, construire un tunnel dans le Nether et revenir à la base. Il est souvent utilisé en mode AFK sur les serveurs d'anarchie (2b2t).

Générateurs de commandes par IA

Des outils web et des bots Discord qui génèrent des commandes Minecraft à partir de descriptions en langage naturel. Le joueur écrit « donne-moi une épée en diamant avec Tranchant V et Aura de feu II », et le générateur renvoie une commande /give complète avec les bonnes données d'enchantement. Les chatbots basés sur Claude, GPT-4 et Gemini s'en sortent étonnamment bien pour des demandes simples.

Générateurs de skins par IA

L'une des utilisations les plus pratiques de l'IA dans l'écosystème Minecraft, ce sont les générateurs de skins. Les skins des personnages dans Minecraft sont de simples textures de 64x64 pixels, ce qui en fait une cible idéale pour les modèles génératifs.

Outils disponibles en 2026

• MinecraftSkins.net AI Generator : un générateur intégré à l'une des plus grandes bases de skins. Vous saisissez une description (par exemple « un chevalier en armure dorée avec une cape rouge ») et obtenez 4 variantes au choix. Gratuit, limité à quelques générations par jour.
• NameMC AI : une section de générateur d'IA sur le site populaire NameMC. Il utilise un modèle entraîné sur des millions de skins existants. Bons résultats pour les personnages humanoïdes, moins bons pour les thèmes abstraits.
• SkinAI.io : un outil de génération de skins dédié. Il propose un aperçu 3D en temps réel, l'édition de chaque couche (overlay) et un export PNG prêt à charger dans le launcher.
• The Skindex Creator : un éditeur de skins avec une assistance IA facultative comme point de départ. Vous générez une base, puis peaufinez les détails à la main. Combiner l'IA et le dessin traditionnel donne les meilleurs résultats.

La qualité des skins générés s'est nettement améliorée entre 2024 et 2026. Les premiers modèles produisaient des textures floues et asymétriques. Les versions actuelles génèrent des skins comparables au travail d'artistes de niveau intermédiaire : proportions correctes, détails symétriques et palettes de couleurs cohérentes.

L'IA et la construction dans Minecraft

La construction est le domaine où l'IA peut le plus aider les joueurs. Concevoir des structures complexes en blocs est une tâche où les modèles génératifs ont un avantage naturel : ils peuvent itérer rapidement et proposer des variantes.

PlotCraft et les générateurs de bâtiments

PlotCraft (2024) est un outil de recherche qui génère des bâtiments Minecraft en trois dimensions à partir de descriptions textuelles. Le modèle est entraîné sur des milliers de schematics WorldEdit et Litematica. En entrée, il prend une description (par exemple « une tour de guet médiévale en pierre, haute de 15 blocs ») et exporte un fichier .schem à importer dans le jeu. Les résultats sont prometteurs pour les structures simples, mais les constructions complexes (châteaux, ponts) demandent encore des corrections humaines.

Les LLM comme assistant de construction

Beaucoup de joueurs utilisent ChatGPT, Claude et Gemini comme conseillers de construction. Un déroulement typique : le joueur décrit ce qu'il veut construire, et le modèle de langage propose un plan des pièces, une liste de matériaux, des proportions et un style architectural. Ce n'est pas de la construction automatique (le joueur pose encore les blocs à la main), mais l'IA raccourcit nettement la phase de planification. Pour les bâtisseurs débutants qui ne savent pas par où commencer, un LLM est une excellente source d'inspiration.

DALL-E, Midjourney et concepts visuels

Les générateurs d'images (DALL-E 3, Midjourney v6, Stable Diffusion) excellent à produire des concepts de bâtiments dans un style Minecraft. Le prompt « isometric minecraft castle, dark oak and stone bricks, moat, medieval style » produit des références que les bâtisseurs recréent bloc par bloc. La méthode est populaire dans la communauté Build the Earth et sur les serveurs créatifs.

L'avenir de l'IA dans Minecraft

L'intégration de l'IA à Minecraft s'accélère. Voici les orientations les plus susceptibles de changer le gameplay dans les 2 à 3 prochaines années :

• PNJ intelligents dans le Minecraft vanilla : Microsoft possède Mojang et a investi dans OpenAI. On spécule qu'une future mise à jour apportera des villageois capables de conversations simples, ou de comportements plus complexes que les routines d'échange actuelles. Mojang n'a pas confirmé ces projets.
• Génération de mondes à partir de descriptions : à la place d'une seed aléatoire, une description textuelle (« un royaume médiéval avec des châteaux et des villages »). La technologie existe sous forme de recherche, et sa commercialisation est une question de 2 à 4 ans.
• Anti-triche par IA : les serveurs multijoueurs testent des systèmes de détection de triche par ML (machine learning) qui analysent les schémas de déplacement des joueurs au lieu de vérifier les modifications du client. Plus efficace que les anti-triches traditionnels, mais controversé à cause de la vie privée.
• Création automatique de mods : les modèles de code (Claude, GPT-4o, Codex) peuvent générer de simples mods Minecraft à partir de descriptions en langage naturel. En 2026, ils demandent beaucoup de corrections humaines, mais la qualité progresse à chaque génération de modèles.
• Textures et musique personnalisées : des packs de ressources générés pour chaque joueur selon ses préférences esthétiques. Des prototypes existent : un modèle transforme « Minecraft cyberpunk » en un pack de textures 16x16 cohérent.

Questions fréquentes

Pages associées

• Catalogue de mods - les meilleurs mods pour Minecraft
• Mods Minecraft - un guide des modifications
• Skins Minecraft - comment changer de skin, les meilleurs sites
• Outils et générateurs - calculateurs, générateurs de commandes
• Minecraft Java Edition - la version la plus ouverte aux mods