Plus de dix ans d’expérience, j’ai vu l’évolution des jeux sur ordinateur, des jeux mobiles et des mondes ouverts. Ces derniers temps, j’ai étudié des documents liés aux modèles de monde et j’ai fait une découverte soudaine : le jeu que nous faisons tous les jours n’est pas seulement un produit de divertissement ; c’est aussi une salle d’entraînement de tout premier ordre pour un monde physique alimenté par l’IA.
Il y a quatre-vingts ans, le psychologue écossais Craik a proposé l’idée suivante : le cerveau construit de petits modèles internes de la réalité pour réaliser un cycle perception-prédiction-action. Cette théorie, restée longtemps dans l’ombre, devient aujourd’hui une réalité grâce aux données de jeu et aux réseaux de neurones, en donnant forme aux modèles de monde.
En 2018, l’article sur (World Models) a officiellement mis sur la table l’idée de « l’entraînement par l’IA en rêvant » :
V compresseur visuel + M prédiction de mémoire + C contrôleur de décision et de contrôle
Ces trois éléments permettent à l’IA d’entraîner ses stratégies sur la piste du fantasme virtuel, puis de les déployer dans un environnement réel
Plus tard encore, les percées se sont enchaînées. La plus bouleversante : Google a remplacé entièrement le moteur traditionnel de DOOM par un réseau de neurones pur — sans pipeline de rendu, sans code de collision écrit à la main ; tout repose sur l’apprentissage des règles du monde du jeu pour générer l’image en temps réel
Pourquoi la formation des modèles du monde privilégie-t-elle les jeux ? Je voudrais partager mon point de vue en tant que professionnel :
1. Des données de labellisation naturellement fournies
Chaque trame d’opérations du joueur + appariement automatique de l’image ; par exemple https://t.co/Lt616IQbKd : en un an, 2 milliards d’extraits vidéo de replays de jeux, avec l’enregistrement complet des touches et des actions de joystick. Pas besoin d’engager une équipe avec un budget élevé pour la labellisation, comme dans la conduite autonome ; DeepMind Genie, grâce à 200 000 heures de vidéos de jeux, arrive à entraîner un monde 3D interactif
2. Un cours de physique simplifié, contrôlable
Le jeu intègre la gravité, les collisions et la logique des fluides. Les règles sont simplifiées et claires, parfaitement adaptées à la logique d’apprentissage en cours. L’IA assimile d’abord la physique virtuelle, puis transfère vers le monde réel et la simulation de robots
3. Un essai massif et infini sans coût
100 000 jeux, des milliards de parties quotidiennes : dans les jeux, l’IA peut réessayer sans perte. Une ampleur de données que des robots physiques ou des simulations de road tests n’atteignent pas du tout
4. Un système mature et généraliste d’interaction motrice
La souris/clavier et les manettes, avec des décennies d’itérations, ont abouti à des interfaces standardisées de compression d’intentions. Une logique de boutons de joystick unique suffit : elle permet de contrôler un personnage humanoïde, tout en servant aussi à conduire une voiture de course ou à piloter des aéronefs. Cet espace d’action est un trésor pour l’entraînement de l’intelligence incarnée
Avant, nous concevions des jeux cantonnés à « offrir une expérience de divertissement » ; aujourd’hui, avec l’essor des modèles monde, la valeur du jeu est redéfinie :
Révolutionner l’industrialisation du jeu en interne : éliminer les arbres de comportement NPC rigides, les scripts physiques écrits à la main ; l’IA comprend et génère la scène de manière autonome, crée des interactions dynamiques ; génération infinie de mondes virtuels originaux et jouables
Ouverture à l’international en tant qu’infrastructure de base : les données de jeux, la simulation virtuelle deviennent la plateforme d’entraînement centrale de l’IA pour les robots, la conduite autonome et la défense aérienne
Le point le plus renversant de tout : l’opération humaine enregistrée par la manette de jeu est, en essence, des données de mappage « intention → action » qui s’affranchissent des limites liées à l’humanoïde et à l’espèce. Quand le modèle apprend à atteindre des objectifs dans des systèmes dynamiques virtuels, cette logique peut être réutilisée entièrement sur n’importe quel robot physique
Il y a 80 ans, Craik n’a pas pu voir de ses propres yeux la mise en œuvre de sa théorie. Aujourd’hui, l’IA sur silicium réplique la logique de modélisation du cerveau biologique, et l’« aire d’essai » qui porte cette transformation ne pourrait être plus appropriée : l’industrie du jeu.
Dans les dix prochaines années, le jeu ne sera plus seulement une filière de divertissement : il deviendra l’entrée centrale de la perception physique de l’IA généraliste. Tous les acteurs du secteur des jeux se trouvent à un tournant de changement de paradigme
Le secteur des jeux 3D a un immense potentiel à l’ère de l’IA !!!