La startup General Intuition a levé 320 millions de dollars lors d’un tour de financement qui la valorise à 2,3 milliards de dollars, pariant sur le fait que les données relatives aux actions des joueurs dans les jeux vidéo peuvent aider les modèles d’intelligence artificielle à développer quelque chose qui s’apparente à l’intuition humaine, avant de passer des environnements virtuels aux robots et au monde réel.
Ce tour porte le financement total annoncé de l’entreprise à 454 millions de dollars, après un tour de 134 millions de dollars qu’elle avait levé lors de son lancement en octobre dernier. Khosla Ventures a mené ce nouveau tour, avec la participation de General Catalyst, Jeff Bezos, Eric Schmidt, Nico Rosberg ainsi que de chercheurs de Google DeepMind et du MIT.
Des jeux vidéo aux robots
General Intuition a été fondée après sa séparation de Medal, une entreprise qui permet aux joueurs de mettre en ligne et de partager des extraits de jeux vidéo. Les centaines de millions d’heures de séquences collectées par Medal ont fourni l’ensemble de données initial utilisé pour entraîner le modèle de l’entreprise au raisonnement spatio-temporel, c’est-à-dire à la compréhension de la manière de se déplacer dans l’espace et le temps.
Mais l’entreprise estime que l’élément le plus important n’est pas la vidéo elle-même, mais les étiquettes d’actions qu’elle contient : des journaux indiquant quels boutons les joueurs ont pressés et à quel moment. Selon le cofondateur et directeur général Bim De Witte, les concurrents tentent souvent d’inférer les actions à partir de la seule vidéo, ce qu’il considère comme insuffisant.
Lors d’une démonstration dans les bureaux new-yorkais de l’entreprise, un agent d’intelligence artificielle jouait à un jeu similaire à Fortnite, tandis que le même modèle pilotait un robot quadrupède qui se déplaçait dans l’espace en s’appuyant sur une seule caméra. L’analyste de données Josh Duplanty a déclaré que le modèle n’avait eu besoin que de huit minutes de données robotiques collectées dans la rue pour être adapté au monde réel. Le robot a démontré une capacité d’exploration, mais il heurtait parfois des pieds de chaise et une poubelle, ce qui reflète les limites actuelles de ses performances.
Le modèle du monde comme environnement d’entraînement
General Intuition a développé un modèle du monde qui génère un environnement de simulation image par image, au lieu de s’appuyer sur un moteur de jeu traditionnel. L’entreprise affirme que cet environnement n’est pas le produit final, mais plutôt son « arcade » interne, qu’elle utilise pour entraîner le modèle agentique. Le modèle vise à comprendre la relation entre soi, l’environnement et la causalité, en tirant parti des données de mouvement et des réactions humaines.
Néanmoins, la capacité de ce type de modèles à passer de la simulation au monde réel, et ce à grande échelle, reste une question ouverte. La plupart des approches concurrentes nécessitent d’énormes quantités de données du monde réel, collectées lentement et à grands frais, tandis que General Intuition parie sur le fait que les jeux vidéo peuvent fournir un raccourci évolutif.
Financement, expansion et utilisations potentielles
La majeure partie du financement servira à accroître la capacité de calcul, dans le cadre d’un accord avec CoreWeave, et à se concentrer sur le préentraînement de la prochaine version du modèle. L’entreprise a également affecté une partie des fonds à un déploiement plus large de son interface de programmation d’applications d’ici la fin de l’été.
L’entreprise compte actuellement un nombre limité de clients dans les domaines des jeux vidéo, de la simulation et de la robotique. Parmi les utilisations qu’elle cite figurent le test d’un robot dans une version numérique de l’espace d’une usine, le pilotage d’un robot humanoïde dans un studio de jeux vidéo ou l’envoi d’un robot quadrupède explorer des environnements dangereux. Elle a également testé le modèle avec des drones et d’autres appareils, ainsi que dans des jeux de conduite, et affirme qu’il fonctionne avec tout appareil pouvant être contrôlé à l’aide d’une manette de jeu ou d’un clavier et d’une souris.
L’entreprise a également lancé la plateforme Nerve, destinée à un marché du travail permettant aux joueurs de gagner de l’argent en utilisant leur équipement actuel, depuis l’étiquetage de données jusqu’au pilotage à distance de robots et à d’autres tâches. De Witte affirme que l’entreprise ne souhaite pas construire des produits finaux tels que des voitures autonomes, mais fournir un modèle de base qui facilite la construction de ces produits, tout en recueillant de nouvelles données auprès des clients afin d’alimenter un cycle de développement continu.
General Intuition fixe également des limites à l’utilisation de sa technologie. De Witte affirme que ses agents ne seront pas utilisés pour faire du mal aux êtres humains, tout en se déclarant favorable à l’utilisation des modèles dans des missions de recherche et de sauvetage. L’investisseur Vinod Khosla estime que les données relatives aux actions et aux réactions humaines dans les jeux pourraient être la clé de l’apparition de l’« intuition » dans les modèles du monde, mais la réussite du transfert de ces capacités au monde réel à grande échelle n’a pas encore été démontrée.