Une équipe d'algorithmes d'IA vient d'écraser des humains dans un jeu informatique complexe

OpenAI.

Cinq algorithmes d'IA différents se sont associés pour botter les fesses humaines dans Dota 2, un jeu informatique de stratégie populaire.

Des chercheurs d'OpenAI, une organisation à but non lucratif basée en Californie, ont développé l'équipe algorithmique A, qu'ils appellent OpenAI Five. Chaque algorithme utilise un réseau neuronal pour apprendre non seulement comment jouer au jeu, mais aussi comment coopérer avec ses coéquipiers IA. Il a commencé à vaincre les joueurs amateurs de Dota 2 lors des tests, selon OpenAI.

Il s'agit d'une direction importante et nouvelle pour l'IA, car les algorithmes fonctionnent généralement de manière indépendante. Les approches qui aident les algorithmes à coopérer entre eux pourraient s'avérer importantes pour les utilisations commerciales de la technologie. Les algorithmes d'IA pourraient, par exemple, faire équipe pour déjouer les adversaires dans le commerce en ligne ou les enchères publicitaires. Les algorithmes collaboratifs pourraient également coopérer avec les humains.

Histoire connexe

Histoire connexe La combinaison des dernières avancées de l'intelligence artificielle avec des robots pourrait transformer la fabrication et l'entreposage et faire passer l'IA au niveau supérieur.

OpenAI a précédemment démontré un algorithme capable de rivaliser avec les meilleurs humains à Dota 2 solo . Les derniers travaux s'appuient sur cela en utilisant des algorithmes similaires modifiés pour valoriser à la fois le succès individuel et d'équipe. Les algorithmes ne communiquent pas directement, sauf par le jeu.

Ce que nous avons vu implique que la coordination et la collaboration peuvent émerger très naturellement des incitations, dit Greg Brockman , l'un des fondateurs d'OpenAI, qui vise à développer l'intelligence artificielle de manière ouverte et au bénéfice de l'humanité. Il ajoute que l'équipe a essayé de substituer un joueur humain à l'un des algorithmes et a trouvé que cela fonctionnait très bien. Il s'est décrit comme se sentant très bien soutenu, dit Brockman.

Dota 2 est un jeu de stratégie complexe dans lequel des équipes de cinq joueurs s'affrontent pour contrôler une structure dans un paysage tentaculaire. Les joueurs ont des forces, des faiblesses et des rôles différents, et le jeu implique de collecter des objets et de planifier des attaques, ainsi que de s'engager dans des combats en temps réel.

La confrontation des programmes d'IA aux jeux informatiques est devenue un moyen familier de mesurer les progrès. DeepMind, une filiale d'Alphabet, a développé un programme capable d'apprendre à jouer au jeu de société notoirement complexe et subtil Go avec une compétence surhumaine. Un programme connexe s'est alors appris à partir de zéro pour maîtriser le go, puis les échecs simplement en jouant contre lui-même.

Les stratégies requises pour Dota 2 sont plus définies qu'aux échecs ou au Go, mais le jeu reste difficile à maîtriser. C'est également difficile pour une machine car il n'est pas toujours possible de voir ce que font vos adversaires et parce que le travail d'équipe est nécessaire.

Les OpenAI Five apprennent en jouant contre différentes versions d'eux-mêmes. Au fil du temps, les programmes ont développé des stratégies très similaires à celles que les humains utilisent - trouver des moyens d'acquérir de l'or en le cultivant, par exemple, ainsi qu'adopter un rôle ou une voie stratégique particulière dans le jeu.

Histoire connexe

Histoire connexe Clément Ivanov est l'un des meilleurs joueurs de Dota 2 au monde.

Les experts en IA disent que la réalisation est importante. Dota 2 est un jeu extrêmement compliqué, donc même battre des amateurs forts est vraiment impressionnant, déclare Noam Brown, chercheur à l'Université Carnegie Mellon de Pittsburgh. En particulier, traiter les informations cachées dans un jeu aussi grand que Dota 2 est un défi majeur.

Brown a précédemment travaillé sur un algorithme capable de jouer au poker, un autre jeu à informations imparfaites, avec une compétence surhumaine (voir Pourquoi le poker est un gros problème dans l'IA). Si l'équipe OpenAI Five peut constamment battre les humains, dit Brown, ce serait une réalisation majeure en IA. Cependant, il note qu'avec suffisamment de temps, les humains pourraient être en mesure de comprendre les faiblesses du style de jeu de l'équipe d'IA.

D'autres jeux pourraient également pousser l'IA plus loin, dit Brown. Le prochain défi majeur serait les jeux impliquant la communication, comme Diplomacy ou Settlers of Catan, où l'équilibre entre coopération et compétition est essentiel au succès.

cacher