Un nouvel outil permet à l'IA d'apprendre à faire presque n'importe quoi sur un ordinateur

Les machines pourraient bientôt essayer de maîtriser à peu près tout ce que vous pouvez faire sur un ordinateur.





IA ouverte , une organisation à but non lucratif dédiée à la poursuite de grandes avancées dans le domaine de l'IA et à la mise à disposition gratuite de ces progrès pour tous, a lancé Universe, une plate-forme qui permettra aux programmes d'IA d'apprendre, grâce à l'expérimentation et à des récompenses positives, comment faire toutes sortes de choses sur un ordinateur.

Universe comprendra plus d'un millier de jeux, mais aussi des programmes de bureau tels que des navigateurs Web. Cela permettra aux chercheurs en IA de former des programmes à faire toutes sortes de nouvelles astuces, y compris des tâches potentiellement utiles comme remplir des formulaires en ligne, répondre à des e-mails et mettre à jour des feuilles de calcul.

Mais Ilya Sutskevar, cofondateur et directeur de recherche chez OpenAI, affirme que la motivation pour développer et publier Universe est beaucoup plus grande. Universe fournira aux chercheurs en IA la possibilité de développer et de tester des algorithmes capables d'apprendre à effectuer un large éventail de tâches, une étape vers des types plus généraux d'intelligence artificielle. L'espoir est que cela conduira à des agents artificiels capables d'apprendre un large éventail de tâches différentes, puis de prendre ce qu'ils ont appris dans un contexte et de l'appliquer à un autre. De telles capacités, connues dans le domaine sous le nom d'apprentissage par transfert, promettent d'augmenter la puissance et l'utilité de l'intelligence artificielle.



Si un agent réussit bien les tâches de l'univers, ce qui signifie qu'il peut comprendre ce qu'il doit faire et le faire en appliquant ses connaissances antérieures, alors cet agent sera nettement plus intelligent que tout ce qui existe aujourd'hui, dit Sutskevar.

Les algorithmes d'IA peuvent parfois égaler ou surpasser les capacités humaines, mais seulement dans des domaines très étroits, comme la reconnaissance d'images ou jouer à un jeu particulier. La plupart des algorithmes ne peuvent pas apprendre à effectuer de nombreuses tâches différentes, et ils ne peuvent généralement pas appliquer ce qu'ils ont appris dans un domaine à un autre.

L'environnement Universe permet aux agents IA de prendre des pixels d'écran en entrée et de fournir une entrée sous la forme de frappes au clavier et de clics de souris. La plate-forme sera compatible avec les agents d'IA qui utilisent l'apprentissage par renforcement, qui apprennent par l'expérimentation et les commentaires positifs. Dans le cas d'un jeu vidéo, les commentaires peuvent être de terminer le jeu ou de terminer un niveau.



Sutskevar, attiré loin de Google par OpenAI l'année dernière, pense que la plate-forme produira des avancées fondamentales pertinentes dans de nombreux domaines différents. Le produit le plus important d'Universe sera des algorithmes à usage général capables d'apprendre de sa vaste expérience dans de nombreux domaines et de l'appliquer à un nouveau problème, dit-il. Cet algorithme pourrait ensuite être appliqué à la robotique, au traitement du langage naturel et à tout le reste.

OpenAI a été fondée en décembre 2015 avec un milliard de dollars apportés par de grands investisseurs technologiques, dont Elon Musk et Sam Altman, le président de Y Combinator, un accélérateur de startup bien connu de la Silicon Valley. L'organisation à but non lucratif souhaite pousser davantage la recherche sur l'IA au grand jour, car elle s'intègre de plus en plus au sein des grandes entreprises technologiques.

Plus tôt dans la journée, des chercheurs de Google DeepMind ont annoncé une plate-forme permettant aux agents d'intelligence artificielle d'apprendre à interagir avec des environnements 3D. Cette plate-forme pourrait éventuellement être importée dans Universe. Un autre environnement de jeu appelé Malmo, une version de Minecraft destinée aux chercheurs en IA, sera inclus avec Universe.



Outre plus d'un millier de jeux différents, Universe comprendra un grand nombre de tâches de navigateur prédéfinies, telles que remplir des formulaires en ligne ou manipuler un calendrier Web. Ce sous-ensemble de tâches, appelé World of Bits, pourrait inspirer la création d'une IA capable d'effectuer un grand nombre de tâches quotidiennes utiles, explique Sutskevar.

Greg Brockman , un autre cofondateur d'OpenAI, affirme que l'organisation à but non lucratif publie Universe non seulement pour profiter à la communauté de l'IA au sens large, mais aussi dans l'espoir que d'autres élargiront son utilité. Nous pensons qu'en le publiant, les gens contribueront à accélérer la plate-forme, dit-il.

Demander aux autres de créer encore plus de tâches devrait aider. Le succès ressemblera à un ensemble de données si riche et diversifié que si vous avez un agent qui s'en sort bien, il doit avoir appris quelque chose de général.



C'est super excitant, dit Emma Brunskill , professeur à l'Université Carnegie Mellon spécialisé dans l'apprentissage par renforcement. Cependant, Brunskill, qui se concentre en partie sur le développement de systèmes d'IA pour l'éducation, doute que Universe conduira à une IA générale à part entière. Elle dit qu'un problème clé restant est qu'il implique de faire beaucoup d'erreurs en cours de route, et il n'est pas toujours possible pour les systèmes d'expérimenter comme celui-ci, surtout s'ils doivent interagir avec les humains.

Tous les domaines [dans l'univers] sont un peu isolés de la société, dit-elle. Dans des applications comme l'éducation ou les soins de santé, [les agents] doivent raisonner sur le fait qu'il s'agit d'enjeux importants.

Par exemple, dit Brunskill, il ne serait pas pratique pour un agent de comprendre, grâce à l'apprentissage par renforcement, comment enseigner les mathématiques aux étudiants. Je ne veux pas qu'un million d'élèves n'apprennent pas les fractions, dit-elle.

cacher