Voir l'esprit d'un robot en réalité augmentée

Justin Saglio





Lorsque les déménageurs sont venus au laboratoire de robotique de l'Université Brown de Stefanie Tellex la semaine dernière, ses étudiants ont regardé avec intérêt. Regardez comment ils se sont habilement associés pour prendre un canapé en utilisant le langage corporel, le contact visuel et juste quelques commandes, comme 1-2-3 … ascenseur.

Les robots et les humains peuvent-ils travailler ensemble aussi bien ? C'est le but des recherches du laboratoire Tellex, qui tente de donner aux robots et aux humains les outils pour se comprendre un peu mieux et travailler ensemble de manière plus fluide dans des environnements réels.

Certains robots, comme l'aspirateur Roomba, n'ont vraiment besoin que d'une seule commande : nettoyer ou arrêter. C'est la bonne interface pour un Roomba, mais nous voyons des robots aller au-delà d'une seule fonction. Nous aimerions pouvoir leur dire tout ce qui relève des capacités physiques du robot, explique Tellex. Je travaille sur un système où vous parlez au robot comme une personne. Vous dites «Mettez la caisse là-bas» et le robot le comprend.



C'est un problème difficile, notamment parce qu'il existe de nombreuses façons de décrire ce que vous voulez faire. (Je n'ai qu'à penser à ce qui se passe lorsque ma femme et moi - pas de déménageurs experts - essayons de repositionner notre propre canapé.)

Dans un travail présenté l'année dernière, l'équipe de Tellex a utilisé une interface vocale pour voir si une personne et un robot préhenseur pouvaient travailler ensemble pour choisir parmi un groupe d'objets similaires sur une table, y compris des bols, des marqueurs et des cuillères. Une commande comme Puis-je avoir ce bol ? pourrait laisser le robot dans le doute. Ils ont donc programmé le robot pour qu'il pose des questions de clarification, comme celle-ci ?

Le groupe Brown a invité 16 volontaires dans le laboratoire et a constaté qu'avec un tel mini-dialogue, les robots faisaient le travail environ 25 % plus rapidement et avec une meilleure précision. Les gens pensaient aussi que le robot était beaucoup plus intelligent qu'il ne l'est en réalité. C'était tellement bien que les gens pensaient que le système pouvait comprendre des phrases comme 'à gauche de', même quand ce n'était pas le cas. Mais il posait une question, donc il semblait qu'il comprenait, dit Tellex.



La prochaine étape du projet, dirigé par le doctorant David Whitney, consiste à combiner des commandes verbales avec le casque de réalité augmentée HoloLens.

Pendant Examen de la technologie MIT Lors de la conférence EmTech Next de , j'ai essayé la configuration, qui montre à l'utilisateur des versions violettes fantomatiques du robot décrivant les actions qu'il prévoit d'effectuer, afin que vous puissiez les corriger ou les ajuster si nécessaire.

Ici, le but est de pénétrer dans l'esprit du robot, explique Whitney. Les bons déménageurs utilisent beaucoup de langage corporel, mais les robots ne nous ressemblent pas, dit-il. C'est donc une façon de visualiser des informations sur le robot - à quoi pense-t-il ? »



cacher