Rencontrez le gars à quatre bras, dont deux contrôlés par quelqu'un d'autre en VR

Image d'un homme échangeant une balle avec une main du sac à dos armé d'un robot. École supérieure de conception des médias de l'Université Keio, Université de Tokyo

Yamen Saraiji a quatre bras, et deux d'entre eux le serrent dans ses bras.

Les membres qui embrassent Saraiji sont longs, dégingandés et robotiques, et ils sont reliés à un sac à dos qu'il porte. Les bras sont en fait contrôlés à distance par une autre personne, qui porte un casque Oculus Rift VR, avec lequel ils peuvent voir le monde du point de vue de Saraiji (les caméras liées au sac à dos assurent une bonne vue), et manient des contrôleurs portables pour diriger le non-humain bras et mains connectés.

Après le câlin, les bras robotiques libèrent Saraiji. Puis la main droite lui donne un high five et Saraiji sourit.

Saraiji, professeur adjoint à la Graduate School of Media Design de l'Université Keio de Tokyo, a dirigé le développement de ce projet de bras robotiques sur un sac à dos, appelé Fusion, pour explorer comment les gens peuvent être capables de travailler ensemble pour contrôler (ou augmenter) le corps d'une personne. Bien que certaines des actions que Saraiji me montre via le chat vidéo depuis son laboratoire au Japon soient idiotes, il pense que l'appareil pourrait être utile pour des choses comme la thérapie physique et l'instruction des gens de loin.

Outre les câlins et les high-five, l'opérateur des bras et des mains robotiques peut ramasser des objets ou se déplacer autour des bras et des mains de l'humain portant le sac à dos. Les mains mécaniques peuvent être retirées et remplacées par des sangles qui entourent les poignets du porteur du sac à dos si vous souhaitez vraiment contrôler ses bras à distance. L'appareil, que Saraiji a créé avec des collègues de l'Université Keio et de l'Université de Tokyo, sera présenté au Siggraphe conférence sur l'infographie et l'interaction technologique à Vancouver en août.

Les bras robotiques peuvent être attachés aux poignets du porteur, donnant à l'opérateur à distance plus de contrôle sur les mouvements des bras du porteur.

Il y a eu beaucoup de autres efforts pour créer des membres supplémentaires que vous pouvez porter, et en fait, ce n'est pas la première fois que Saraiji fabrique des membres robotiques destinés à être attachés à un humain : lui et la plupart des autres chercheurs de Fusion ont précédemment construit un ensemble portable de bras et de mains appelé Méta-membres qu'un porteur contrôlait avec ses pieds.

Avoir les membres contrôlés par quelqu'un d'autre - quelqu'un qui peut être dans une autre pièce ou un autre pays, et en VR pour démarrer - est cependant un peu différent. Saraiji dit qu'il voulait voir ce qui se passerait si quelqu'un d'autre pouvait, en un sens, plonger dans votre corps et prendre le contrôle.

Le sac à dos comprend un PC qui diffuse des données sans fil entre le porteur du bras robotique et la personne contrôlant les membres en VR. Le PC se connecte également à un microcontrôleur, lui indiquant comment positionner les bras et les mains robotiques et le couple à appliquer aux articulations.

Les bras robotiques, chacun avec sept articulations, sortent du sac à dos, avec une tête connectée, en quelque sorte. La tête a deux caméras qui montrent à l'opérateur à distance, en VR, un flux en direct de tout ce que voit le porteur du sac à dos. Lorsque l'opérateur bouge sa tête en VR, des capteurs suivent ce mouvement et font bouger la tête robotique en réponse (elle peut tourner à gauche ou à droite, s'incliner de haut en bas et pivoter d'un côté à l'autre, dit Saraiji).

Le système portable est alimenté par une batterie qui dure environ une heure et demie. C'est assez lourd, pesant près de 21 livres.

Bien sûr, c'est toujours un prototype, souligne Saraiji.

Pendant que je lui parle, Saraiji met le sac à dos et engage un étudiant diplômé pour porter le casque VR et aider à démontrer comment cela fonctionne. J'appelle quelques commandes, comme demander à l'opérateur du membre du robot de ramasser quelque chose. Au début, il tâtonne avec un jouet jaune grinçant aux yeux de dessin animé, puis parvient à l'attraper et à le remettre à Saraji; puis l'une des mains du robot reprend le jouet et le rend à nouveau à Saraji. À un moment donné, Saraiji marche derrière le gars qui actionne les bras en VR, afin que l'opérateur puisse se taper sur l'épaule avec l'un des doigts du robot et se frotter le cou en abrégé.

Différents boutons sur les contrôleurs Oculus Rift permettent différentes fonctions des doigts : l'opérateur peut déplacer l'auriculaire, l'annulaire et le majeur de chaque main robotique simultanément avec un seul bouton, tandis que le pouce et l'index ont chacun leurs propres commandes.

Frère Igo Krebs , chercheur principal au MIT qui a passé des décennies à étudier la robotique de réadaptation, ne pense pas que le projet serait pratique pour la réadaptation. Mais il peut imaginer que cela peut être utile dans de nombreuses situations différentes - pour aider un astronaute dans l'espace extra-atmosphérique, par exemple, ou un ambulancier paramédical avec une procédure médicale inconnue.

Saraiji dit qu'il aimerait transformer le projet en un produit réel, et lui et ses collaborateurs sont en train de le présenter à un accélérateur de startup basé à Tokyo.

cacher