Des électrodes pour votre visage apportent vos émotions à la réalité augmentée et virtuelle

Le dispositif de masque de MindMaze comprend un coussinet facial en mousse intégré avec des électrodes qui peuvent capturer les mouvements des muscles faciaux.

Tej Tadi est vraiment enthousiasmé par le coussinet facial en mousse qui se trouve à l'intérieur d'un casque de réalité virtuelle sur un bureau dans son bureau.

C'est le genre d'amorti banal que l'on trouve normalement sur de nombreux types d'écrans montés sur la tête, mais celui de son démarrage, MindMaze , a est différent. Il est intégré avec des électrodes afin qu'il puisse capter les signaux électriques associés aux mouvements de vos muscles faciaux, et il est connecté à un ordinateur où un logiciel analyse ces signaux pour reproduire vos expressions faciales sur un avatar à l'écran.

Appelé Mask, Tadi le voit comme un moyen d'apporter des grimaces, des sourires et des sourcils d'apparence naturelle aux personnages virtuels sans ajouter beaucoup de volume aux casques. Le fait de permettre aux utilisateurs d'exprimer plus facilement leurs émotions - et d'interagir les uns avec les autres - dans la réalité virtuelle pourrait encourager davantage de personnes à l'essayer, pense-t-il, et à le rendre plus efficace.

La seule façon de le faire est de ramener les émotions dans le jeu, dit-il. Cela fait de nous des êtres humains, n'est-ce pas ? Les indices non verbaux.

Pour l'instant, les casques de réalité virtuelle et augmentée sont encore difficiles à vendre à la plupart des consommateurs pour de nombreuses raisons : ils sont ennuyeux à porter, n'ont pas encore beaucoup d'applications pratiques claires et peuvent sembler isolés, pour n'en nommer que quelques-unes.

MindMaze, basé en Suisse, qui a levé 100 millions de dollars, propose déjà du matériel de réalité virtuelle qui combine des fonctionnalités telles que des jeux, le suivi des mouvements et la surveillance des signaux cérébraux pour aider à réhabiliter les victimes d'AVC ; il est actuellement utilisé dans plusieurs dizaines d'hôpitaux en Europe.

Mask s'appuie sur le travail existant de l'entreprise, dit Tadi, et peut actuellement reconnaître 10 expressions différentes, y compris le clin d'œil, le sourire, le sourire narquois, la grimace et le haussement des sourcils. Et avec un microphone attaché, il peut également imiter la bouche du porteur pendant qu'il parle.

Tadi s'attend à ce qu'un tel gadget soit disponible pour les consommateurs plus tard cette année, soit en tant que produit de MindMaze lui-même, soit d'un fabricant de casques.

Alors que je regardais un membre de l'équipe de MindMaze essayer un prototype de l'appareil, cela semblait fonctionner plutôt bien : avec un OSVR casque de réalité virtuelle équipé de la technologie de MindMaze, il a créé une variété d'expressions qu'un personnage masculin de dessin animé a également faites sur un écran de bureau. Cependant, le mimétisme de la parole ne semblait pas beaucoup mieux que les mouvements de conversation de base que j'ai vus sur la bouche des personnages virtuels.

Il n'était pas nécessaire de calibrer le casque pour que je puisse l'essayer, mais il avait des problèmes pour reconnaître certaines de mes expressions faciales. Tadi et son équipe ont expliqué que cela était peut-être dû à des poils errants gênant l'une des électrodes.

Et c'est toujours difficile à manier et désordonné : l'insert en mousse chargé d'électrodes était connecté à certains fils et appareils électroniques ainsi qu'à un ordinateur, et une électrode recouverte de gel était connectée à chacun de mes lobes d'oreille pour servir de référence.

Tadi dit que les électrodes auriculaires pourraient être remplacées par des électrodes sèches intégrées dans des écouteurs connectés au casque, et que l'électronique pourrait être réduite. Mais le fait demeure que la fonctionnalité ajouterait encore plus de bagages aux casques déjà critiqués pour leur taille - il reste à voir si l'ajout d'expression émotionnelle peut l'emporter sur ce problème.

cacher