HoloLens peut désormais guider les aveugles à travers des bâtiments compliqués

Scott Olson | Getty

HoloLens, l'ordinateur facial coûteux de Microsoft, est conçu pour mélanger des images numériques avec le monde réel. Mais un groupe de scientifiques a trouvé que c'était vraiment bon pour une application totalement inattendue : aider les personnes aveugles à trouver leur chemin à travers les bâtiments et offrir une meilleure idée de l'endroit où les objets se trouvent autour d'eux.

Les chercheurs, du California Institute of Technology, ont créé une nouvelle application de guidage pour HoloLens en tirant parti de la capacité de cartographie en temps réel des pièces et des objets de l'appareil, ainsi que des haut-parleurs qui peuvent donner l'impression que le son provient de différents points en trois espace dimensionnel. Ils ont utilisé ces fonctionnalités pour cartographier un chemin compliqué à travers un bâtiment du campus et ont créé un guide virtuel qui aide une personne aveugle à s'y retrouver, en appelant des directions comme Suivez-moi à partir de ce qui semble être un mètre environ devant la personne, selon travail récemment publié sur le bioRxiv site Internet.

Un accompagnement vidéo montre comment cela se passe dans la réalité. Une voix féminine dirige un sujet d'étude portant HoloLens, qui est aveugle, en disant des choses comme Garde-corps des deux côtés, Monter les escaliers et Tourner à droite. L'homme suit les commandes, marchant facilement depuis un hall du premier étage jusqu'à une série d'escaliers, autour de plusieurs coins, et devant quelques portes jusqu'à ce qu'il arrive dans une pièce au deuxième étage.

Il est l'un des sept sujets qui ont essayé l'application. Tous sont arrivés à destination du premier coup, même si l'un d'entre eux s'est brièvement égaré. Markus Meister, professeur à Caltech et co-auteur de l'étude, pense que la recherche pourrait éventuellement conduire à un appareil qui pourrait être proposé aux visiteurs malvoyants dans des endroits comme les hôtels ou les centres commerciaux, les aidant à se déplacer plus facilement dans des zones inconnues. Il existe déjà des outils qui peuvent être utilisés de cette façon à l'extérieur, comme les applications de cartographie pas à pas, mais à l'intérieur, comme le note Meister, il n'y a pas autant d'options.

L'Organisation mondiale de la santé estime que 253 millions personnes sont aveugles ou malvoyantes, le marché potentiel pour une telle application pourrait donc être énorme. Mais il reste encore beaucoup de travail à faire. Pour l'instant, tous les itinéraires d'un point à un autre doivent être scannés à l'avance, et il n'y a aucun moyen de suivre d'autres personnes qui pourraient traverser l'espace pendant que le porteur HoloLens le navigue.

Mais le sujet d'étude dans la vidéo, au moins, a été impressionné par le travail jusqu'à présent.

C'était plutôt cool, dit-il en riant, à la fin du clip.

cacher