Les lunettes de réalité augmentée pourraient aider à naviguer légalement aveugle

Bien que cela ressemble à une installation pop-art que vous pourriez trouver dans une galerie de Brooklyn, le monde noir et blanc à contraste élevé que vous voyez lorsque vous regardez à travers une paire de lunettes de réalité augmentée de Stephen Hicks fait en fait partie d'un plan pour aider les aveugles légalement à mieux voir.

Hicks , chercheur en neurosciences et prothèses visuelles à l'Université d'Oxford, est le cofondateur de VASTE , une startup issue de l'université qui fabrique des lunettes qui utilisent un capteur de profondeur et un logiciel pour mettre en évidence les contours des personnes et des objets à proximité et simplifier leurs caractéristiques. Les lunettes ont quatre modes différents qui montrent le monde qui vous entoure en noir, blanc et gris avec différents degrés de détails et de dessin animé, ainsi qu'un mode couleur normal qui peut être utilisé pour simplement zoomer ou mettre en pause des objets.

La plupart des personnes classées comme légalement aveugles conservent en fait une certaine vision, mais peuvent ne pas être en mesure de distinguer les visages et les obstacles, en particulier dans des conditions de faible luminosité. Pour cette raison, Hicks pense que son appareil, appelé Smart Specs, pourrait permettre à certaines personnes malvoyantes d'explorer plus facilement leur environnement.

Cela aide à identifier les choses à proximité et à les faire vraiment ressortir, dit-il.

Un prototype des spécifications intelligentes de VA-ST, qui utilisent la réalité augmentée pour aider les personnes légalement aveugles à voir plus facilement les personnes et les formes.

En juin, VA-ST a lancé une étude au Royaume-Uni dans le cadre de laquelle il prête des prototypes de ses lunettes et une boîte de contrôle attachée à 300 personnes souffrant d'affections oculaires telles que la dégénérescence maculaire, le glaucome et la rétinite pigmentaire pendant quatre semaines à la fois. Étant donné que la boîte peut enregistrer les paramètres utilisés par les participants à l'étude et quand, ainsi que les données de mouvement d'un accéléromètre intégré, les chercheurs pourront voir comment les personnes ayant différents problèmes de vision utilisent les lunettes dans la vie quotidienne.

VA-ST espère commencer à vendre une version de sa configuration au début de l'année prochaine, dit Hicks, pour moins de 1 000 $.

La version actuelle des Smart Specs se compose d'un casque en plastique volumineux et brillant qui comprend une paire de Lunettes de réalité augmentée Epson Moverio comme son écran, ainsi qu'un gadget Asus qui combine une caméra de profondeur et une caméra couleur ordinaire. Les grosses lunettes s'attachent autour de la tête du porteur et se connectent à une boîte mince avec plusieurs boutons sur le côté que les utilisateurs doivent également transporter. La boîte contient un ordinateur fonctionnant sous Android qui exécute le traitement d'image pour les lunettes, ainsi qu'un batterie qui alimente le système jusqu'à huit heures d'affilée. Il est impossible de l'ignorer, mais plus petit que le prototype précédent, qui reliait les lunettes à un ordinateur portable.

Les spécifications intelligentes de VA-ST peuvent être utilisées pour afficher une vue couleur normale du monde ou une gamme de vues en noir et blanc à contraste élevé.

La caméra standard de l'appareil Asus capture votre environnement, tandis que la caméra de profondeur détermine la distance à chaque objet et surface. Le logiciel exécuté sur l'ordinateur dans le boîtier de commande utilise les mesures de profondeur pour déterminer ce qu'il faut mettre en évidence et ce qu'il faut ignorer. Si une femme se tient à environ 10 pieds devant vous, le logiciel de VA-ST donnera à son corps un aspect animé et exagéré en fonction du réglage que vous utilisez, la faisant apparaître en noir et blanc avec un contour blanc et seulement quelques faciales majeures. des caractéristiques telles que des lunettes, son nez et sa bouche, par exemple, tandis que d'autres personnes et objets un peu plus éloignés apparaîtront gris et l'arrière-plan sera complètement noir.

En entrant dans un restaurant ou un bar, l'éclairage change si radicalement que personne ne peut voir du tout, dit Hicks. Cela aiderait à mettre en valeur les chaises.

J'ai essayé Smart Specs lors d'une conférence technologique à Santa Clara, en Californie, ce mois-ci. En tant que personne ayant une vision normale, voir le monde à travers les lentilles de VA-ST, c'est comme être à l'intérieur d'un film d'animation minimaliste ; Hicks le compare au film d'animation trippant de Richard Linklater Vie éveillée , qui utilise une forme de dessin sur des séquences de films d'action en direct connue sous le nom de rotoscopie .

En fixant Hicks, je l'ai vu en noir et blanc, avec des traits simples et le plaid de sa chemise réduit à un simple motif entrecroisé. D'autres personnes se tenant au loin apparaissaient sous forme de silhouettes noires aux contours blancs.

Hicks dit que l'un des plus grands défis est maintenant d'obtenir des caméras de profondeur à longue portée qui peuvent bien fonctionner avec ses lunettes, qui nécessitent une portée d'environ 15 pieds.

James Weiland , professeur d'ophtalmologie et de génie biomédical à l'Université de Californie du Sud, qui travaille sur une aide visuelle portable, affirme que les Smart Specs semblent potentiellement utiles pour les personnes malvoyantes. Il souligne, cependant, qu'il peut y avoir des informations visuelles importantes en arrière-plan que la technologie de VA-ST ne montrerait que si vous en êtes proche, comme les portes.

Les spécifications intelligentes peuvent également avoir besoin d'être beaucoup plus légères et, peut-être, plus belles.

Certains l'accepteront en raison des avantages qu'il procure, dit Weiland. Mais certains diront: 'Je n'aime pas avoir l'air d'avoir un gros truc sur la tête.'

Hicks est d'accord; il dit qu'il aimerait les réduire pour les rendre beaucoup plus normaux.

cacher