Contrôlez votre smartphone avec vos yeux

Dans le but de rendre le suivi oculaire bon marché, compact et suffisamment précis pour être inclus dans les smartphones, un groupe de chercheurs procède au crowdsourcing de la collecte d'informations sur le regard et l'utilise pour enseigner aux logiciels mobiles comment déterminer où vous regardez en temps réel. .

Des chercheurs du MIT, de l'Université de Géorgie et de l'Institut allemand d'informatique Max Planck travaillent sur le projet, et ils disent que jusqu'à présent, ils ont été en mesure de former un logiciel pour identifier où une personne regarde avec une précision d'environ un centimètre. sur un téléphone portable et 1,7 centimètres sur une tablette.

Ce n'est pas si précis, surtout si vous considérez la taille globale de l'écran de votre smartphone. Ce n'est toujours pas assez précis pour être utilisé pour des applications grand public, déclare Aditya Khosla, étudiant diplômé au MIT et coauteur d'un papier sur le travail qui a été présenté lors d'une vision par ordinateur conférence cette semaine.

Pour les aider à créer un logiciel de suivi oculaire qui s'exécute sur votre smartphone, les chercheurs ont d'abord créé une application qui collecte les données du regard des utilisateurs.

Mais il pense que la précision du système s'améliorera avec plus de données. Si c'est le cas, cela pourrait rendre le suivi oculaire beaucoup plus répandu et utile ; généralement, cela a coûté cher et a nécessité du matériel qui a rendu difficile l'ajout de la capacité à des gadgets comme les téléphones et les tablettes. Et la technologie pourrait être utile pour vous permettre de jouer à des jeux ou de naviguer sur votre smartphone sans avoir à appuyer ou à balayer.

Les chercheurs ont commencé par créer une application iPhone appelée GazeCapture qui a recueilli des données sur la façon dont les gens regardent leurs téléphones dans différents environnements en dehors des limites d'un laboratoire. Le regard des utilisateurs a été enregistré avec la caméra frontale du téléphone alors qu'on leur montrait des points pulsés sur l'écran d'un smartphone. Pour s'assurer qu'ils prêtaient attention, on leur montrait alors un point avec un L ou un R à l'intérieur, et ils devaient appuyer sur le côté gauche ou rouler sur le côté de l'écran en réponse.

Les informations de GazeCapture ont ensuite été utilisées pour former un logiciel appelé iTracker, qui peut également fonctionner sur un iPhone. La caméra du combiné capture votre visage et le logiciel prend en compte des facteurs tels que la position et la direction de votre tête et de vos yeux pour déterminer où votre regard est concentré sur l'écran.

Environ 1 500 personnes ont utilisé l'application GazeCapture jusqu'à présent, dit Khosla, et il pense que si les chercheurs peuvent obtenir des données de 10 000 personnes, ils pourront réduire le taux d'erreur d'iTracker à un demi-centimètre, ce qui devrait être assez bon pour une gamme d'applications de suivi oculaire.

Khosla espère qu'il pourrait être utilisé pour des diagnostics médicaux en particulier ; certaines études ont examiné comment les mouvements oculaires pourraient être utilisés pour diagnostiquer des conditions telles que les commotions cérébrales.

André Duchowski , professeur à l'Université de Clemson qui étudie le suivi oculaire, pense qu'iTracker pourrait être extrêmement utile si les chercheurs peuvent le faire fonctionner correctement sur les appareils mobiles, bien qu'il prévienne qu'il devra également fonctionner rapidement et ne pas consommer trop de batterie.

Il ne pense pas qu'il soit possible d'obtenir une précision au niveau des pixels, mais il dit que cela pourrait encore être assez bon.

cacher