Éloignez-vous de la télécommande

Le salon de Ketan Banjara n'est pas encombré de télécommandes. Pour faire taire la musique, il porte simplement un doigt à ses lèvres. Et lorsqu'il se lève du canapé et quitte la pièce, son écran de télévision se met automatiquement en pause.

Banjara est cofondateur de PrédireRegard , une startup qui combine la détection du regard, la reconnaissance des gestes et la reconnaissance des caractéristiques faciales pour créer des moyens plus naturels de tout contrôler, de votre téléviseur à votre voiture.

Alors que de nombreuses personnes viennent tout juste de mettre la main sur leur premier gadget à écran tactile, PredictGaze fait partie d'une multitude d'entreprises pariant que les commandes sans contact seront la prochaine grande chose. Avec des caméras frontales intégrées dans toutes sortes de gadgets, ce n'est pas difficile à imaginer.

Jusqu'à présent, le logiciel de l'entreprise a été intégré dans un jeu iOS pour permettre aux utilisateurs de contrôler un monstre avide de nourriture et aux dents béantes en bougeant la tête. La technologie est également testée dans certains magasins au Japon où des caméras suivent le sexe d'un client, son sourire et le temps passé devant un produit dans l'espoir que les données puissent être utilisées pour augmenter les ventes en offrant à un acheteur hésitant un coupon au bon moment. ou en améliorant le placement de produit.

PredictGaze imagine toutes sortes d'applications pour sa technologie, notamment empêcher votre enfant de cinq ans de regarder du contenu pour adultes à la télévision et déterminer que vous commencez à vous endormir au volant de votre voiture.

La technologie de l'entreprise combine des algorithmes d'apprentissage automatique et de vision par ordinateur dans un logiciel qui peut utiliser une caméra VGA standard pour déterminer où vous regardez, quel est votre sexe, si vous souriez, et plus encore. Il peut également identifier des gestes, qui peuvent ensuite tous être traduits en actions prises par les appareils.

Afin d'identifier l'âge d'une personne, par exemple, PredictGaze a formé son logiciel avec des images de personnes d'âges différents. Ces informations peuvent ensuite être utilisées pour identifier votre âge à partir d'une image de vous lorsque vous vous tenez devant un appareil photo connecté, par exemple, à un iPad exécutant son logiciel.

De même, l'entreprise a formé son logiciel avec des milliers d'images d'actions de silence et de non silence afin d'identifier cette action.

Pour effectuer le suivi du regard, la caméra capture en continu vos mouvements oculaires et utilise ces données pour calculer où vous regardez. Cela peut se traduire, par exemple, par le mouvement d'un personnage dans un jeu.

Ce n'est pas que nous ayons des technologies différentes que nous avons réunies. C'est une différence. C'est une technologie capable de gérer le visage, les gestes et le regard, dit Banjara.

La société affirme qu'elle traite toutes les données sur l'appareil exécutant son logiciel, plutôt que de les envoyer à des serveurs distants, et qu'aucune des images capturées par les caméras n'est enregistrée. La technologie fonctionne même sous un éclairage changeant, selon l'entreprise.

Dans le salon à la décoration clairsemée de Banjara à Mountain View, en Californie, l'équipe PredictGaze m'a montré un déluge de démos sur un téléviseur, un ordinateur portable, un iPad, un iPhone et un iPod Touch.

Dans l'un, Banjara et moi nous sommes assis devant un grand téléviseur à écran plat connecté à un iPad exécutant le logiciel PredictGaze. Alors qu'un clip de Rihanna retentissait à la télévision, Banjara se leva et s'éloigna ; rien ne s'est passé. Je me suis éloigné aussi et la vidéo s'est arrêtée lorsque la caméra frontale de l'iPad a déterminé qu'il ne restait plus personne à regarder.

Dans une autre démonstration, un membre de l'équipe PredictGaze tenant un iPad a parcouru une page Web et a tourné les pages d'un livre électronique avec son regard.

Dans une troisième démo, deux d'entre nous se sont assis devant l'iPad et le logiciel a déterminé avec précision le nombre de personnes présentes, le sexe de chaque personne, s'ils souriaient, etc. Cela pouvait déterminer mon sexe même lorsque je portais des lunettes et me couvrais les cheveux.

En ce moment, certains des efforts de PredictGaze sont sensibles et capricieux : si Banjara et moi restions assis sur le canapé mais nous tournions l'un vers l'autre, Rihanna arrêtait également de chanter. Et lorsque je jouais au jeu iPhone qui inclut le logiciel PredictGaze, il s'arrêtait souvent, citant des problèmes pour suivre les mouvements de ma tête. Mais avec un peu de peaufinage - et l'inclusion de caméras grand angle sur les téléviseurs et les tablettes qui peuvent capturer plus d'action - je peux imaginer l'utilité de PredictGaze.

La société souhaite vendre son kit de développement logiciel aux développeurs pour une utilisation dans leurs applications. Il prévoit également de vendre sa technologie à des sociétés d'électronique, qui vendent de plus en plus de gadgets comprenant des caméras frontales, afin que PredictGaze puisse être intégré directement dans les appareils. Finalement, PredictGaze peut également créer son propre matériel.

Mais Roel Vertegaal, professeur agrégé d'interaction homme-machine à l'Université Queen's de Kingston, en Ontario, et directeur du Human Media Lab de l'école, n'est pas très impressionné par la technologie de PredictGaze, qui, selon lui, n'est pas nouvelle. Lui et d'autres travaillent sur de telles interfaces depuis des années, dit-il.

Pourtant, il pense qu'il est bon qu'une telle technologie devienne commercialement viable.

Je pense qu'il y a un réel besoin pour ce genre de chose, dit-il.

De retour dans son salon, Banjara le pense aussi.

cacher