À l'intérieur du plan d'Amazon pour qu'Alexa dirige toute votre vie

Illustration de deux appareils Alexa discutant entre eux Mme Tech / source : Amazon

J'ai commencé à utiliser Alexa avant que ce soit cool. J'ai acheté un Echo de première génération quelques mois après son lancement car Amazon.com m'a montré une bannière publicitaire alors que j'achetais de nouveaux haut-parleurs. Après son arrivée, ma colocataire de l'époque, ingénieur logiciel chez Google, a comparé avec empressement les capacités d'Alexa à celles de son assistant Google. Alexa n'a pas vraiment été à la hauteur. Mais en ce qui me concernait, il faisait tout ce que je voulais : il jouait mes chansons préférées, faisait sonner mes réveils matinaux et m'indiquait parfois les nouvelles et la météo.

Cinq ans plus tard, mes désirs simples ont été éclipsés par les ambitions d'Amazon. Alexa est désormais distribué partout, capable de contrôler plus de 85 000 produits de maison intelligente, des téléviseurs aux sonnettes en passant par les écouteurs. Il peut exécuter plus de 100 000 compétences et compter. Il traite des milliards d'interactions par semaine, générant d'énormes quantités de données sur votre emploi du temps, vos préférences et vos déplacements. Alexa est devenue un empire et Amazon ne fait que commencer.

S'adressant à MIT Technology Review, Rohit Prasad, le scientifique en chef d'Alexa, a maintenant révélé plus de détails sur la prochaine direction d'Alexa. L'essentiel du plan est que l'assistant vocal passe d'interactions passives à proactives. Plutôt que d'attendre et de répondre aux demandes, Alexa anticipera ce que l'utilisateur pourrait vouloir. L'idée est de faire d'Alexa un compagnon omniprésent qui façonne et orchestre activement votre vie. Cela nécessitera qu'Alexa vous connaisse mieux que jamais.

En fait, Prasad, qui présentera sa vision de l'avenir d'Alexa au WebSummit à Lisbonne, au Portugal, plus tard dans la journée, a déjà donné au monde un aperçu de ce à quoi pourrait ressembler ce changement. En juin, lors de la conférence re:Mars, il démo une fonctionnalité appelée Alexa Conversations, montrant comment elle pourrait être utilisée pour vous aider à planifier une soirée. Au lieu de lancer manuellement une nouvelle demande pour chaque partie de la soirée, vous n'auriez qu'à entamer la conversation, par exemple en demandant de réserver des billets de cinéma. Alexa suivrait ensuite pour vous demander si vous vouliez également faire une réservation de restaurant ou appeler un Uber.

Rohit Prasad, vice-président et directeur scientifique d'Alexa. Jérémy Portje

Pour alimenter cette transition, Amazon a besoin à la fois de matériel et de logiciels. En septembre, le géant de la technologie a lancé une suite de produits Alexa en déplacement, notamment les Echo Buds (écouteurs sans fil) et Echo Loop (un anneau intelligent). Tous ces nouveaux produits permettent à Alexa d'écouter et d'enregistrer des données sur une partie considérablement plus importante de votre vie, afin de mieux vous offrir une assistance informée de votre localisation, de vos actions et de vos préférences.

D'un point de vue logiciel, ces capacités nécessiteront qu'Alexa utilise de nouvelles méthodes pour traiter et comprendre toutes les sources d'informations disparates. Au cours des cinq dernières années, l'équipe de Prasad s'est concentrée sur le renforcement de la maîtrise par l'assistant des principes fondamentaux de l'IA, comme la reconnaissance vocale et vidéo de base, et sur l'élargissement de sa compréhension du langage naturel. En plus de cette base, ils ont maintenant commencé à développer les capacités de prédiction et de prise de décision intelligentes d'Alexa et, de plus en plus, sa capacité de raisonnement de niveau supérieur. En d'autres termes, l'objectif est que les capacités d'intelligence artificielle d'Alexa deviennent beaucoup plus sophistiquées d'ici quelques années.

Une Alexa plus intelligente

Voici comment les mises à jour logicielles d'Alexa se réuniront pour exécuter le scénario de planification nocturne. Afin de donner suite à une demande de billet de cinéma avec des invites pour le dîner et un Uber, un réseau de neurones apprend, grâce à des milliards d'interactions d'utilisateurs par semaine, à reconnaître quelles compétences sont couramment utilisées les unes avec les autres. C'est ainsi que la prédiction intelligente entre en jeu. Lorsqu'un nombre suffisant d'utilisateurs réservent un dîner après un film, Alexa regroupe les compétences et les recommande conjointement.

Mais il faut raisonner pour savoir à quelle heure réserver l'Uber. En tenant compte de votre emplacement et de celui du cinéma, de l'heure de début de votre film et du trafic prévu, Alexa détermine quand la voiture doit venir vous chercher pour vous y emmener à temps.

Prasad imagine de nombreux autres scénarios qui pourraient nécessiter un raisonnement plus complexe. Vous pourriez imaginer une compétence, par exemple, qui vous permettrait de demander à vos Echo Buds où se trouvent les tomates pendant que vous vous tenez dans Whole Foods. Les bourgeons devront enregistrer que vous êtes dans Whole Foods, accéder à une carte de son plan d'étage, puis vous dire que les tomates sont dans l'allée sept.

Tous les produits compatibles Alexa du dernier lancement de produit d'Amazon en septembre. avec l'aimable autorisation d'Amazon

Dans un autre scénario, vous pourriez demander à Alexa via votre maison commune Echo de vous envoyer une notification si votre vol est retardé. Quand il est temps de le faire, peut-être que vous conduisez déjà. Alexa doit réaliser (en identifiant votre voix dans votre demande initiale) que vous, et non un colocataire ou un membre de la famille, avez besoin de la notification et, sur la base du dernier appareil compatible Echo avec lequel vous avez interagi, que vous êtes maintenant dans votre voiture. Par conséquent, la notification doit être envoyée à votre voiture plutôt qu'à votre domicile.

Ce niveau de prédiction et de raisonnement devra également tenir compte des données vidéo car de plus en plus de produits compatibles Alexa incluent des caméras. Disons que vous n'êtes pas à la maison, pense Prasad, et qu'une éclaireuse frappe à votre porte pour vendre des biscuits. L'Alexa sur votre Amazon Ring, une sonnette équipée d'une caméra, devrait enregistrer (via une entrée vidéo et audio) qui est à votre porte et pourquoi, sachez que vous n'êtes pas chez vous, vous envoyer une note sur un appareil Alexa à proximité vous demandant combien de cookies vous voulez et commandez-les en votre nom.

Pour rendre cela possible, l'équipe de Prasad teste actuellement une nouvelle architecture logicielle pour le traitement des commandes des utilisateurs. Cela implique de filtrer les informations audio et visuelles à travers de nombreuses autres couches. Alexa doit d'abord enregistrer la compétence à laquelle l'utilisateur tente d'accéder parmi les quelque 100 000 disponibles. Ensuite, il devra comprendre la commande dans le contexte de qui est l'utilisateur, quel appareil cette personne utilise et où. Enfin, il devra affiner la réponse en fonction des préférences précédemment exprimées par l'utilisateur.

C'est ce que je pense que les prochaines années seront: raisonner et le rendre plus personnel, avec plus de contexte, dit Prasad. C’est comme tout rassembler pour prendre ces décisions massives.

L'éléphant dans la pièce

D'un point de vue technique, tout cela serait une réalisation incroyable. Ce dont parle Prasad - combiner diverses sources de données et méthodes d'apprentissage automatique pour mener un raisonnement de haut niveau - est un objectif des chercheurs en intelligence artificielle depuis des décennies.

Du point de vue du consommateur, cependant, ces changements ont également des implications critiques en matière de confidentialité. La vision de Prasad suppose effectivement qu'Alexa vous suivra partout, en saura pas mal sur ce que vous faites à tout moment et sera la principale interface pour la façon dont vous coordonnez votre vie. Au départ, cela nécessite d'aspirer d'énormes quantités de détails intimes sur votre vie. Certains craignent qu'Amazon aille finalement bien au-delà de cette ligne de base en utilisant vos données pour vous faire de la publicité et vous commercialiser. Il s'agit en fin de compte de monétiser la vie quotidienne d'individus et de groupes de personnes, explique Jeffrey Chester, directeur exécutif du Center for Digital Democracy, une organisation de défense de la vie privée des consommateurs basée à Washington, DC.

Lorsqu'il a été pressé sur ce point, Prasad a souligné que son équipe avait permis aux utilisateurs de supprimer périodiquement automatiquement leurs données et de se retirer de l'examen humain. Cependant, aucune des deux options n'empêche réellement l'utilisation des données pour former la myriade de modèles d'apprentissage automatique d'Alexa. En fait, Prasad a fait allusion à des recherches en cours qui transformeraient le processus de formation d'Alexa en un processus où les modèles peuvent être rapidement mis à jour chaque fois qu'il y a de nouvelles données utilisateur, garantissant plus ou moins que la valeur de ces données sera capturée avant d'être éliminée. En d'autres termes, la suppression automatique de vos données signifiera seulement qu'elles ne seront plus là pour former de futurs modèles une fois que les algorithmes de formation auront été mis à jour ; pour les modèles actuels, vos données seraient utilisées à peu près de la même manière. (Dans les demandes de suivi, un porte-parole d'Amazon a déclaré que la société ne vendait pas les données collectées par Alexa à des annonceurs tiers ni pour cibler la publicité, à moins que l'utilisateur n'accède à un service via Alexa, comme Amazon.com.)

Jen King, directrice de la protection de la vie privée au Center for Internet and Society de la Stanford Law School, affirme que ces types de contrôle des données sont beaucoup trop superficiels. Si vous voulez donner aux gens un contrôle significatif, vous devez être en mesure de respecter leur décision de se retirer complètement ou de leur donner plus de choix sur la façon dont leurs données sont utilisées, dit-elle. Donner à quelqu'un une aide fonctionnelle d'une manière spécifique à l'emplacement pourrait être fait d'une manière extrêmement préservant la vie privée. Je ne pense pas que ce scénario doive être intrinsèquement problématique.

En pratique, King envisage que cela signifie plusieurs choses. Tout d'abord, au strict minimum, Amazon devrait inciter les utilisateurs à s'inscrire plutôt qu'à s'abstenir de laisser leurs données être utilisées. Deuxièmement, Amazon devrait être plus transparent sur son utilisation. Actuellement, lorsque vous supprimez vos données, il n'est pas clair ce que l'entreprise a pu en faire. Imaginez que vous avez une caméra de surveillance AI dans votre maison et que vous avez oublié qu'elle était allumée et que vous vous promenez nu dans la maison, dit-elle. En tant que consommateur, il serait utile de savoir, lorsque vous supprimez ces fichiers, si le système les a déjà utilisés pour former l'algorithme qu'il utilise.

Enfin, Amazon devrait donner aux utilisateurs plus de flexibilité quant au moment et à l'endroit où ils peuvent utiliser leurs données. Les utilisateurs peuvent être heureux, par exemple, de renoncer à leurs propres données tout en voulant que celles de leurs enfants soient interdites. Les entreprises technologiques ont tendance à concevoir ces produits avec cette idée que c'est tout ou rien, dit-elle. Je pense que c'est une façon vraiment erronée de l'aborder. Les gens peuvent vouloir une partie de la commodité de ces choses, mais cela ne signifie pas qu'ils les veulent dans toutes les facettes de leur vie.

La vision ultime de Prasad est de rendre Alexa disponible et utile pour tout le monde. Même dans les pays en développement, il imagine des versions moins chères auxquelles les gens peuvent accéder sur leurs smartphones. Pour moi, nous sommes en train de déplacer la charge cognitive sur les tâches de routine, dit-il. Je veux qu'Alexa soit un outil d'amélioration de la productivité... qu'elle soit vraiment omniprésente pour que cela fonctionne pour tout le monde.

Pour recevoir plus d'histoires comme celle-ci directement dans votre boîte de réception, inscrivez-vous à notre newsletter AI nominée par Webby, The Algorithm. C'est gratuit.

cacher