Vous pouvez maintenant utiliser les émoticônes pour rechercher des vidéos de chats mignons

Dans un mouvement qui permet de combiner de manière transparente votre amour des emojis avec d'adorables vidéos d'animaux, un groupe de chercheurs a construit un prototype de moteur de recherche qui utilise les minuscules icônes pour rechercher des vidéos.

Appelé Emoji2Vidéo , le moteur de recherche a été créé par des chercheurs de l'Université d'Amsterdam et de Qualcomm Research afin de montrer comment les emojis peuvent être utilisés pour donner une représentation dense et facile à comprendre de ce qui se passe dans les images et les vidéos, quelque chose que vous pouvez comprendre quelle que soit la langue que vous parlez ou que vous sachiez ou non lire.

Les visiteurs du site peuvent cliquer sur un ou plusieurs emojis à partir d'une liste organisée de 385 (la liste complète actuelle liste organisé par un groupe appelé Unicode Consortium en contient près de 1 300, mais les chercheurs ont exclu ceux qu'ils ne pensaient pas être pertinents pour les recherches vidéo, comme les symboles et les chiffres, et ceux qui étaient quelque peu redondants). Les pictogrammes que vous choisissez seront utilisés pour rechercher des correspondances pertinentes dans un ensemble de données de 45 000 vidéos YouTube.

C'est un moyen d'accéder très rapidement à la chose très spécifique que vous recherchez, dit Spencer Cappallo , étudiant diplômé de l'Université d'Amsterdam et co-auteur de l'article.

Les chercheurs présentent Emoji2Video et un article expliquant la technologie sous-jacente utilisée pour faire fonctionner le moteur de recherche cette semaine lors d'une conférence technologique à Brisbane, en Australie.

Les emojis ont été créés au Japon dans les années 1990 et sont devenus de plus en plus populaires ces dernières années, car les fabricants de smartphones les ont ajoutés aux claviers virtuels, ce qui facilite la ponctuation d'un message texte avec un petit cœur rose ou un tout petit martini.

Les icônes sont utilisées si fréquemment que certains services en ligne permettent déjà aux utilisateurs de rechercher via des emojis : le moteur de recherche Bing de Microsoft acceptera les requêtes emoji, tandis que Yelp vous permettra de rechercher des entreprises en tapant, par exemple, un emoji poulet plutôt que le mot poulet. Cappallo dit que les chercheurs voulaient se concentrer sur la vidéo en particulier parce qu'ils n'avaient pas vu beaucoup de travail sur la façon de relier les emojis aux images et aux vidéos, et vice versa.

Les chercheurs ont utilisé des techniques d'apprentissage en profondeur pour produire des étiquettes emoji pour des vidéos qui semblent représenter de manière appropriée ce qu'elles contiennent (une balle de baseball ou un chien, par exemple) et pour déterminer la probabilité que ces choses se trouvent dans un cadre donné. Environ une image sur 50 a été analysée, dit Cappallo, et les émojis choisis pour les représenter sont moyennés pour obtenir une courte liste d'émojis, classés par ordre décroissant de confiance, pour cette vidéo particulière.

J'ai essayé de donner à Emoji2Video quelques requêtes de difficulté croissante, juste pour voir où cela me mènerait. Tout d'abord, je lui ai fait un test simple, en choisissant uniquement l'emoji chat. Les résultats comprenaient un lien vers une vidéo montrant un chat léchant de l'herbe dans le jardin de quelqu'un, une autre publicité pour un jouet pour chat, etc. Dans une autre recherche, j'ai utilisé les emojis pour bikini et vélo, et j'ai obtenu une vidéo de deux femmes en minuscules deux pièces lavant une Harley. Dans une troisième recherche, j'ai essayé trois emojis à la fois : un visage en colère, un gâteau d'anniversaire et un chameau. Le meilleur résultat vidéo couvrait deux des trois, car il représentait quelqu'un exhibant un impressionnant gâteau d'anniversaire sur le thème des Angry Birds.

De toute évidence, le moteur de recherche en est encore à ses balbutiements, et il ne recherche qu'une infime partie des vidéos disponibles sur YouTube, mais les chercheurs disent qu'il ne serait pas difficile d'en ajouter plus, et ils prévoient de le faire. Cappallo dit qu'à ce stade, les meilleurs résultats ne sont parfois pas représentatifs de l'emoji avec lequel vous recherchez, car l'ensemble de données ne contient tout simplement pas de vidéo avec cette chose spécifique.

Au-delà de la vidéo, dit Cappallo, le travail pourrait être utile pour créer de petits résumés d'albums photo basés sur des icônes, ou pour obtenir des informations à partir de petits écrans, tels que des montres intelligentes, où il peut être difficile de taper mais peut-être pas si difficile à appuyez sur une petite image ou deux.

Tyler Schnoebelen , linguiste et cofondateur de Idibon , une startup qui traite des données linguistiques non structurées (y compris des émoticônes et des emojis), affirme que le projet pourrait être utile pour trouver des vidéos réalisées par des personnes qui ne parlent pas la même langue que vous. Mais pour lui, le but du projet semble être que c'est simplement amusant.

Il note également que les significations derrière un emoji peuvent varier d'une culture à l'autre, ce qui pourrait rendre plus difficile la recherche de traductions directes (l'emoji aubergine est un exemple remarquable, car il est souvent considéré comme représentant un phallus plutôt qu'un fruit polyvalent). ).

La signification d'un emoji est plus que le nom qu'il visualise, dit-il.

cacher