211service.com
Le réseau de neurones d'une startup peut comprendre la vidéo
Ces dernières années, des chercheurs d'entreprises telles que Google et Facebook ont fait des percées impressionnantes dans les logiciels de formation pour comprendre ce qui se passe dans les images, grâce à une technique connue sous le nom d'apprentissage en profondeur. Maintenant, une startup appelée Clarification propose un service qui utilise le deep learning pour comprendre la vidéo.
Le logiciel de traitement vidéo de Clarifai peut identifier des objets et des scènes dans la vidéo et fournit une chronologie afin que vous puissiez sauter à l'endroit où un certain élément apparaît.
La société affirme que son logiciel peut analyser rapidement des clips vidéo pour reconnaître 10 000 objets ou types de scènes différents. Lors d'une démonstration donnée la semaine dernière à un conférence sur l'apprentissage profond , le cofondateur et PDG de Clarifai, Matthew Zeiler, a mis en ligne un clip contenant des images d'un paysage alpin varié. Le logiciel a créé une chronologie avec des lignes graphiques résumant le moment où différents objets ou types de scènes ont été détectés. Il a montré exactement quand la neige et les montagnes se sont produites individuellement et ensemble. Le logiciel peut analyser la vidéo plus rapidement qu'un humain ne pourrait la regarder ; dans la démonstration, le clip de 3,5 minutes a été traité en seulement 10 secondes.
Clarifai propose la technologie en tant que service et s'attend à ce qu'elle soit utilisée pour des choses comme faire correspondre les publicités au contenu des vidéos en ligne ou développer de nouvelles façons d'organiser les collections de vidéos et de monter des séquences.
L'apprentissage en profondeur consiste à traiter des données via un réseau de neurones simulés simples qui ont été entraînés à l'aide de données d'exemple. La technologie de Clarifai est née de la recherche à l'Université de New York et, en 2013, la société a pris le cinq premières places au premier concours annuel de logiciels identifiant le contenu des images.
La plupart des recherches dans le domaine se sont jusqu'à présent concentrées sur les images fixes, et non sur la vidéo. Clarifai a lancé l'année dernière un service de reconnaissance d'images fixes. Une autre startup qui utilise le deep learning, Sur la droite , a lancé fin décembre son propre service de traitement vidéo.
Tout le monde peut tester le nouveau système vidéo de Clarifai. Sur son site Web, vous pouvez télécharger un clip vidéo d'une taille maximale de 10 mégaoctets pour analyse. Les différents objets ou types de scènes détectés peuvent inclure des voitures, des arbres ou des personnes. Le logiciel peut également appliquer des concepts descriptifs plus abstraits, tels que le plaisir ou la convivialité.
Zeiler pense que sa technologie pourrait conduire à une nouvelle approche pour diffuser de la publicité aux côtés de vidéos en ligne. Le logiciel peut identifier où dans la vidéo se trouve l'endroit optimal pour placer une annonce, a-t-il déclaré.
Les entreprises peuvent déjà payer pour positionner leurs publicités à côté de vidéos d'un type particulier ou de vidéos sur un sujet particulier. Zeiler pense que la possibilité de faire correspondre automatiquement les publicités avec des moments particuliers dans les vidéos devrait être encore plus attrayante pour les annonceurs. La technologie de Clarifai pourrait permettre, par exemple, à Starbucks de faire apparaître ses publicités chaque fois que du café est consommé dans des images.
Zeiler dit qu'il travaille déjà avec des entreprises intéressées à utiliser la technologie d'analyse vidéo. La société travaille également à ce que le logiciel en fasse plus. Deux fonctionnalités en cours de développement permettront au logiciel de résumer automatiquement ce qui se passe dans une vidéo et de reconnaître quand une activité particulière a eu lieu, explique Zeiler.