L'IA peut dire quand les acteurs s'embrassent, et peut-être quand vous aussi

Catégorie: Intelligence artificielle Posté 14 juin

Alors que la reconnaissance d'objets dans la vidéo a rapidement progressé, la détection de scène, ou savoir ce qui se passe réellement à l'écran, a pris du retard. Mais être capable d'analyser et de reconnaître des actions dans des séquences pourrait s'avérer utile pour des applications telles que le montage vidéo. Alors Amir Ziai, un étudiant de Stanford à l'époque de la recherche et maintenant un scientifique senior des données chez Netflix, a pris sur lui de faire progresser l'état de l'art, en particulier dans détecter les scènes de baisers hollywoodiens . L'étude peut sembler plutôt légère ou idiote, mais elle a des implications importantes.

Ziai a sélectionné un sous-ensemble de 100 films et a étiqueté leurs différentes scènes de non-baisers et de baisers d'une durée comprise entre 10 et 20 secondes. Il a ensuite extrait des images et des images fixes audio pour chaque seconde de chaque scène, et les a utilisées pour former un algorithme d'apprentissage automatique. Le modèle résultant a été en mesure d'identifier les secondes représentées en train de s'embrasser et de les regrouper en scènes, atteignant un haut niveau de précision.

L'étude montre à quelle vitesse les moyens d'analyse des séquences d'actions spécifiques, voire intimes, ont évolué. Ajoutez à cela des images de surveillance, et les implications deviennent rapidement orwelliennes. En fait, dans un nouveau rapport , l'ACLU a tiré la sonnette d'alarme sur un avenir dans lequel les propriétaires d'appareils photo pourraient identifier rapidement un comportement inhabituel ou rechercher des moments embarrassants. Comme les deepfakes, c'est encore un autre exemple d'une situation où les technologues devraient réfléchir aux conséquences de leur travail.

Pour recevoir plus d'histoires comme celle-ci directement dans votre boîte de réception, inscrivez-vous à notre newsletter AI nominée par Webby, The Algorithm. C'est gratuit.