Une nouvelle IA crée des clips vidéo originaux à partir de repères textuels

Catégorie: Intelligence artificielle Posté 26 février

Une courte description dactylographiée d'une scène suffit pour que ce logiciel réalise des séquences.

Comment ça fonctionne: La science rapports que l'IA utilise deux réseaux de neurones, l'un pour créer une vidéo, l'autre pour évaluer si elle est réaliste afin d'améliorer la sortie du premier. Nous avons nommé ces types d'IA l'une de nos 10 technologies révolutionnaires de 2018.

Ce qu'il fait: Tout d'abord, le système est formé sur des séquences d'activités étiquetées avec des descriptions telles que 'jouer au golf sur l'herbe'. Il peut ensuite recréer des scènes similaires à partir d'un extrait de texte. De plus, il peut créer des clips combinant des concepts disparates à partir de données d'entraînement, comme 'naviguer sur la neige'.

Pourquoi est-ce important: La génération automatique de vidéo à partir de texte pourrait être incroyablement utile, par exemple pour créer d'énormes ensembles de données d'entraînement synthétiques pour les voitures autonomes. Cela pourrait également conduire à des faux contenus inquiétants.

Mais: Les clips ne font que 32 images de long et 64x64 pixels. Ils ne sont toujours pas tout à fait convaincants, et s'ils sont agrandis, la précision chute. Tout ce qui doit être corrigé pour créer un convertisseur texte-vidéo utile.