Les gens en réalité virtuelle sont sur le point de paraître beaucoup plus réalistes

Récemment, dans un bureau de San Francisco, j'ai été entraîné sur les bases de la boxe dans une salle de sport, j'ai regardé un mannequin lors d'une séance photo et j'ai regardé un gars rapper à Venice Beach. Pourtant, alors que ce qu'ils faisaient était intéressant, je ne pouvais pas m'empêcher de regarder leurs fesses.

C'est parce que ces personnes, toutes les créations de réalité virtuelle d'une startup appelée 8i , avait l'air assez réaliste. Et je les regardais en portant un casque HTC Vive installé dans un espace ouvert suffisamment grand pour que je puisse me déplacer sans heurter quoi que ce soit. Ainsi, j'avais assez de place pour me concentrer sur les détails que je trouvais les plus fascinants - et dans ce cas, c'était, il faut l'admettre, l'aspect du tissu de leurs vêtements sur leurs derrières et leurs jambes.

L'objectif de 8i est de capturer des humains avec un ensemble de caméras et de les montrer d'une manière aussi fidèle que possible à la réalité virtuelle. Son PDG et cofondateur, Linc Gasking, imagine de nombreuses utilisations pour cela - cela pourrait conduire à des films de réalité virtuelle qui vous permettent de voir les actions du personnage en direct sous différents angles, et des concerts où vous pouvez vous rapprocher de votre favori. musicien. Ou peut-être que cela faciliterait l'apprentissage à distance : vous pourriez vous promener autour de votre professeur de yoga pour examiner un mouvement avant de l'essayer vous-même.

8i filme des sujets sous de nombreux angles et les reconstruit sous forme d'avatars 3D en réalité virtuelle afin qu'un spectateur de réalité virtuelle puisse se promener et les explorer sous différents points de vue.

Startup 8i capture des personnes, telles que cet entraîneur de boxe et ce boxeur, en vidéo avec un ensemble de caméras positionnées tout autour d'eux, puis traite les images à utiliser en réalité virtuelle.

Ces types d'expériences seraient différents de la façon dont vous voyez généralement le contenu en direct dans la réalité virtuelle aujourd'hui. En tant que spectateur portant le casque, vous avez tendance à être passif, assis au centre d'une sphère de vidéo capturée avec laquelle vous ne pouvez pas interagir. Mais 8i parie que de nouveaux casques haut de gamme comme l'Oculus Rift et le HTC Vive, qui offrent aux utilisateurs une certaine liberté de mouvement en incluant le suivi de position, créeront un marché pour des expériences toujours plus immersives.

Ce que nous avons découvert, c'est qu'il y a vraiment une course vers la création d'une expérience incroyablement réaliste, dit Gasking.

La société commence à concevoir chaque soi-disant personne volumétrique pour la réalité virtuelle en filmant sur une scène verte entourée de caméras (8i a une scène installée à Los Angeles avec 40 caméras haute définition et une autre à Wellington, en Nouvelle-Zélande, avec 20) . Après avoir enregistré une vidéo, comme celle de l'entraîneur de boxe que j'ai vu, la société utilise son logiciel pour assembler les images afin de montrer uniquement la personne - détaillée, en trois dimensions et visible de face, de dos ou de côtés. Les résultats peuvent également être placés dans différents environnements, comme une salle de sport ou un désert, qui peuvent être générés par ordinateur, photoréalistes ou une combinaison.

En ce moment, les résultats sont un peu choquants. Dans les démos que j'ai vues, les visages des gens semblaient assez réalistes mais un peu décalés (peut-être plus doux qu'ils ne devraient l'être), ce qui a créé un effet de vallée presque étrange. (Gasking dit que c'est le résultat de l'algorithme utilisé pour traiter la vidéo en trois dimensions, et il s'attend à ce qu'il s'améliore avec le temps.) Pourtant, j'ai été attiré par les détails capturés dans leurs vêtements. Regarder le pantalon de survêtement de l'entraîneur de boxe et la robe du mannequin était fascinant; ils avaient l'air très fidèles à la réalité (ce qui est logique, puisqu'ils ont été initialement enregistrés sous forme de vidéos).

À la fin de ce mois-ci, à temps pour la sortie d'Oculus's Rift, la société prévoit de déployer une nouvelle version d'une application qui permet aux gens de voir une gamme de ses personnes réalistes dans différentes expériences virtuelles. Il travaille également avec des créateurs de contenu de réalité virtuelle comme un journaliste et un cinéaste Nonny de la Pena .

Jérémy Bailenson , directeur de Stanford Laboratoire virtuel d'interaction humaine et cofondateur d'une société d'entraînement sportif en réalité virtuelle Laboratoires Strivr , est d'accord avec l'évaluation de 8i selon laquelle le moment est venu de passer à des avatars super réalistes dans la réalité virtuelle, et il dit que l'utilisation de caméras pour y arriver signifie beaucoup moins de travail pour les programmeurs. Une fois que les entreprises auront amélioré les techniques, il s'attend à voir de nombreux avatars de ce type en réalité virtuelle.

Mais il prévient que la création d'avatars 3D en capturant des personnes en vidéo, plutôt que de les construire sous forme de modèles 3D, signifie qu'ils ne peuvent pas faire de nouvelles choses, comme vous répondre.

Ce qui rend la réalité virtuelle intéressante à bien des égards, c'est l'interactivité, la façon dont elle peut réagir à vous, dit-il.

cacher