Le projet Kinect fusionne les mondes réel et virtuel

Le contrôleur Xbox Kinect de Microsoft, qui permet aux joueurs de contrôler l'action à l'écran avec leurs mouvements corporels, a été adapté de centaines de manières intéressantes, utiles et parfois bizarres depuis sa sortie en novembre 2010. Il a été utilisé pour vision robotique et éclairage domestique automatisé . C'est aidé utilisateurs de fauteuils roulants avec leurs courses . Pourtant, ces utilisations pourraient ressembler à un jeu d'enfant par rapport aux nouvelles capacités de modélisation 3D développées par Microsoft pour la Kinect.

KinectFusion , un projet de recherche qui permet aux utilisateurs de générer des modèles 3D de haute qualité en temps réel à l'aide d'un Kinect standard de 100 $, a été la vedette de l'événement du 20e anniversaire de Microsoft Research qui s'est tenu cette semaine à son siège européen à Cambridge, au Royaume-Uni. KinectFusion comprend également un moteur physique réaliste qui permet aux objets numérisés d'être manipulés de manière réaliste.

La technologie permet de numériser des objets, des personnes et des pièces entières en 3D à une fraction du coût normal. Imaginez des avatars et des objets réalistes importés dans des environnements virtuels. Ou une scène de crime qui peut être recréée en quelques secondes. Visualiser un nouveau canapé dans votre salon et d'autres astuces de décoration d'intérieur virtuelles pourraient devenir remarquablement simples.

KinectFusion est une plate-forme qui nous permet de repenser la façon dont les ordinateurs voient le monde, explique le chef de projet Shahram Izadi. Nous avons décrit certaines façons dont il pourrait être utilisé, mais je pense qu'il y a toute une série d'applications futures qui attendent d'être découvertes.

Les scanners 3D existent déjà, mais aucun d'entre eux n'approche KinectFusion en termes de facilité d'utilisation et de vitesse, et même les versions de bureau coûtent environ 3 000 $.

De la même manière que des produits comme Microsoft Office ont démocratisé la création de documents 2D, avec KinectFusion, n'importe qui peut créer du contenu 3D simplement en prenant un Kinect et en numérisant quelque chose, explique Steve Hodges, membre de l'équipe.

le premier dévoilement public de KinectFusion lors de la conférence SIGGRAPH à Vancouver en août a suscité un énorme engouement. Les détails de son fonctionnement seront révélés dans des articles présentés le mois prochain au UIST Symposium à Santa Barbara, Californie, et ISMAR à Bâle, en Suisse.

Le Kinect projette un motif de points laser dans une scène et recherche les distorsions à l'aide d'une caméra infrarouge, une technique appelée détection de profondeur de lumière structurée. Cela génère un nuage de points de distances à la caméra que le Kinect utilise pour percevoir et identifier des objets et des gestes en temps réel.

Un utilisateur KinectFusion agite un Kinect autour d'une scène ou d'un objet. Un algorithme appelé point le plus proche itératif (ICP) est utilisé pour fusionner les données des instantanés pris à 30 images par seconde dans une représentation 3D toujours plus détaillée. ICP est également utilisé pour suivre la position et l'orientation de la caméra en comparant les nouvelles données d'image avec les images précédentes et la représentation composite fusionnée. L'équipe décrit l'utilisation d'une unité de traitement graphique informatique standard pour le suivi de la caméra et la génération d'images comme une innovation majeure.

Bien que KinectFusion génère un buzz, il s'agit toujours d'un projet de recherche en cours. Microsoft n'a pas divulgué son intention de publier des produits utilisant la technologie ou des versions du logiciel qui alimentent le système.

C'est juste magnifique, dit bois chrétien , de l'Institut Hasso Plattner de l'Université de Potsdam, en Allemagne, qui a précédemment travaillé sur un projet utilisant Kinect chez Microsoft Research à Redmond, Washington. Cela va rendre la création 3D accessible à un plus grand nombre de personnes. Le fait qu'il puisse non seulement modéliser l'environnement du monde réel avec une fidélité époustouflante, mais également utiliser le modèle pour simuler une physique réaliste en plus de cela, ouvre la possibilité d'un grand nombre d'applications.

cacher