Photosynth pour la vidéo et autres friandises TechFest

Chaque année, Microsoft organise une journée portes ouvertes appelée TechFest pour présenter certains de ses projets de recherche les plus flashy. Cette année, l'événement de Redmond, dans l'État de Washington, s'est vanté de 37 démonstrations, allant d'interfaces gestuelles à la réalité augmentée et à une meilleure recherche d'images. Vous trouverez ci-dessous un bref résumé de certains des projets présentés mardi qui ont attiré mon attention.

1. Photosynthé pour la vidéo

Trois flux vidéo mobiles sont combinés en une seule vidéo panoramique en temps réel à l'aide d'un nouveau logiciel développé par les chercheurs de Microsoft. Crédit : Recherche Microsoft

Compte tenu de la popularité de Photosynth, il n'est pas surprenant que les chercheurs de Microsoft essaient maintenant d'étendre la technologie à la vidéo. Le logiciel standard assemble de manière transparente les photos prises à un certain endroit, à partir de différentes caméras, pour créer une image panoramique zoomable, pannable. La nouvelle idée est que plusieurs personnes - des témoins oculaires lors d'un événement d'actualité ou des fans lors d'un concert de musique, par exemple - enregistrent une vidéo de l'événement sur leur téléphone portable et la diffusent sur un serveur central. À l'aide de l'emplacement des téléphones et d'algorithmes de reconnaissance d'images, le logiciel organise et rassemble les flux mobiles en une scène plus vaste.

Ayman Kaheel, un ingénieur du laboratoire de Microsoft au Caire, a fait une démonstration du logiciel dans la salle des congrès en brandissant deux téléphones portables, en mode caméra, à différentes hauteurs et pointés dans des directions légèrement différentes. Sur son ordinateur portable, les deux flux vidéo ont été fusionnés en temps réel, pour créer une vidéo plus grande et plus complète. Des trucs impressionnants.

2. Écrire en l'air

L'un des problèmes avec les systèmes de jeux vidéo est qu'il est difficile pour un joueur de saisir du texte, de nommer un personnage de jeu ou de discuter avec d'autres joueurs sur un réseau par exemple. Étant donné que certains de ces systèmes fonctionnent sur des ordinateurs équipés de caméras Web ou de caméras infrarouges (comme la Wii), les chercheurs du centre de recherche de Microsoft à Pékin ont estimé que les gestes de la main pourraient remplacer la saisie de texte traditionnelle et maladroite.

Les chercheurs ont écrit un logiciel qui suit le mouvement d'un objet coloré, comme une pomme ou une balle, dans la main d'un utilisateur et interprète, en fonction de la trajectoire de l'objet, le caractère que l'utilisateur décrit dans l'air. Hsiao-Wuen Hon , le directeur de Microsoft Research Asia affirme que le système fonctionne bien pour les caractères chinois, et devrait être encore mieux avec les caractères anglais car ils sont beaucoup moins nombreux.

3. Une palette de couleurs pour une meilleure recherche d'images

Les moteurs de recherche d'images d'aujourd'hui font un travail décent, jusqu'à un certain point. Recherchez un tigre et vous obtiendrez généralement une collection de grands félins orange, blancs et noirs. Mais, pour le moment, il est presque impossible de peaufiner une recherche pour trouver, disons, un tigre sur fond blanc, ou un tigre noir et blanc sur fond de ciel bleu.

Xian-Sheng Hua , chercheur au centre de Pékin et TR35 de 2008 pense avoir trouvé une meilleure façon de viser la bonne image. Son interface de recherche fournit une palette de couleurs à côté des résultats et un carré quadrillé qu'un utilisateur peut remplir avec les couleurs de la palette pour trier la recherche. Par exemple, si vous souhaitez rechercher un tigre avec un ciel bleu, remplissez simplement quelques grilles en haut du carré avec du bleu et recherchez à nouveau tigre. Ce système de filtrage basé sur les couleurs élimine le besoin d'utiliser des métadonnées ou des balises supplémentaires décrivant la scène. Hsiao-Wuen dit qu'une telle interface serait relativement simple à intégrer dans les moteurs de recherche d'aujourd'hui.

4. Surface passe à la 3D

Surface semble être le chouchou de Microsoft Research. Le dessus de table multi-touch est le projet de grande envergure qui a pris la voie rapide du laboratoire aux consommateurs. Et maintenant, Andy Wilson , l'un des chercheurs qui a travaillé sur Surface dirige son attention vers une interface tactile dans le ciel.

Au TechFest, Wilson a présenté un système de projecteur et de caméra infrarouge qui produit des images à l'intérieur d'un dôme et peut reconnaître les gestes faits par les mains des gens. Dans la démo, des images du World Wide Telescope de Microsoft, qui propose une visite virtuelle du ciel nocturne, ont été projetées sur le dôme ; un chercheur a effectué un panoramique et un zoom sur les étoiles d'un geste de la main et d'un pincement du pouce. Wilson pense que son équipe pourrait construire le système à un prix suffisamment bas pour qu'il puisse être utilisé dans les planétariums scolaires ou partout où les gens souhaitent interagir avec de grandes projections panoramiques.

cacher