Desktopography : une interface AR sur toutes les surfaces

La réalité augmentée a le vent en poupe depuis quelques temps; après l’annonce de l’ARKit d’Apple, les technologies semblent désormais mûres pour investir notre vie quotidiennes. Le point d’achoppement des systèmes AR reste encore la nécessité d’en passer par un écran tiers, celui d’un smartphone ou de lunettes dédiées (HoloLens), afin d’afficher les objets AR dans l’environnement réel.

Des chercheurs de l’université Carnegie Mellon viennent de faire sauter ce verrou en présentant une technologie d’interface qui peut s’afficher sur n’importe quelle surface et s’adapter à al forme de celle-ci. Baptisé Desktopography, l’appareil se fixe en lieu et place d’une lampe de plafond; un projecteur équipé de capteurs de profondeurs et de mouvements vient directement se fixer sur la douille de la lampe, le tout étant relié à un ordinateur qui effectue le traitement du mapping de l’image projetée.

Cette installation permet d’afficher des cartes virtuelles, des interfaces graphiques ou tout autre contenu 2D directement sur le bureau ou tout autre surface, et il est possible d’interagir avec ces éléments graphiques grâce à des gestuelles simples : le redimensionnement de la fenêtre projetée se fait ainsi directement au doigt. Mieux encore, si l’on dispose un objet sur l’élément projeté (comme une tasse de café), le système décale l’image pour que cette dernière reste toujours bien visible. Les images projetées peuvent aussi « augmenter » les capacités des objets physiques, comme par exemple un pavé numérique qui viendrait se juxtaposer au clavier d’un ordinateur.

Les créateurs du Desktopography, précisent que cette « invention » est inspirée des travaux du MIT et du Xerox Par, tout en rajoutant dans la foulée que le système procédé du Carnegie Mellon reste bien le seul à s’adapter réellement à toutes les surfaces.