Fraunhofer FIT : un système de reconnaissance 3D des gestes

http://www.bulletins-electroniques.com/actualites/64251.htm

Les écrans tactiles comme ceux présents sur l’iPhone ou l’iPad constituent le type d’interaction le plus abouti pour communiquer avec les smartphones et les ordinateurs. Cependant, les scientifiques de l’institut Fraunhofer FIT pour les technologies informatiques appliquées de Sankt Augustin (Rhénanie-du-Nord-Westphalie) viennent de franchir un nouveau cap en développant un système de reconnaissance des gestes en 3 dimensions sans contact. Le nouveau système analyse et interprète la position des mains et des doigts en temps réel. Le port de gants spécifiques ou de quelconques marqueurs n’est pas requis. Le prototype est également capable de supporter plusieurs utilisateurs en même temps.

Avec l’apparition des écrans tactiles et leur grande popularité, les systèmes d’interactions classiques comme le clavier et la souris deviennent de moins en moins utilisés. Cependant, les écrans tactiles sont restreints aux surfaces bidimensionnelles. L’avantage de la technologie de la Fraunhofer FIT est qu’elle ne requiert aucun contact et qu’elle est entièrement basée sur les gestes.

Vidéo de présentation du système de reconnaissance 3D des gestes. Le système analyse et interprète le mouvement des mains et des doigts en temps réel (vidéo en anglais)
Crédits : ghackenberg

Le prototype de la Fraunhofer FIT est constitué d’une caméra qui suit le mouvement de la main. Elle utilise le principe du « temps de vol » pour déterminer la distance entre la caméra et l’objet suivi. Ensuite, un logiciel d’analyse d’image filtre la position de la main et des doigts. Le professeur Georg Hackenberg, qui a développé ce logiciel, explique que « les données ainsi calculées peuvent être vues comme un haut plateau montagneux, où chaque sommet représente un doigt. Des critères peuvent également être ajoutés, comme la taille de la main, la longueur des doigts, ou encore le potentiel de coordination. »

Une étude finale a montré que le système était à la fois simple et agréable à utiliser. Cependant, il reste du travail à accomplir pour éliminer les éléments perturbateurs, comme les réflexions dues au port d’une montre ou les paumes des mains positionnées orthogonalement à la caméra.