Présentation
En anglaisRÉSUMÉ
Cet article se propose de faire un tour d'horizon des technologies et des applications de réalité augmenté embarquée et mobile. L'arrivée massive des dispositifs mobiles: smartphones, tablettes, lunettes connectées et autres gadgets équipés de capteurs de vision et de localisation, assortis d'une puissance de calcul conséquente, emmène le développement applicatif vers une compréhension plus intelligente de son environnement immédiat. Grâce à ces avancées technologiques et algorithmiques les applications de réalité augmentée embarquée et mobile ont été rendues possibles. Une localisation précise de l'observateur et de son positionnement relatif par rapport à l'environnement permet la fusion des informations de synthèse dans le monde réel, tel que perçu par l'utilisateur.
Lire cet article issu d'une ressource documentaire complète, actualisée et validée par des comités scientifiques.
Lire l’articleABSTRACT
This paper sets out a state of the art of the technology and applications of mobile and embedded augmented reality. The mass-market advent of smartphones, tablets and other connected devices integrating vision and localization sensors, with appropriate computational power, is pushing application development towards a more intelligent comprehension of its surrounding environment. These technological and algorithmic advances have made mobile augmented reality applications possible. Accurate observer localization and relative positioning in the environment allow the integration of synthetic information in the real world, as the user sees it.
Auteur(s)
-
Bogdan STANCIULESCU : Enseignant-chercheur - Centre de robotique, École des mines – ParisTech, Paris, France
INTRODUCTION
Terminaux mobiles et prémisses industrielles pour la réalité augmentée embarquée
L'arrivée du smartphone et des tablettes a vu l'apparition des plates-formes mobiles suréquipées en capteurs, ouvertes au développement des applications en tout genre, ludiques, éducatives, sociales, pour énumérer seulement les catégories les plus répandues. Dans une première phase, cette révolution applicative a été portée et l'est encore, par le transfert du contenu web et des services informatiques existants vers les terminaux mobiles et connectés. La nouvelle phase, qui s'affirme aujourd'hui, est caractérisée par le développement des applications à caractère complètement nouveau et très innovant, exploitant la richesse algorithmique que l'informatique scientifique (computer science) et l'informatique embarquée (computer engineering) avaient produite depuis une vingtaine d'années. Les applications de réalité augmentée RA embarquées sur smartphone font partie de cette nouvelle vague.
L'avènement du véhicule automatique et robotisé a vu se développer la localisation, le contrôle et la perception 3D de l'environnement extérieur. Beaucoup d'industriels et d'équipementiers de l'automobile ont évolué vers des nouveaux champs applicatifs pour le développement des systèmes d'aide à la conduite ADAS (Advanced Driving Assistance Systems) soit en collaboration avec des laboratoires publics (INRIA, Mines de Paris, IFSTTAR), soit par des collaborations avec des start-up et des PME spécialisées dans le développement des algorithmes (MobilEye).
L'industrie des semi-conducteurs est aujourd'hui en pleine mutation. Traditionnellement axée sur la production de puces et cartes électroniques et elle a évolué vers une intégration conjointe des capteurs des signaux et des images formant ainsi des systèmes embarqués complexes. La prochaine transformation de cette industrie semblerait viser l'intégration des algorithmes de traitement de l'information et leur prise en compte, dès la phase de conception, permettant ainsi aux développeurs des applications embarquées de mieux choisir l'architecture matérielle et les capteurs adaptés.
La perception artificielle de l'environnement étant déjà mûre, se pose aujourd'hui la question du rendu précis des informations de la perception embarquée dans le véhicule, vers le conducteur ainsi que sa fusion avec la vision humaine. Cela constitue un des défis technologiques majeurs de l'avenir de cette industrie.
MOTS-CLÉS
Prototypage en réalité augmentée Equipement sportif Systèmes avancés d'aide à la conduite Localisation simultanée en cartographie Fusion des capteurs inertiels Vision 3D
KEYWORDS
augmented reality prototyping | outdoor activities | advanced driving assistance systems | simultaneous localization and mapping | inertial sensor fusion | 3D vision
DOI (Digital Object Identifier)
Cet article fait partie de l’offre
Le traitement du signal et ses applications
(160 articles en ce moment)
Cette offre vous donne accès à :
Une base complète d’articles
Actualisée et enrichie d’articles validés par nos comités scientifiques
Des services
Un ensemble d'outils exclusifs en complément des ressources
Un Parcours Pratique
Opérationnel et didactique, pour garantir l'acquisition des compétences transverses
Doc & Quiz
Des articles interactifs avec des quiz, pour une lecture constructive
Présentation
1. Algorithmes prometteurs pour la RA et enjeux applicatifs
Aujourd'hui, les principaux enjeux algorithmiques de la réalité augmentée embarquée sont liés à la reconnaissance 3D de l'environnement intérieur et extérieur et à la localisation précise de l'observateur.
Cartographie et localisation simultanées pour la RA embarquée
Les algorithmes de cartographie et localisation simultanées (SLAM) ont littéralement bouleversé le domaine de la robotique mobile, les dix dernières années.
Le SLAM (Simultaneous Localisation and Mapping ) est un ensemble d'algorithmes de vision par ordinateur destinés à construire la carte d'un environnement inconnu par un observateur en mouvement, tout en estimant sa position relative par rapport à cette carte.
Les plates-formes robotiques offraient un squelette de calcul suffisamment puissant et des capteurs en tout genre, comportant un sous-système de perception de l'environnement fonctionnant en parallèle avec un système de localisation.
Les terminaux mobiles actuels proposent des composants suffisamment puissants et diversifiés pour permettre le portage des applications de type SLAM et ouvrant une nouvelle niche applicative pour la réalité augmentée. En effet, une localisation précise en fusion avec la cartographie de l'environnement permettrait l'ajout des informations de synthèse dans cet environnement, comme pour la navigation dans un bâtiment, gare ou centre commercial. En milieu autoroutier, les informations de navigation et de trafic pourraient être suraffichées avec l'environnement extérieur, apportant ainsi une aide à la conduite.
Le fonctionnement des algorithmes de SLAM suppose la collecte d'un certain nombre des « balises » visuelles robustes appartenant à l'environnement : points d'intérêt (landmarks ). Ces balises sont pistées dans les images suivantes afin de permettre une estimation du mouvement de l'observateur en même temps qu'une estimation de la structure 3D de l'environnement extérieur.
Un travail très intéressant mené à l'Université d'Oxford, par Goerg Klein et David Murray, propose une version d'algorithme de SLAM complètement adapté aux contraintes de la réalité augmentée : le PTAM avec des espaces restreints et des capteurs d'images (caméras portables) en mouvement continu.
Le PTAM (Parallel Tracking and Mapping ) est un algorithme de suivi et de cartographie en réalité augmenté,...
Cet article fait partie de l’offre
Le traitement du signal et ses applications
(160 articles en ce moment)
Cette offre vous donne accès à :
Une base complète d’articles
Actualisée et enrichie d’articles validés par nos comités scientifiques
Des services
Un ensemble d'outils exclusifs en complément des ressources
Un Parcours Pratique
Opérationnel et didactique, pour garantir l'acquisition des compétences transverses
Doc & Quiz
Des articles interactifs avec des quiz, pour une lecture constructive
Algorithmes prometteurs pour la RA et enjeux applicatifs
BIBLIOGRAPHIE
ANNEXES
ARToolkit http://www.hitl.washington.edu/artoolkit
Recon Instruments http://www.reconinstruments.com
Qualcomm Vuforia 4.0 https://www.qualcomm.com/products/vuforia
D'Fusion, Total Immersion https://fr.freedownloadmanager.org/Windows-PC/Total-Immersion-D-Fusion-Studio-GRATUIT.html
HAUT DE PAGE
GOOGLE Tango https://www.dailywireless.org/mobile/what-happened-to-google-tango/?msID=25d23b09-7bd4-433b-81cb-a79cbe0eebb0
CONTINENTAL adds augmented reality to 2017 in-car display : Telematics NewsPublished : 14 juil. 2014 http://continental-head-up-display.com/
GARMIN-HUD https://buy.garmin.com/
MISHOR 3D http://blogs.wsj.com/
HAUT DE PAGECet article fait partie de l’offre
Le traitement du signal et ses applications
(160 articles en ce moment)
Cette offre vous donne accès à :
Une base complète d’articles
Actualisée et enrichie d’articles validés par nos comités scientifiques
Des services
Un ensemble d'outils exclusifs en complément des ressources
Un Parcours Pratique
Opérationnel et didactique, pour garantir l'acquisition des compétences transverses
Doc & Quiz
Des articles interactifs avec des quiz, pour une lecture constructive