Présentation
En anglaisRÉSUMÉ
L’imagerie 3D trouve de très nombreuses applications dans les domaines de la vision industrielle et des applications grand public. Cet article se focalise sur les techniques exploitant des capteurs passifs et décrit plus précisément la stéréoscopie ou stéréovision, la mesure de profondeur par exploitation du flou de défocalisation et l’utilisation de caméras plénoptiques. Le principe, la mise en œuvre, les traitements numériques associés, et des notions de modélisation et d’évaluation de performance sont présentés pour chaque filière, avant de discuter des éléments de comparaisons disponibles. L’exposé technique est illustré par de nombreux résultats de traitement de données expérimentales représentatives.
Lire cet article issu d'une ressource documentaire complète, actualisée et validée par des comités scientifiques.
Lire l’articleABSTRACT
3D imaging has numerous applications today, ranging from industrial vision to the consumer market. This article focuses on depth estimation from passive sensors and presents in some detail three approaches: stereovision, depth from defocus and plenoptic cameras. For each approach we review the principles, hardware and software implementation, discuss performance modeling and evaluation, and make some comparisons. The technical presentation is illustrated by several results obtained on representative experimental data.
Auteur(s)
-
Guy LE BESNERAIS : Directeur de Recherches - ONERA, Chemin de la Hunière, BP 80100, Palaiseau, France
-
Pauline TROUVÉ-PELOUX : Ingénieure de Recherches - ONERA, Chemin de la Hunière, BP 80100, Palaiseau, France
-
Frédéric CHAMPAGNAT : Maître de Recherches - ONERA, Chemin de la Hunière, BP 80100, Palaiseau, France
-
Aurélien PLYER : Ingénieur de Recherches - ONERA, Chemin de la Hunière, BP 80100, Palaiseau, France
INTRODUCTION
L’imagerie 3D a de très nombreuses applications pratiques dans les domaines professionnels, tels que la cartographie aérienne, la mesure industrielle ou la robotique, ainsi que dans les technologies grand public (video 3D, jeu).
Lorsque l’on utilise des capteurs passifs, la méthode de mesure de profondeur traditionnelle utilise un système stéréoscopique, l’appariement d’images et la méthode de triangulation. Depuis le milieu des années 2000, de nouvelles techniques sont apparues sous l’impulsion du rapprochement entre calcul embarqué et capteurs numériques. Cette évolution, associée aux termes de co-conception ou d’imagerie computationnelle, consiste à concevoir des systèmes d’imagerie hybride, associant capteurs et traitement, optimisés globalement pour l’information finale délivrée à l’utilisateur. L’objectif de cet article est de présenter les deux principales techniques d’estimation de profondeur par capteur passif issues de cette approche, l’exploitation du flou de défocalisation (on utilisera souvent l’acronyme DFD pour Depth from Defocus) et l’utilisation de capteurs plénoptiques, et de les mettre en regard de la stéréovision.
Il convient de remarquer que les trois techniques reposent sur une mesure indirecte, dans laquelle la profondeur est estimée par une méthode numérique à partir d’une quantité observable dans le plan image. La relation entre l’observable et la profondeur comprend des paramètres qui doivent être identifiés au cours d’une opération d’étalonnage préalable. La modélisation de performance est donc assez complexe, puisqu’elle dépend de la configuration capteur, de l’étalonnage, du type de traitement utilisé et de son paramétrage.
Pour chaque technique, on présente sa mise en œuvre, la quantité observable dans les images et sa relation avec la profondeur, les principales voies algorithmiques pour l’estimation, enfin les éléments disponibles sur le modèle de performance. Des illustrations sur des données réelles sont proposées tout au long du texte, notamment des résultats d’évaluation expérimentale de l’incertitude d’estimation de profondeur, comparés aux prédictions des modèles de performance.
La partie finale fait une synthèse sur l’estimation passive de la profondeur et ébauche des éléments de comparaison entre les trois approches étudiées.
Le lecteur trouvera en fin d’article un glossaire des termes et expressions importants de l’article, ainsi qu’un tableau des sigles et symboles utilisés.
KEYWORDS
3D vision | stereovision | depth from defocus | plenoptic camera
DOI (Digital Object Identifier)
Cet article fait partie de l’offre
Optique Photonique
(221 articles en ce moment)
Cette offre vous donne accès à :
Une base complète d’articles
Actualisée et enrichie d’articles validés par nos comités scientifiques
Des services
Un ensemble d'outils exclusifs en complément des ressources
Un Parcours Pratique
Opérationnel et didactique, pour garantir l'acquisition des compétences transverses
Doc & Quiz
Des articles interactifs avec des quiz, pour une lecture constructive
Présentation
1. Imagerie 3D
1.1 Définition
L’imagerie 3D, que nous appellerons plutôt imagerie de profondeur dans la suite, est illustrée figure 1.
Une image d’intensité issue d’un capteur optique est présentée figure 1 b. À l’ensemble des éléments visibles de la scène, on associe une profondeur définie par la distance au centre optique du capteur mesurée le long de l’axe optique, comme indiqué figure 1 a. Cette valeur est codée en niveaux de couleur (du noir au vert clair) dans l’image de profondeur présentée en regard de l’image d’intensité. Les systèmes produisant simultanément une image d’intensité (éventuellement couleur) et une image de profondeur sont parfois appelés RGBD (pour l’anglais Red-Blue-Green – couleurs – et Depth, profondeur).
À l’aide de ces deux images, il est possible de faire une restitution 3D, c’est-à-dire de projeter les niveaux d’intensités mesurés dans l’image à leur position estimée dans la scène : c’est le nuage de points en niveaux de gris représenté figure 2.
L’illustration concerne l’application de l’imagerie de profondeur embarquée pour la navigation autonome d’un système robotique tel qu’un micro-drone. En intégrant des nuages de points 3D successifs reconstruits au cours du déplacement du système, on obtient une reconstruction 3D de l’environnement sous forme d’une carte d’occupation (briques en fausses couleurs du violet au vert), utilisée pour planifier les mouvements futurs du drone.
L’imagerie de profondeur a de très nombreuses applications, en vision industrielle, en cartographie par imagerie aérienne ou satellite, en mesure par imagerie ou pour des produits grand public (captation 3D, jeux, impression 3D, réalité augmentée). Une liste des sociétés commercialisant des produits en lien avec l’imagerie 3D est fournie en partie documentation de cet article.
Pour produire des images de profondeur, il existe des systèmes « actifs » qui exploitent un signal, le plus souvent infrarouge (IR), envoyé sur la scène. Dans l’industrie, deux technologies sont majoritairement développées : les caméras dites Time Of Flight (TOF), qui reposent...
Cet article fait partie de l’offre
Optique Photonique
(221 articles en ce moment)
Cette offre vous donne accès à :
Une base complète d’articles
Actualisée et enrichie d’articles validés par nos comités scientifiques
Des services
Un ensemble d'outils exclusifs en complément des ressources
Un Parcours Pratique
Opérationnel et didactique, pour garantir l'acquisition des compétences transverses
Doc & Quiz
Des articles interactifs avec des quiz, pour une lecture constructive
Imagerie 3D
BIBLIOGRAPHIE
-
(1) - LEVIN (A.), FERGUS (R.), DURAND (F.), et al - Image and depth from a conventional camera with a coded aperture. - ACM transactions on graphics (TOG), vol. 26, no 3, p. 70 (2007).
-
(2) - TROUVÉ (P.) - Conception conjointe optique/traitement pour un imageur compact à capacité 3D. - Traitement du signal et de l’image, ONERA/DTIM et École Centrale de Nantes (2012).
-
(3) - SCHARSTEIN (D.), SZELISKI (R.) - À taxonomy and evaluation of dense two-frame stereo correspondence algorithms. - International journal of computer vision, vol. 47, no 1-3, p. 7-42 (2002).
-
(4) - CHAMPAGNAT (F.), PLYER (A.), LE BESNERAIS (G.), et al - Fast and accurate PIV computation using highly parallel iterative correlation maximization. - Experiments in fluids, vol. 50, no 4, p. 1169-1182 (2011).
-
(5) - LE BESNERAIS (G.), LE SANT (Y.), -LEVEQUE (D.) - Fast and dense 2D and 3D displacement field estimation by a highly parallel image correlation algorithm, - Strain, in press (2016).
- ...
DANS NOS BASES DOCUMENTAIRES
-
Vision pour la robotique,
-
Mesures dimensionnelles par vision,
ANNEXES
Procédé de conception d’un imageur monovoie passif capable d’estimer la profondeur de champ, Pauline TROUVE, Frédéric CHAMPAGNAT, BESNERAIS Guy LE, Guillaume Druart, EP 2909671 A1, WO2014060657A1, 2013
HAUT DE PAGEConstructeurs – Fournisseurs – Distributeurs (liste non exhaustive)
-
Gom ( http://www.gom.com/) : systèmes de mesure 3D par stéréo--scopie, dont le système Aramis, applications industrielles et recherche.
-
Google Tango ( http://get.google.com/tango/) : projet d’intégration de fonctionnalités 3D sur des plate formes mobiles type smartphone, utilisant des combinaisons de capteurs (stéréoscopie et/ou capteurs actifs). Le Lenovo Phab 2 pro ( http://www.lenovo.com) est le premier smartphone grand public équipé de Tango.
-
Heptagon ( http://www.heptagon.com) : capteurs 3D actifs par technologie time-of-flight pour applications grand public et industrielles, dont la série des capteurs SwissRanger.
-
Infineon ( http://www.infineon.com) : capteur 3D actif TOF pour applications industrielles et grand public, dont le capteur Real3.
-
Intel RealSense ( https://software.intel.com/en-us/realsense/home) : capteurs 3D stéréoscopiques infrarouge pour applications grand public et industrielles, dont les caméras SR30 et R200.
-
LaVision ( http://www.lavision.de/en) :...
Cet article fait partie de l’offre
Optique Photonique
(221 articles en ce moment)
Cette offre vous donne accès à :
Une base complète d’articles
Actualisée et enrichie d’articles validés par nos comités scientifiques
Des services
Un ensemble d'outils exclusifs en complément des ressources
Un Parcours Pratique
Opérationnel et didactique, pour garantir l'acquisition des compétences transverses
Doc & Quiz
Des articles interactifs avec des quiz, pour une lecture constructive