Lors d’ICCV 2007 (International Conference on Computer Vision) qui s’est tenu du 14 au 20 Octobre dernier, une équipe de l’université de l’état de Washington (UW) a présenté un procédé original de reconstitution d’objets ou sites en trois dimensions par photogrammétrie. Le système s’appuie sur les millions de photos disponibles sur le site communautaire Flickr sur lequel les membres mettent en ligne leurs clichés de vacances. Les chercheurs utilisent le système de labels très en vogue avec le web 2.0 pour filtrer les images relatives à un monument ou un objet en particulier, tels la Statue de la Liberté, ou la Basilique Saint Pierre à Rome.
Les milliers de clichés ainsi sélectionnés sont ensuite traités dans Photo Tourism, un logiciel développé par UW. Les photos où le sujet est mal défini, flou ou partiellement masqué sont écartées. Pour chaque image retenue, le logiciel calcule la position du photographe dans l’espace entourant l’objet à traiter en combinant un grand nombre de clichés pour déterminer la distance de chaque point. Il aura fallu par exemple 653 images prises par 313 photographes pour reconstituer la façade de la Cathédrale Notre Dame (vidéo disponible sur la page du projet : https://grail.cs.washington.edu/projects/mvscpc/).
L’originalité du système est de pouvoir prendre en compte des géométries et radiométries très variables (présences d’occlusions variables, capteurs variables et angles de prises de vue également, éclairements très divers) avec une robustesse satisfaisante. L’approche repose principalement sur :
– un calcul de calibration relative des images
– des appariements, au niveau image et au niveau pixel, déterminés en fonction d’une stabilité ou proximité suffisante pour permettre un calcul photogrammétrique
– la détermination préliminaire de surfaces à partir de techniques issues de la reconnaissance de structure dans les données vidéo
– puis un calcul itératif de grossissement de ces régions en exploitant à la fois les parallaxes horizontale et verticale, en fonction d’un modèle de réflectance simple
La résolution finale des objets modélisés en 3D est étroitement liée à la qualité des clichés utilisés, mais n’est pas du niveau des solutions qui exploitent des images de capteurs calibrés. Cependant, le projet fourni des résultats très satisfaisants (de l’ordre de quelques pouces) à partir de sources d’informations riches en données de par la diversité des objets photographiés et la quantité d’images disponibles. L’équipe affirme avoir téléchargé plus de 1 million de photos de la ville de Rome avec pour objectif de modéliser un maximum de monuments, d’intérieurs, et d’objets d’art. Le projet a reçu le soutien de la National Science Foundation, de Microsoft et d’Adobe Systems. Il y a fort à parier qu’un tel procédé risque en effet d’intéresser les géants de la cartographie grand public en ligne pour affiner la modélisation des objets déjà disponibles dans ces systèmes.
Source :
– "Holiday snapshots used to model the world in 3D", 29/10/2007 – https://technology.newscientist.com/article/dn12846-holiday-snapshots-used-to-model-the-world-in-3d.html
– "Vacation photos create 3D models of world landmarks", 01/11/2007 – https://uwnews.washington.edu/ni/article.asp?articleID=37724
– "Online Vacation Photos Create 3-D Models Of World Landmarks", 05/11/2007 – https://www.sciencedaily.com/releases/2007/11/071101191441.htm
Pour en savoir plus, contacts :
– "Navigating the World’s Photographs", Vidéo de la présentation du projet: https://video.google.com/videoplay?docid=-5778605234686979545
– Multi-View Stereo for Community Photo Collections: https://grail.cs.washington.edu/projects/mvscpc/
– Eleventh IEEE International Conference on Computer Vision, Rio de Janeiro, Brazil, du 14 au 20 Octobre 2007: https://iccv2007.rutgers.edu/
– Site Internet de Flickr: https://www.flickr.com/
Code brève
ADIT : 51844
Rédacteur :
Vincent Reboul [email protected] – Jean-Philippe Lagrange, [email protected]
