Centre de documentation
scientifique

Feature matching for multi-epoch historical aerial images / Lulin Zhang (2022)  

Public Titre : Feature matching for multi-epoch historical aerial images Titre original : Appariement des caractéristiques pour les images aériennes historiques multi-époques Type de document : Thèse/HDR Auteurs : Lulin Zhang , Auteur ; Marc Pierrot-Deseilligny , Directeur de thèse ; Ewelina Rupnik , Directeur de thèse Editeur : Champs-sur-Marne [France] : Université Gustave Eiffel Année de publication : 2022 Importance : 142 p. Note générale : bibliographie Langues : Anglais (eng) Descripteur : [Vedettes matières IGN] Traitement d'image optique [Termes IGN] auto-étalonnage [Termes IGN] corrélation à l'aide de traits caractéristiques [Termes IGN] estimation de pose [Termes IGN] image ancienne [Termes IGN] image multitemporelle Index. décimale : THESE Thèses et HDR Résumé : (auteur) L'imagerie historique se caractérise par une haute résolution spatiale et des acquisitions stéréoscopiques. Elle constitue une ressource précieuse pour la détection des changements et la surveillance environnementale à long terme. Des millions d'images historiques ont été numérisées. Elles sont des témoins objectifs du temps et parfois la seule source visuelle restante de la forme historique du territoire. Cependant, l'énorme potentiel des images historiques diachroniques est supprimé en raison du goulot d'étranglement que constitue leur géoréférencement précis. Il s'agit d'un processus appelé ajustement de faisceau auto-calibré pour estimer les paramètres de calibrage de la caméra. Il faut un nombre suffisant de correspondances dans des paysages évolutifs, qui sont difficiles à obtenir automatiquement, en raison des changements de scène et des conditions hétérogènes d'acquisition des images.Dans cette recherche, nous présentons des pipelines entièrement automatiques pour trouver des correspondances entre des images historiques prises à différents temps (c'est-à-dire, inter-époques), sans données auxiliaires nécessaires. En profitant de la géométrie 3D et de la stratégie grossier-à-précis, nous (1) enregistrons grossièrement les différentes époques en établissant un modèle de transformation globalement cohérent sur l'ensemble du bloc, et (2) nous apparions précisément les images inter-époques sous la direction du co-enregistrement grossier pour réduire l'ambiguïté. Six variantes de deux stratégies sont explorées pour l'étape de co-enregistrement grossier, et deux variantes pour l'étape d'appariement précis. Nos pipelines sont adaptés à diverses applications de surveillance environnementale. Cinq données représentatifs sont choisis pour les expériences, chacun représentant une application caractéristique. Avec les correspondances inter-époques récupérées, nous améliorons les orientations de l'image puis calculons les Digital Surface Models (DSMs) à chaque époque, et évaluons quantitativement les résultats avec les Difference of DSMs (DoDs) et le déplacement du sol dû à un séisme. Nous démontrons que notre méthode (1) peut géoréférencer automatiquement des images historiques diachroniques ; (2) peut atténuer efficacement les erreurs systématiques induites par des paramètres de caméra mal estimés ; et (3) est robuste contre les changements drastiques de la scène. Les pipelines proposés sont mis en œuvre dans MicMac, un logiciel de photogrammétrie libre et gratuit. Numéro de notice : 17733 Affiliation des auteurs : UGE-LASTIG (2020- ) Thématique : IMAGERIE/INFORMATIQUE Nature : Thèse française Note de thèse : thèse : Traitement d'image : Gustave Eiffel : 2022 Organisme de stage : LASTIG (IGN) nature-HAL : Thèse DOI : sans En ligne : https://theses.hal.science/tel-03852938 Format de la ressource électronique : URL Permalink : https://documentation.ensg.eu/index.php?lvl=notice_display&id=100652

Feature matching for multi-epoch historical aerial images: A new pipeline feature detection pipeline in open-source MicMac / Lulin Zhang in Blog de la RFPT, sans n° ([17/11/2021])  

Public [article]  inBlog de la RFPT > sans n° [17/11/2021] Titre : Feature matching for multi-epoch historical aerial images: A new pipeline feature detection pipeline in open-source MicMac Type de document : Article/Communication Auteurs : Lulin Zhang , Auteur ; Ewelina Rupnik , Auteur ; Marc Pierrot-Deseilligny , Auteur Année de publication : 2021 Note générale : Bibliographie Langues : Anglais (eng) Descripteur : [Vedettes matières IGN] Traitement d'image optique [Termes IGN] appariement de formes [Termes IGN] chaîne de traitement [Termes IGN] corrélation à l'aide de traits caractéristiques [Termes IGN] détection de changement [Termes IGN] données multitemporelles [Termes IGN] image aérienne [Termes IGN] image ancienne [Termes IGN] image RVB [Termes IGN] MicMac [Termes IGN] modèle numérique de surface Résumé : (Auteur) [Introduction] ... We propose a fully automatic approach to computing robust inter-epoch feature correspondences. Our method consists of two steps: a rough co-registration by finding feature correspondences between DSMs (Digital Surface Model) derived within single epochs, and a precise feature matching on original RGB images. Our main contributions include: - Rough-to-precise matching strategy that helps to drastically reduce ambiguity. In particular, we use the depth information to roughly co-register our epochs. The 3D landscape is globally stable over time and provides sufficient correspondences through time. Once co-registered, we levarage the 3D a priori to narrow down the search space in precise matching. - Upscaling of the learning based feature matching algorithms to high resolution imagery. To do that, we introduced an image tiling scheme. In the following we present the methodology and some experiments. If you are interested in using our method, please refer to the source code of MicMac Github 4, as well as 2 jupyter tutorials 5 6. We also provide an introduction video 7, slides 8 and project website 9. The datasets used in our publication 3 will be soon published in an open-access repository. Numéro de notice : A2021-840 Affiliation des auteurs : UGE-LASTIG (2020- ) Thématique : IMAGERIE Nature : Article nature-HAL : ArtSansCL DOI : sans Date de publication en ligne : 17/11/2021 En ligne : https://rfpt-sfpt.github.io/blog/feature%20matching/historical%20images/multi-ep [...] Format de la ressource électronique : URL Article Permalink : https://documentation.ensg.eu/index.php?lvl=notice_display&id=99042 [article]

Fully automated pose estimation of historical images in the context of 4D geographic information systems utilizing machine learning methods / Ferdinand Maiwald in ISPRS International journal of geo-information, vol 10 n° 11 (November 2021)  

Public [article]  inISPRS International journal of geo-information > vol 10 n° 11 (November 2021) . - n° 748 Titre : Fully automated pose estimation of historical images in the context of 4D geographic information systems utilizing machine learning methods Type de document : Article/Communication Auteurs : Ferdinand Maiwald, Auteur ; Christoph Lehmann, Auteur ; Taras Lazariv, Auteur Année de publication : 2021 Article en page(s) : n° 748 Note générale : bibliographie Langues : Anglais (eng) Descripteur : [Vedettes matières IGN] Photogrammétrie numérique [Termes IGN] apprentissage automatique [Termes IGN] chaîne de traitement [Termes IGN] classification par réseau neuronal convolutif [Termes IGN] corrélation à l'aide de traits caractéristiques [Termes IGN] échelle de temps [Termes IGN] estimation de pose [Termes IGN] image ancienne [Termes IGN] image terrestre [Termes IGN] métadonnées [Termes IGN] modélisation 4D [Termes IGN] patrimoine culturel [Termes IGN] recherche d'image basée sur le contenu [Termes IGN] récupération de données [Termes IGN] structure-from-motion [Termes IGN] système d'information géographique Résumé : (auteur) The idea of virtual time machines in digital environments like hand-held virtual reality or four-dimensional (4D) geographic information systems requires an accurate positioning and orientation of urban historical images. The browsing of large repositories to retrieve historical images and their subsequent precise pose estimation is still a manual and time-consuming process in the field of Cultural Heritage. This contribution presents an end-to-end pipeline from finding relevant images with utilization of content-based image retrieval to photogrammetric pose estimation of large historical terrestrial image datasets. Image retrieval as well as pose estimation are challenging tasks and are subjects of current research. Thereby, research has a strong focus on contemporary images but the methods are not considered for a use on historical image material. The first part of the pipeline comprises the precise selection of many relevant historical images based on a few example images (so called query images) by using content-based image retrieval. Therefore, two different retrieval approaches based on convolutional neural networks (CNN) are tested, evaluated, and compared with conventional metadata search in repositories. Results show that image retrieval approaches outperform the metadata search and are a valuable strategy for finding images of interest. The second part of the pipeline uses techniques of photogrammetry to derive the camera position and orientation of the historical images identified by the image retrieval. Multiple feature matching methods are used on four different datasets, the scene is reconstructed in the Structure-from-Motion software COLMAP, and all experiments are evaluated on a newly generated historical benchmark dataset. A large number of oriented images, as well as low error measures for most of the datasets, show that the workflow can be successfully applied. Finally, the combination of a CNN-based image retrieval and the feature matching methods SuperGlue and DISK show very promising results to realize a fully automated workflow. Such an automated workflow of selection and pose estimation of historical terrestrial images enables the creation of large-scale 4D models. Numéro de notice : A2021-827 Affiliation des auteurs : non IGN Thématique : IMAGERIE Nature : Article nature-HAL : ArtAvecCL-RevueIntern DOI : 10.3390/ijgi10110748 Date de publication en ligne : 04/11/2021 En ligne : https://doi.org/10.3390/ijgi10110748 Format de la ressource électronique : URL article Permalink : https://documentation.ensg.eu/index.php?lvl=notice_display&id=98964 [article]

A unified framework of bundle adjustment and feature matching for high-resolution satellite images / Xiao Ling in Photogrammetric Engineering & Remote Sensing, PERS, vol 87 n° 7 (July 2021)  

Public [article]  inPhotogrammetric Engineering & Remote Sensing, PERS > vol 87 n° 7 (July 2021) . - pp 485 - 490 Titre : A unified framework of bundle adjustment and feature matching for high-resolution satellite images Type de document : Article/Communication Auteurs : Xiao Ling, Auteur ; Xu Huang, Auteur ; Rongjun Qin, Auteur Année de publication : 2021 Article en page(s) : pp 485 - 490 Note générale : Bibliographie Langues : Anglais (eng) Descripteur : [Vedettes matières IGN] Photogrammétrie numérique [Termes IGN] appariement d'images [Termes IGN] compensation par faisceaux [Termes IGN] corrélation à l'aide de traits caractéristiques [Termes IGN] image à haute résolution [Termes IGN] orientation du capteur [Termes IGN] précision radiométrique Résumé : (Auteur) Bundle adjustment (BA) is a technique for refining sensor orientations of satellite images, while adjustment accuracy is correlated with feature matching results. Feature matching often contains high uncertainties in weak/repeat textures, while BA results are helpful in reducing these uncertainties. To compute more accurate orientations, this article incorporates BA and feature matching in a unified framework and formulates the union as the optimization of a global energy function so that the solutions of the BA and feature matching are constrained with each other. To avoid a degeneracy in the optimization, we propose a comprised solution by breaking the optimization of the global energy function into two-step suboptimizations and compute the local minimums of each suboptimization in an incremental manner. Experiments on multi-view high-resolution satellite images show that our proposed method outperforms state-of-the-art orientation techniques with or without accurate least-squares matching. Numéro de notice : A2021-571 Affiliation des auteurs : non IGN Thématique : IMAGERIE Nature : Article nature-HAL : ArtAvecCL-RevueIntern DOI : 10.14358/PERS.87.7.485 Date de publication en ligne : 01/07/2021 En ligne : https://doi.org/10.14358/PERS.87.7.485 Format de la ressource électronique : URL Article Permalink : https://documentation.ensg.eu/index.php?lvl=notice_display&id=98163 [article]

Exemplaires(1)

Code-barres	Cote	Support	Localisation	Section	Disponibilité
105-2021071	SL	Revue	Centre de documentation	Revues en salle	Disponible

Research on feature extraction method of indoor visual positioning image based on area division of foreground and background / Ping Zheng in ISPRS International journal of geo-information, vol 10 n° 6 (June 2021)  

Public [article]  inISPRS International journal of geo-information > vol 10 n° 6 (June 2021) . - n° 402 Titre : Research on feature extraction method of indoor visual positioning image based on area division of foreground and background Type de document : Article/Communication Auteurs : Ping Zheng, Auteur ; Danyang Qin, Auteur ; Bing Han, Auteur ; et al., Auteur Année de publication : 2021 Article en page(s) : n° 402 Note générale : bibliographie Langues : Anglais (eng) Descripteur : [Vedettes matières IGN] Traitement d'image optique [Termes IGN] corrélation à l'aide de traits caractéristiques [Termes IGN] extraction de traits caractéristiques [Termes IGN] logiciel libre [Termes IGN] positionnement en intérieur [Termes IGN] Ransac (algorithme) [Termes IGN] SIFT (algorithme) [Termes IGN] SURF (algorithme) Résumé : (auteur) In the process of indoor visual positioning and navigation, difficult points often exist in corridors, stairwells, and other scenes that contain large areas of white walls, strong consistent background, and sparse feature points. Aiming at the problem of positioning and navigation in the real physical world where the walls with sparse feature points are difficult to be filled with pictures, this paper designs a feature extraction method, ARAC (Adaptive Region Adjustment based on Consistency) using Free and Open-Source Software and tools. It divides the image into foreground and background and extracts their features respectively, to achieve not only retain positioning information but also focus more energy on the foreground area which is favourable for navigation. In the test phase, under the combined conditions of illumination, scale and affine changes, the feature matching maps by the feature extraction algorithm proposed in this paper are compared with those by SIFT and SURF. Experiments show that the number of correctly matched feature pairs obtained by ARAC is better than SIFT and SURF, and whose time of feature extraction and matching is comparable to SURF, which verifies the accuracy and efficiency of the ARAC feature extraction method. Numéro de notice : A2021-518 Affiliation des auteurs : non IGN Thématique : IMAGERIE Nature : Article DOI : 10.3390/ijgi10060402 Date de publication en ligne : 11/06/2021 En ligne : https://doi.org/10.3390/ijgi10060402 Format de la ressource électronique : URL article Permalink : https://documentation.ensg.eu/index.php?lvl=notice_display&id=97940 [article]

Improving traffic sign recognition results in urban areas by overcoming the impact of scale and rotation / Roholah Yazdan in ISPRS Journal of photogrammetry and remote sensing, vol 171 (January 2021)  

Permalink

A LiDAR aiding ambiguity resolution method using fuzzy one-to-many feature matching / Chuang Qian in Journal of geodesy, vol 94 n° 10 (October 2020)  

Permalink

BIM-Tracker: A model-based visual tracking approach for indoor localisation using a 3D building model / Debaditya Acharya in ISPRS Journal of photogrammetry and remote sensing, vol 150 (April 2019)  

Permalink

An effective ensemble classification framework using random forests and a correlation based feature selection technique / Dibyajyoti Chutia in Transactions in GIS, vol 21 n° 6 (December 2017)  

Permalink

Accurate affine invariant image matching using oriented least square / Amin Sedaghat in Photogrammetric Engineering & Remote Sensing, PERS, vol 81 n° 9 (September 2015)  

Permalink

Graph-based synchronous collaborative mapping / Xiaochen Kang in Geocarto international, vol 30 n° 1 - 2 (January - February 2015)  

Permalink

Une méthode de construction de données spatio-temporelles pour l'étude de l'espace urbain ancien / Bertrand Duménieu (2013)    

Permalink

Spectral Feature Selection for Data Mining / Zheng Alan Zhao (2011)  

Permalink

Analyse et développement d’outils permettant de quantifier les problèmes de continuité au niveau des raccords dans une mosaïque d’ortho-images / M. Jaussaud (2010) 

Permalink

A formulation for unsupervised hierarchical segmentation of facade images with periodic models / Jean-Pascal Burochin (2010)  

Permalink