Détection de changement en imagerie satellitaire multimodale
The purpose of this research is to study the detection of temporal changes between two (or more) multimodal images satellites, i.e., between two different imaging modalities acquired by two heterogeneous sensors, giving for the same scene two images encoded differently and depending on the nature...
Main Author: | |
---|---|
Other Authors: | |
Language: | fra |
Published: |
2019
|
Subjects: | |
Online Access: | http://hdl.handle.net/1866/22662 https://orcid.org/0000-0003-3845-5361 |
id |
ndltd-umontreal.ca-oai-papyrus.bib.umontreal.ca-1866-22662 |
---|---|
record_format |
oai_dc |
collection |
NDLTD |
language |
fra |
sources |
NDLTD |
topic |
Images satellitaires multimodales ou heterogenes Fastmap Auto-encodeur Deep learning Détection de changement Détection d’anomalies Optique Radar Paires de pixels Sparse Réseau de neurones convolutionnel Multimodal satellite images Heterogeneous images Optical Autoencoder Change detection Pairwise pixels Convolutional neural networks Invariant operator Anomaly detection Applied Sciences - Computer Science / Sciences appliqués et technologie - Informatique (UMI : 0984) |
spellingShingle |
Images satellitaires multimodales ou heterogenes Fastmap Auto-encodeur Deep learning Détection de changement Détection d’anomalies Optique Radar Paires de pixels Sparse Réseau de neurones convolutionnel Multimodal satellite images Heterogeneous images Optical Autoencoder Change detection Pairwise pixels Convolutional neural networks Invariant operator Anomaly detection Applied Sciences - Computer Science / Sciences appliqués et technologie - Informatique (UMI : 0984) Touati, Redha Détection de changement en imagerie satellitaire multimodale |
description |
The purpose of this research is to study the detection of temporal changes between
two (or more) multimodal images satellites, i.e., between two different imaging
modalities acquired by two heterogeneous sensors, giving for the same scene two images
encoded differently and depending on the nature of the sensor used for each
acquisition. The two (or multiple) multimodal satellite images are acquired and coregistered
at two different dates, usually before and after an event.
In this study, we propose new models belonging to different categories of multimodal
change detection in remote sensing imagery. As a first contribution, we present a new
constraint scenario expressed on every pair of pixels existing in the before and after
image change. A second contribution of our work is to propose a spatio-temporal textural
gradient operator expressed with complementary norms and also a new filtering
strategy of the difference map resulting from this operator. Another contribution
consists in constructing an observation field from a pair of pixels and to infer a solution
maximum a posteriori sense. A fourth contribution is proposed which consists
to build a common feature space for the two heterogeneous images. Our fifth contribution
lies in the modeling of patterns of change by anomalies and on the analysis
of reconstruction errors which we propose to learn a non-supervised model from a
training base consisting only of patterns of no-change in order that the built model
reconstruct the normal patterns (non-changes) with a small reconstruction error. In
the sixth contribution, we propose a pairwise learning architecture based on a pseudosiamese
CNN network that takes as input a pair of data instead of a single data and
constitutes two partly uncoupled CNN parallel network streams (descriptors) followed
by a decision network that includes fusion layers and a loss layer in the sense of the entropy criterion.
The proposed models are enough flexible to be used effectively in the monomodal
change detection case. === Cette recherche a pour objet l’étude de la détection de changements temporels entre deux (ou plusieurs) images satellitaires multimodales, i.e., avec deux modalités d’imagerie différentes acquises par deux capteurs hétérogènes donnant pour la même scène deux images encodées différemment suivant la nature du capteur utilisé pour chacune des prises de vues. Les deux (ou multiples) images satellitaires multimodales sont prises et co-enregistrées à deux dates différentes, avant et après un événement. Dans le cadre de cette étude, nous proposons des nouveaux modèles de détection de changement en imagerie satellitaire multimodale semi ou non supervisés. Comme première contribution, nous présentons un nouveau scénario de contraintes exprimé sur chaque paire de pixels existant dans l’image avant et après changement. Une deuxième contribution de notre travail consiste à proposer un opérateur de gradient textural spatio-temporel exprimé avec des normes complémentaires ainsi qu’une nouvelle stratégie de dé-bruitage de la carte de différence issue de cet opérateur. Une autre contribution consiste à construire un champ d’observation à partir d’une modélisation par paires de pixels et proposer une solution au sens du maximum a posteriori. Une quatrième contribution est proposée et consiste à construire un espace commun de caractéristiques pour les deux images hétérogènes. Notre cinquième contribution réside dans la modélisation des zones de changement comme étant des anomalies et sur l’analyse des erreurs de reconstruction dont nous proposons d’apprendre un modèle non-supervisé à partir d’une base d’apprentissage constituée seulement de zones de non-changement afin que le modèle reconstruit les motifs de non-changement avec une faible erreur. Dans la dernière contribution, nous proposons une architecture d’apprentissage par paires de pixels basée sur un réseau CNN pseudo-siamois qui prend en entrée une paire de données au lieu d’une seule donnée et est constituée de deux flux de réseau (descripteur) CNN parallèles et partiellement non-couplés suivis d’un réseau de décision qui comprend de couche de fusion et une couche de classification au sens du critère d’entropie. Les modèles proposés s’avèrent assez flexibles pour être utilisés efficacement dans le cas des données-images mono-modales. |
author2 |
Mignotte, Max |
author_facet |
Mignotte, Max Touati, Redha |
author |
Touati, Redha |
author_sort |
Touati, Redha |
title |
Détection de changement en imagerie satellitaire multimodale |
title_short |
Détection de changement en imagerie satellitaire multimodale |
title_full |
Détection de changement en imagerie satellitaire multimodale |
title_fullStr |
Détection de changement en imagerie satellitaire multimodale |
title_full_unstemmed |
Détection de changement en imagerie satellitaire multimodale |
title_sort |
détection de changement en imagerie satellitaire multimodale |
publishDate |
2019 |
url |
http://hdl.handle.net/1866/22662 https://orcid.org/0000-0003-3845-5361 |
work_keys_str_mv |
AT touatiredha detectiondechangementenimageriesatellitairemultimodale |
_version_ |
1719320577461714944 |
spelling |
ndltd-umontreal.ca-oai-papyrus.bib.umontreal.ca-1866-226622020-06-16T15:29:44Z Détection de changement en imagerie satellitaire multimodale Touati, Redha Mignotte, Max Images satellitaires multimodales ou heterogenes Fastmap Auto-encodeur Deep learning Détection de changement Détection d’anomalies Optique Radar Paires de pixels Sparse Réseau de neurones convolutionnel Multimodal satellite images Heterogeneous images Optical Autoencoder Change detection Pairwise pixels Convolutional neural networks Invariant operator Anomaly detection Applied Sciences - Computer Science / Sciences appliqués et technologie - Informatique (UMI : 0984) The purpose of this research is to study the detection of temporal changes between two (or more) multimodal images satellites, i.e., between two different imaging modalities acquired by two heterogeneous sensors, giving for the same scene two images encoded differently and depending on the nature of the sensor used for each acquisition. The two (or multiple) multimodal satellite images are acquired and coregistered at two different dates, usually before and after an event. In this study, we propose new models belonging to different categories of multimodal change detection in remote sensing imagery. As a first contribution, we present a new constraint scenario expressed on every pair of pixels existing in the before and after image change. A second contribution of our work is to propose a spatio-temporal textural gradient operator expressed with complementary norms and also a new filtering strategy of the difference map resulting from this operator. Another contribution consists in constructing an observation field from a pair of pixels and to infer a solution maximum a posteriori sense. A fourth contribution is proposed which consists to build a common feature space for the two heterogeneous images. Our fifth contribution lies in the modeling of patterns of change by anomalies and on the analysis of reconstruction errors which we propose to learn a non-supervised model from a training base consisting only of patterns of no-change in order that the built model reconstruct the normal patterns (non-changes) with a small reconstruction error. In the sixth contribution, we propose a pairwise learning architecture based on a pseudosiamese CNN network that takes as input a pair of data instead of a single data and constitutes two partly uncoupled CNN parallel network streams (descriptors) followed by a decision network that includes fusion layers and a loss layer in the sense of the entropy criterion. The proposed models are enough flexible to be used effectively in the monomodal change detection case. Cette recherche a pour objet l’étude de la détection de changements temporels entre deux (ou plusieurs) images satellitaires multimodales, i.e., avec deux modalités d’imagerie différentes acquises par deux capteurs hétérogènes donnant pour la même scène deux images encodées différemment suivant la nature du capteur utilisé pour chacune des prises de vues. Les deux (ou multiples) images satellitaires multimodales sont prises et co-enregistrées à deux dates différentes, avant et après un événement. Dans le cadre de cette étude, nous proposons des nouveaux modèles de détection de changement en imagerie satellitaire multimodale semi ou non supervisés. Comme première contribution, nous présentons un nouveau scénario de contraintes exprimé sur chaque paire de pixels existant dans l’image avant et après changement. Une deuxième contribution de notre travail consiste à proposer un opérateur de gradient textural spatio-temporel exprimé avec des normes complémentaires ainsi qu’une nouvelle stratégie de dé-bruitage de la carte de différence issue de cet opérateur. Une autre contribution consiste à construire un champ d’observation à partir d’une modélisation par paires de pixels et proposer une solution au sens du maximum a posteriori. Une quatrième contribution est proposée et consiste à construire un espace commun de caractéristiques pour les deux images hétérogènes. Notre cinquième contribution réside dans la modélisation des zones de changement comme étant des anomalies et sur l’analyse des erreurs de reconstruction dont nous proposons d’apprendre un modèle non-supervisé à partir d’une base d’apprentissage constituée seulement de zones de non-changement afin que le modèle reconstruit les motifs de non-changement avec une faible erreur. Dans la dernière contribution, nous proposons une architecture d’apprentissage par paires de pixels basée sur un réseau CNN pseudo-siamois qui prend en entrée une paire de données au lieu d’une seule donnée et est constituée de deux flux de réseau (descripteur) CNN parallèles et partiellement non-couplés suivis d’un réseau de décision qui comprend de couche de fusion et une couche de classification au sens du critère d’entropie. Les modèles proposés s’avèrent assez flexibles pour être utilisés efficacement dans le cas des données-images mono-modales. 2019-11-27T20:29:07Z 2019-11-27T20:29:07Z 2019-10-30 2019-04 Thèse ou mémoire / Thesis or Dissertation http://hdl.handle.net/1866/22662 https://orcid.org/0000-0003-3845-5361 fra |