Ingénieur·e de Recherche Modèles Génératifs Profonds pour l'Imagerie Satellitaire - CDD H/F - 93

Alors que les images d'observation de la Terre sont acquises à un rythme accru, les événements d'intérêt sont noyés dans la masse d'information. Le projet OGRE (Observation de la Terre et modèles Génératifs pour la Reconnaissance d'Événements rares), porté par le laboratoire LASTIG, vise à développer de nouvelles méthodes fondées sur les modèles génératifs profonds afin d'identifier des événements extrêmes dans des piles multimodales SAR/optique. L'objectif est de séparer automatiquement les images inhabituelles, déviant de la distribution habituellement observées, comme les images de catastrophes naturelles (inondations, incendies, tempêtes, séismes...), d'événements environnementaux et météorologique extrêmes (fonte des glaces, sécheresses prolongées) ou d'activités humaines anormales, voire illégales (déforestation, contrebande, construction interdite).

Pour ce faire, le projet croise l'état de l'art en détection non-supervisée de données « hors distribution » et celui des modèles génératifs profonds tels que les modèles de diffusion et les auto-encodeurs masqués. En effet, ces modèles permettent d'apprendre la distribution des observations normales, sans aucune supervision. Ces modèles sont ensuite utilisés comme estimateurs de la vraisemblance de nouvelles images, afin de déterminer si une observation est habituelle (représentative de la distribution historique) ou inhabituelle (événement rarement observé dans la distribution initiale).

Les modèles génératifs profonds ont grandement gagné en popularité ces dernières années, notamment les modèles de diffusion et les modèles de flow matching.
Cependant, les modèles sur étagère sont conçus pour de l'imagerie couleur classique destinée aux usages multimédia.
La mission principale de la personne recrutée sera de fournir au projet OGRE une base de code robuste et une collection de modèles génératifs entraînés sur des données d'observation de la Terre.
Le projet s'appuiera tout particulièrement sur les données ouvertes de l'IGN (BD ORTHO, mosaïque SPOT) et du programme Copernicus (Sentinel-1 et 2) et s'inspirera de jeux de données extensibles ouverts comme Major TOM, TerraMesh et FLAIR-HUB.
La personne recrutée travaillera au bon déroulement des objectifs suivants :

Consolidation d'un ou plusieurs jeux de données d'images aériennes et satellitaires,
Développement d'une base de code pour l'entraînement et/ou lefine-tuning de modèles génératifs à large échelle,
Implémentation, entraînement et/ou fine-tuning de modèles de références sur un grand calculateur,
Validation qualitative et quantitative, comparaison à des modèles de l'état de l'art (TerraMind, DiffusionSat, etc.),
Évaluation de l'impact de différents conditionnements (date, heure, localisation, angle d'incidence, etc.).