Génération de cartes de disparité par modèles de fondation

L’étude vise à identifier et évaluer des modèles de fondation (FM) capables de générer des cartes de disparité robustes pour la variété d’images de la mission CO3D, afin de produire des modèles numériques de surface (MNS) à l’état de l’art. Elle doit aussi considérer l’adaptabilité aux images satellitaires, la taille des réseaux et le coût d’inférence. Les cartes de disparité issues de couples stéréoscopiques servent à déterminer les correspondances pixel à pixel nécessaires à l’estimation des altitudes.

Démarche en trois tâches

• Étude bibliographique et base d’images : établir l’état de l’art, examiner l’applicabilité aux images satellites et définir les expérimentations de validation des MNS. La base à constituer couvrira des géométries capteur différentes, notamment des images de forêts, de désert et de villes.
• Preuve de concept : élaborer, à partir de l’étude, un code test permettant de tester et comparer des modèles, en pouvant s’appuyer sur des bibliothèques existantes.
• Application dans CARS : transposer l’algorithme dans la chaîne CARS, l’appliquer aux images et comparer les performances. L’évaluation examinera également l’effet des zones d’intérêt sur les MNS, notamment les pentes douces et les sauts altimétriques.

Suivi et livrables

Une réunion de démarrage, des réunions régulières, une réunion à la fin de chaque tâche et une réunion finale sont prévues. Le titulaire rédige les comptes rendus et le suivi des actions; un rapport d’avancement est remis à la fin de chaque tâche. Des réunions en téléconférence, visioconférence ou sur site peuvent être organisées à la demande du CNES et/ou du titulaire.

Les livrables, exclusivement électroniques, comprennent le rapport détaillant la bibliographie, la méthodologie et les choix d’implémentation, un résumé diffusable des résultats remarquables, la présentation finale, les documents de suivi et le manuel utilisateur du prototype (installation, configuration et lancement). Les transparents et rapports sont remis une semaine avant l’événement correspondant. Sont également remis les images utilisées pour l’évaluation, le code source des algorithmes développés avec leurs dépendances et licences, ainsi que la feuille de calcul ou autre support logiciel prévu. Les développements et dépôts s’effectuent sur les moyens CNES; les évolutions de codes existants passent par merge request via Git. Le code est écrit en Python et/ou C et/ou C++ (GNU), selon les choix de conception. Le CNES facilite l’accès à ses moyens de calcul HPC et à son GitLab, accessibles depuis l’extérieur.