Geodes, futur centre d’accès aux données du CNES pour l’observation de la terre
=>
Contexte
En 2021, le CNES a décidé de mettre en œuvre un hub de services autour de la diffusion des données satellitaires d’Observation de la Terre (OT). Intégré dans un écosystème national et européen, dans le cadre de Data Terra et au service des communautés scientifiques et des projets du CNES, le projet Geo Data Hub (GDH, plus récemment renommé Géodes) va offrir des services de diffusion, d’exploration, d’incubation et de gestion des données issues du spatial, afin de promouvoir et favoriser l’innovation et la science dans le domaine du « Système Terre ».
Les données considérées sont l’ensemble des données d’observation de la Terre pour lesquelles le CNES a eu une contribution majeure, ainsi que les données Sentinel 1 et 2. A partir de fin 2023, la diffusion des données Sentinel sera réalisée en France par la plate-forme GDH en remplacement de la plate-forme PEPS.
GDH sera aussi le nœud Toulousain de l’Infrastructure de Recherche (IR) DataTerra , bâtie sur les pôles de données et de services Aeris, ForM@Ter, ODATIS et Theia. Il est aussi intégré dans le projet Gaia-Data (ANR Equipex), présenté par DataTerra, en partenariat avec deux autres IRs, Climeri (Modélisation du climat) et PNDB (Biodiversité), et qui regroupe un consortium de 21 partenaires – dont Ifremer, INRAE, CNRS/INSU, IGN, IRD, Météo France. Gaïa Data a bénéficié d’un financement dans le cadre du Plan d’Investissement de l’Avenir.
La plate-forme GDH permettra bientôt :
- d’ingérer les données produites par les missions OT du CNES afin de les valoriser,
- de s’intégrer dans l’infrastructure de recherche Data Terra pour faciliter l’accès aux services et aux données pour les utilisateurs scientifiques
- d’inter-opérer avec les plateformes de services institutionnels (e.g. Géo Plateforme)
- De s’appuyer sur des relais privés quand nécessaire (hébergement Cloud ou autres services) pour favoriser le développement économique autour de l’usage de la donnée.
La plate-forme et ses services
Pour répondre à ces enjeux et à une meilleure intégration dans l’écosystème, l’offre de services a été pensée en trois couches de services pour répondre aux différents types d’utilisation. Le schéma ci-dessus présente de manière synthétique cette offre de service permettant d’adresser :
- Services basiques: découvrir et explorer les données
- Services pour les communautés: permettre le développement et la maturation de nouveaux services,
- Services pour les projets et pôles: diffuser les données et produits à valeur ajoutée pour les centres de production du CNES ou de partenaires.
Les composants techniques de la plate-forme
- Un portail WEB pour les fonctions de communication : publication d’articles pour valoriser les activités OT du CNES (Missions OT, Contributions aux pôles, Labo OT, SCO, Programme Aval, Booster PEPS, …) et vulgariser l’utilisation des données satellitaires,
- Un Composant WEB SIG pour la découverte (consultation du catalogue), la visualisation, le téléchargement et le traitement à la demande sur les données
- Un composant DATALABS (comme JupyterLab) pour des traitements interactifs (maturation d’algorithmes de traitements sur les données).
L’interopérabilité avec d’autres plates-formes et l’intégration dans l’IR Data Terra sera assurée par l’utilisation de standards (OGC, STAC). D’autres sujets techniques sont en cours dans le cadre du projet Gaia Data tels que la fédération de l’authentification et des autorisations, l’échanges de données inter-centres, la fédération de services… Une attention particulière est portée sur le support et l’exploitation, l’accompagnement et l’expertise afin d’accompagner au mieux l’ensemble des utilisateurs sur les questions thématiques, technologiques, et d’exploitation. L’équipe s’appuie notamment sur les retours d’expérience de PEPS et des équipes d’exploitation du CNES.
La plate-forme résultante reposera sur deux moyens stratégiques du CNES qui sont en cours de renouvellement – stockage (DATALAKE) et calcul (HPC6G) – Elle décloisonnera l’ensemble des jeux de données OT que le CNES met à disposition actuellement et dans le futur. Ces infrastructures permettent une montée en charge importante, en considérant également un usage numérique responsable (stockage sur bande, suivi et optimisation énergétique du HPC).
Roadmap et évolutions
La plate-forme est en cours de développement et s’appuie sur l’intégration et la réutilisation de composants logiciels génériques développés dans le cadre du projet Hysope II, appelés « Composants de la plateforme OT » (POTe). La méthode de développement retenue est une méthode Agile et DevOps intégrant également une démarche « UX Design » dans laquelle les utilisateurs sont mis à contribution pour nous aider à construire la solution la plus alignée avec leurs attentes et besoins. Le CNES a choisi de définir un périmètre « MVP » (Minimum Viable Product) pour la première phase de développement avec l’industriel retenu, Cap Gémini. Cette phase est prévue de septembre 2022 à juillet 2023. Elle permettra d’implémenter la reprise des services de PEPS et la diffusion des données THEIA / Muscate. La phase suivante consistera à implémenter les services additionnels et à ingérer les données éligibles à GDH. Les priorités seront définies selon la valeur ajoutée et les contraintes externes éventuelles. La migration des utilisateurs PEPS et l’ouverture de service officielle sera fin 2023.
Vos contacts
Pour plus d’informations, vous pouvez contacter le Chef de projet : Francois.jocteur-monrozier@cnes.fr ou les Product Owner : Benjamin.Husson@cnes.fr et Marjorie.Robert@cnes.fr pour des questions plus techniques. L’article a été principalement écrit par François Jocteur-Montrosier (mais pour une sombre raison, je n’ai pas réussi à le lui attribuer dans wordpress).
