Earth System Grid Federation

Présentation au sujet: "Earth System Grid Federation"— Transcription de la présentation:

1 Earth System Grid Federation
Missions Le support des activités des Model Inter Comparison Project (MIPs) et de CORDEX Le développement des outils de gestion de données et méta données L’amélioration de l’infrastructure logicielle dédiée à la recherche en climatologie La favorisation de la collaboration inter-agences L’interaction avec d’autres logiciels conçus pour répondre aux objectifs d’ESGF

2 Earth System Grid Federation
Challenges Gestion de Big Data - De Peta Bytes vers Exa Bytes Support des données de sortie de modèles ainsi que d’observations Données distribuées géographiquement et gérées de façon autonome

3 Earth System Grid Federation
Contexte International Contexte National Architecture Technique Pile Logicielle Expérience Utilisateur 6. Expérience Publieur

4 Earth System Grid Federation
1. Contexte International Sponsors U.S. Européen Australien

5 Earth System Grid Federation
1. Contexte International 40 data nodes, 15 index nodes, 15 identity provider nodes

6 Earth System Grid Federation
2. Contexte National Partenaires ESGF France

7 Earth System Grid Federation
3. Architecture Technique Infra: mise en place connexion VSAT; Mise en place marégraphe. Installation d’une liaison ethernet grace modem XDSL sur un srv linux. Et acquisition de données +

8 Earth System Grid Federation
4. Pile Logicielle Data Node ESGF Node Manager ESGF Publisher Thredds Data Server (TDS) GridFTP Server HPC Center #1 HPC Center #2 Node Node Node Client Node Node Node HPC Center #3 HPC Center #4 HPC Center #5

9 Earth System Grid Federation
4. Pile Logicielle Index Node Apache Solr ESGF Search ESGF Web Front End

10 Earth System Grid Federation
4. Pile Logicielle Identity Provider OpenID Identity Provider Globus MyProxy Futur poste: intégration continue, déploiement continue, capitaliser sur les outils pour utilisation sur d’autres projets. Assemblage, Intégration, Test et Validation

11 Earth System Grid Federation
5. Expérience Utilisateur Recherche facetée Wget Script

12 Earth System Grid Federation
6. Expérience Publieur Obtention d’un OpenID depuis la Web Front End Demande d’autorisation de publication pour un projet Connexion SSH sur le noeud de données Authentification sur le noeud Identity Provider Publication locale thredds Publication distante sur l’index

13 Earth System Grid Federation
Merci