WP9 – Earth Observation Applications – n° 1 Rapport du WP9 ESA, KNMI, IPSL Présenté by L. Peltier, IPSL.

Présentation au sujet: "WP9 – Earth Observation Applications – n° 1 Rapport du WP9 ESA, KNMI, IPSL Présenté by L. Peltier, IPSL."— Transcription de la présentation:

1 WP9 – Earth Observation Applications – n° 1 Rapport du WP9 ESA, KNMI, IPSL Présenté by L. Peltier, IPSL

2 WP9 – Earth Observation Applications – n° 2 Ozone profiles With OPERA (KNMI) and NNO(ESA) ----------------- 2000 per orbit, 5500orbits per year Validate GOME ozone profiles With Lidar measurements (IPSL) Raw satellite data from the GOME instrument On AMS to be transfered to SE MUIS catalogue Visualization Earth Observation DEMONSTRATION for PM 24 (Dec. 2002) LIDAR data DataGRID Data partitioning

3 WP9 – Earth Observation Applications – n° 3 EO Use Case File Numbers DataNumber of files to be stored and replicated Size Level 14,72415 Mb Level 2 NNO (ESA) 9,448,00010 kb Level 2 Opera (KNMI) 9,448,00012 kb Validation Lidar (IPSL) 122.5 Mb Total:18,900,736267 Gbyte GOME has a data set of 5 years GOME is relatively large in both size and number of files 1 Year of GOME data

4 WP9 – Earth Observation Applications – n° 4 Etat de la situation et plans EDG tests et développements doutils Installation et tests de Spitfire pour les EO meta base de données (en cours) Développement EO GUI (GRID Surfer, …) et EO WEB Portail Adaptation des algorithmes de calcul et validation des profils Gome Ajustements des algorithmes (Opera) et L2 production (NNO and Opera) Chargement des données de lAMS(serveur de fichiers) sur un SE…. en cours Création et production du catalogue de métadonnées, Muis ….. En cours Test du catalogue de metadonnées Lidar avec PosGreSQL etMySQL SGBD Test de partitionnement par latitude, longitude et date des donnéesL2… démarre Developpement dune infrastructure EO Grid TB1.2 IPSL: 3 PC (UI, CE) et un élément de stockage (500 Go),Spitfire ESA installation (UI, CE, SE), interface opérationnelle avec ENEA-GRID, AMS et MUIS KNMI installation (UI and Spitfire)- connection avec le Nikhef et Sara

5 WP9 – Earth Observation Applications – n° 5 IPSL : Activités Testbed 1.2 Installation (L. Peltier) Installation et tests de linterface utilisateur: fait…problème de CRL. Installation de lélément de calcul (CE) à compléter Installation de linterface utilisateur graphique fournie par lESA : après CE Installation de la baie raid (500Go) après Installation dun cluster de plusieurs PC + un PC de développement …..en cours dachat Catalogue de meta données (C. Boonne) Un catalogue avait été constitué avec PosgreSQL puis MySQL Difficulté avec précédente version de Spitfire : messages envoyés pour aide pas de réponses!! Discussion avec P. Kunszt et envoi par lui de la version 2.. Installation de la version…..à compléter Partitionnement des données (Z. Strachman) Données disponibles: 1 mois => 680000 fichiers répartis sur tout le globe Développement du programme et tests en cours (Z. Strachman)

6 WP9 – Earth Observation Applications – n° 6 IPSL : Activités Testbed 1.2 suite Interface avec les scientifiques (M. Petitdidier) Objectifs: Démontrer que DataGrid est ou sera un outil pour scientifiques et non un gadget pour informaticiens Production et validation de données satellitales EO: Tous les laboratoires et organismes de recherche + Centres de Données: Océan, Atmosphère, Sol Actions Participation au groupe de travail «ESA » validation des profils dOzone GOME », présentation de DataGrid Amélioration des algorithmes de validation: Première étape: capacité de sélectionner les profils dOzone correspondant à la station de référence pour un jour donné : démonstration de Décembre 2002 Deuxième étape: organisation de réunions avec les scientifiques chargés de la validation Troisième étape: démonstration quasi opérationnelle : implantation des modules développés par les groupes de validation GOME/ERBS et Gomos/ENVISAT

7 WP9 – Earth Observation Applications – n° 7 Dissémination Objectifs atteints et Nouveaux utilisateurs Premiers résultats scientifiques utilisant DataGrid (partiellement) soumis pour publication : première validation dun nouvel algorithme basé sur une approche neuronale en utilisant des données Lidar Participation à différentes conférences, organisation de séminaires… Proposition de faire une démonstration de la validation des données Gome, devant le groupe officiel chargé de la validation à lESA Proposition de faire une démonstration de la validation des données GOMOS/Envisat (leader de la validation: IPSL) sur la grille en mode opérationnel Autre application : taux de destruction de l ozone dans le vortex Polaire (IPSL) ….. Test de portage Proposition de CEOS-GRID(Comité dobservation de la terre par satellite-gros Centres de données), développement dun prototype de Grille tests et implication dutilisateurs aux USA (NASA, NOAA, USGS, …)

8 WP9 – Earth Observation Applications – n° 8 AMS ESA Data Archive MUIS ESA Data (level 1) Catalogue DATAGRID Computing Element Storage Elements HTML interface SOAP SOAP User Interface Wrapper SOAP OpenGIS Specifications for Coverage, Feature, Catalogue and Map Request GRID on Demand Web Portal External Client Applications (JAVA / Linux / Windows) SOAP Progrès sur le portail Web-map GOME basé sur des services Web SOAP

9 WP9 – Earth Observation Applications – n° 9 Effectif: une recrue en plus...