Tutorial Clermont Ferrand – 23 mars 2005 - EGEE France Marseille 24 Mars 2005 1 Earth Science Applications Monique Petitdidier (IPSL), Cathy Boonne (IPSL),

Slides:



Advertisements
Présentations similaires
STRATEGIE DONNEES MARINES Les données in situ Catherine Maillard, IFREMER/TMSI/IDM/SISMER SISMER Table Ronde RIO 29/11/2000 SISMER Systèmes dInformations.
Advertisements

25 novembre 2005 Forum des utilisateurs des bases de données Forum des utilisateurs des bases de données de lIfremer Présentation du Thème 1 Grands équipements.
Forum des utilisateurs des bases de données marines 23 novembre ème forum des utilisateurs des bases de données marines Ifremer Compte-rendu.
SIG Géosciences Bathymétrie Imagerie Sismique
Le Grid Computing Par Frédéric ARLHAC & Jérôme MATTERA.
WP9 – Earth Observation Applications – n° 1 Rapport du WP9 ESA, KNMI, IPSL Présenté by L. Peltier, IPSL.
WP9: Applications Observation de la Terre Revue de lESA Partcipants: EU: Kyriakos Baxevanidis, K. Decker, S. Filippone, G. Samaras ESA: L. Fusco, J. Lindford,
Etat du site Datagrid à lIPSL 1. sur la machine Amundsen : Installation de linterface Utilisateur (UI) et tests de fonctionnalités réussis Monitoring réseau.
PROJET DATAGRID À lIPSL (Pôle Données) C. Boonne Réunion DataGRID - 31/01/ Lyon.
WP10 Vincent BRETON – DataGRID France – Statut du WP10.
LCG DATAGRID - France 8 Juillet 2002 LCG : LHC Grid computing - qui, quoi, quand, comment ? Quoi ? But : préparer l'infrastructure informatique des 4 expériences.
Intégration du système de production LHCb sur la DataGRID V. Garonne, CPPM, Marseille Réunion DataGRID France, 13 fv fév
simulateur de réseau de machines UML connectées par WiFi mode ad-hoc
Framework Avancement au Plan Principales avancées pour les parties Ligand, Sites Actifs et Docking Processus dinstallation de.
© IFP Geology-Geochemistry-Geophysics Division – Dionisos 4 JIP / Kick-Off Meeting– Friday, June 20, 2008 Atelier 3 – Stratégie de modélisation à l'échelle.
Biodiversité Eaux internationales Gestion durable des forêts
Télédétection des Océans : quels défis pour le futur ?
ATLAS Data Challenges. Les Data Challenges (DC) en français Challenges des Données ont pour but de Valider: –le modèle dorganisation et dutilisation des.
1 Grille de calcul et physique des particules Vincent Garonne CPPM, Marseille Novembre 2003 Contenu de la présentation Etat de lart : Grille de calcul.
EGEE-II INFSO-RI Enabling Grids for E-sciencE EGEE and gLite are registered trademarks VO Fusion Pierrick Micout, CEA - DAPNIA.
J-L Dufresne Responsable du pôle de modélisation Pôle de modélisation de l'IPSL: travaux en cours en vue de la préparation du prochain rapport du GIEC.
Réalité virtuelle et Représentation de Données Complexes
Réseau de stockage étendu
Lyon, 24/04/2007 Ce que l'application a besoin de connaître: Paramètres physiques par scénario de 150 ans Nombre et numéro d'ordre des mois à effectuer.
Mise en oeuvre et exploitation
Adaptation aux Changements Climatiques au MAroc
EGEE-II INFSO-RI Enabling Grids for E-sciencE EGEE and gLite are registered trademarks Le monitoring réseau dans EGEE Guillaume.
Méthodes d’assimilation: Le problème du point de vue de la mesure (P. Prunet, Noveltis) Assimilation de données en zones cotières (P. De Mey, LEGOS/POC)
EGEE is a project funded by the European Union under contract IST Noeud de Grille au CPPM.
Projet LCG: Déploiement Pierre Girard EGEE/LCG ROC EGEE/LCG site deployment Centre de Calcul de l’IN2P3 LCG France Lyon, 14 décembre.
P a p y r u s Dépôt institutionnel numérique de l’UdeM Marie-Hélène Vézina Direction des bibliothèques Université de Montréal
Résumé CHEP 2010 Distributed processing and analysis Grid and cloud middleware Thèmes : 1.
Réunion Toulouse Data Node GIEC/IPCC - Prodiguer Lundi 23 novembre Sébastien Denvil Pôle de Modélisation, IPSL PRODIGUER un nœud de distribution.
La chaîne Safran-Isba-Modcou pour le suivi du bilan hydrique et la prévision de débits des principaux fleuves et rivières à l'échelle de la France Eric.
Déploiement LCG-2 Etat actuel au CC-IN2P3 Fabio Hernandez Centre de Calcul de l’IN2P3 Lyon, 22 juillet 2004.
Réunion calcul simulations GIEC/IPCC - Prodiguer Lundi 23 Mars PRODIGUER un noeud français de distribution des données GIEC/IPCC Sébastien Denvil.
Le noeud de grille Tier 3 LAPP.
Couche limite atmosphérique
EGEE-II INFSO-RI Enabling Grids for E-sciencE EGEE and gLite are registered trademarks Rapport du ROC France Pierre Girard French.
1 SURVEILLANCE LONG TERME DES RELATIONS SOLEIL - TERRE F. Lefeuvre PNST – 30 Septembre 2005.
Comité d'Orientation du GISClimat - Prodiguer Mardi 18 Novembre PRODIGUER un noeud français de distribution de données GIEC/IPCC Sébastien Denvil.
Sample Image CGGVeritas University - Massy Monday 10 December 2007 EGEODE VO meeting of GEOCLUSTER user's on the EGEE grid.
INFSO-RI Enabling Grids for E-sciencE Tutorial – Clermont 10 janvier 2007 Applications Science de la Planète M. Petitdidier (IPSL/CETP)
Yannick Patois _ Journée du Libre _ 1er Novembre n° 1 Datagrid Une grille de calcul sous Linux Yannick Patois.
EGEODE 08/11/2006 Équipe GRID1 EGEODE EGEODE. 08/11/2006 Équipe GRID2 Plan  La géophysique sur la Grille : EGEODE  Partenariat académique  Comment.
Sécurisation infrastructure Altibus Ajout d’un serveur pour le réseau Call Center.
GRIF Status Michel Jouvin LAL/Orsay
Projet StratusLab Technologies Cloud et Virtualisation M. Airaj (CNRS/LAL), C. Loomis (CNRS/LAL) LCG-France, CPPM Marseille Juin 2010 The StratusLab.
IDG / INSPIRE – Agence de l’Eau Artois-Picardie – 16/06/2011 Infrastructure de Données Géographique AEAP: réponse à la directive Inspire.
Cécile Barbier David Bouvet Christine Leroy L'exploitation de la grille au quotidien.
Mardi 30 mars 2010 Technologies employées par le portail des opérations Cyril L’Orphelin, Olivier Lequeux, Pierre Veyre IN2P3/CNRS Computing Centre, Lyon,
Développement des templates Quattor de gLite à EMI Guillaume PHILIPPON.
Catalogues de fichiers de données. David Bouvet2 Problématique Possibilité de répliquer les fichiers sur divers SE  nécessité d’un catalogue de fichiers.
Sample Image Comment utiliser la grille ? 3ème rencontre EGEODE des utilisateurs de Geocluster et des Sciences de la Terre sur la grille EGEE à Villefranche-sur-Mer.
Réunion EGEE France 11/6/2004Page 1Rolf Rumler Structure de l’exploitation d’EGEE.
Grid au LAL Michel Jouvin LAL / IN2P3
Biennale du LPNHE 2011, 20/09/ Le projet GRIF-UPMC : évolution et utilisation Liliana Martin Victor Mendoza Frédéric Derue
Projet LCG: Vue d’Ensemble Fabio Hernandez Responsable Technique LCG-France Centre de Calcul de l’IN2P3 Rencontre IN2P3/STIC Grenoble, 25.
EGEE is a project funded by the European Union under contract INFSO-RI Copyright (c) Members of the EGEE Collaboration Infrastructure Overview.
1er septembre 2005J-P Meyer1 Statut du projet GRIF (Grille de Recherche d’Île de France) Rappel du projet But: Mettre en place une ressource d’analyse.
Mai 2016 Mme Zgoulli Mouna Directeur Central Informatique Diffusion & Coordination Technologies Mobiles pour la collecte et la diffusion des données statistiques.
Présentation au conseil scientifique. Une e-infrastructure dédiée au traitement des données Infrastructure distribuée, par les utilisateurs, pour les.
Réunion des sites LCG France- Marseille juin ACTIVITES DU GROUPE ACCOUNTING FRANCE GRILLES Cécile Barbier (LAPP)
20-mars-2008Eric Lançon1 Activités ATLAS sur le nuage Français Emprunts a K. Bernardet, C. Biscarat, S. Jezequel, G. Rahal.
CNRS GRID-FR CA Sophie Nicoud
Tier 2 au LAPP. Plan Historique Objectifs Infrastructures Status/métriques Avenir Conclusion.
EGEE induction course, 22/03/2005 INFSO-RI Enabling Grids for E-sciencE Infrastructure Overview Pierre Girard French ROC deputy.
EGEE-II INFSO-RI Enabling Grids for E-sciencE EGEE and gLite are registered trademarks Monitoring dans EGEE Frederic Schaer ( Judit.
CALCUL ATLAS LCG France (CC IN2P3 Lyon) 30 Avril SOMMAIRE Data Challenge 2 (DC2) d’ATLAS Utilisation du CC IN2P3.
Introduction à GENIUS et GILDA
Transcription de la présentation:

Tutorial Clermont Ferrand – 23 mars EGEE France Marseille 24 Mars Earth Science Applications Monique Petitdidier (IPSL), Cathy Boonne (IPSL), Fabrice Cipriani (IPSL), Eric Clévédé (IPGP), Fabio del Frate (UTV), Vega Forneris (ESRIN), Luigi Fusco (ESRIN), Sophie Godin-Beekmann (IPSL), Ladislav Hluchy (Savba), Michele Iapaolo (UTV, IPSL), Stephan Kinderman (DKRZ), Dimitri Komatitsch (MIGP), Giuditta Lecca(CRS4), Julian Linford (ESRIN), Geneviève Moguilny (IPGP), Philippe Renard (Unine), Wim Som de Cerff (KNMI), Dominique Thomas (CGG), Viet Tran (Savba), Jean-Pierre Vilotte (IPGP), Gael Youinou (CGG), David Weissenbach (IPSL) EGEE is funded by the European Union under contract IST

Tutorial Clermont Ferrand – 23 mars EGEE France Marseille 24 Mars EARTH SCIENCE La Terre est un système très complexe, siège de nombreux phénomènes La description de ce système est découpée en domaines indépendants avec des interfaces La Terre L’OcéanL’Atmosphère Chacune de ces entités est séparée en sous-domaines dans lesquels on étudie les processus dont ils sont le siège et leur interaction avec les domaines et sous-domaines voisins Les applications de ESR correspondent à des domaines faisant partie de SDU/CNRS et n’incluent pas l’étude de la végétation, des éco-systèmes…  Communauté éclatée en de nombreux petits groupes

Tutorial Clermont Ferrand – 23 mars EGEE France Marseille 24 Mars APPLICATIONS SUR LA GRILLE Observation de la Terre par Satellite Hydrologie Géophysique Climat Geosciences Et aussi Chimie de la Haute Atmosphère Martienne

Tutorial Clermont Ferrand – 23 mars EGEE France Marseille 24 Mars EARTH SCIENCE ORGANISATION  Coordination Earth Science: Monique Petitdidier (IPSL)  12 Laboratoires et Instituts de recherche; Une organisation: ESRIN, une compagnie privé, CGG  En France, Italie, Allemagne, Hollande, Russie, Suisse,Slovaquie  2 Organisation Virtuelles: En raison d’une politique différente d’accès aux données (non payante pour la recherche, payante pour le privé) ESR (Earth Science Research) Tous les domaines et activités de recherche – 20 personnes(4NL, 9F, 1G, 4I, 2 SK )+7 en attente (1 F,1 S, 2 I, 3 Russes) EGEODE (Expanding Geosciences On Demand): centrée autour de Geocluster (software Compagnie Générale de Géophysique) ESR a un site web Wiki Conférence téléphonique tous les 15 jours ou plus

Tutorial Clermont Ferrand – 23 mars EGEE France Marseille 24 Mars ESR : CEs EGEE CE IDSITE/PAYSR-GMAESR S/W# CPU hudson.datagrid.jussieu.frIPSL-IPGP / FR114 ce1.egee.fr.cgg.comCGG / FR0167 cclcgceli02.in2p3.frIN2P3-CC / FR11900 grid10.lal.in2p3.frIN2P3-LAL / FR0018 marseillece01.mrs.grid.cnrs.frIN2P3-CPPM / FR1124 TOTAL France5 / tbn20.nikhef.nlNIKHEF.NL / NL10264 mu6.matrix.sara.nlSARA / NL0156 scaicl0.scai.fraunhofer.deSCAI-FHG / DE1130 ce.ui.savba.skIISAS / SK1116 ce01.grid.bas.bgBG01-IPP / BG017 gridit-ce-01.cnaf.infn.itINFN-CNAF / IT0110 pcgrid01.esrin.esa.intESRIN / IT(1) 0 (12) TOTAL11 (12) / 65 (12)9 (10)1396 (1408)

Tutorial Clermont Ferrand – 23 mars EGEE France Marseille 24 Mars ESR : Autres ressources & accounting Storage Elements: Plusieurs Tb disponibles sur plus de 15 Ses, sur 11 sites (It, Nl, Fr,…). Besoins actuels largement couverts par apports propres. Resource Brokers : France: 1 (IN2P3-LAL) Hollande: 2 (SARA, NIKHEF) Italie: 2 (INFN-CNAF) Accounting : Plus de 300 jobs sur le seul RB de SARA en 02/05

Tutorial Clermont Ferrand – 23 mars EGEE France Marseille 24 Mars OBSERVATION DE LA TERRE PAR SATELLITE [1] Application typique des observations satellitales Application portée sur DataGrid, développée à plus grande échelle sur EGEE : 9 années de données avec NNO, quelques mois avec OPERA. CHALLENGE PRODUCTION: Algorithmes complexes VALIDATION: Sélection nécessaires parmi de nombreux fichiers : 10 profils utiles parmi les quotidiens.

Tutorial Clermont Ferrand – 23 mars EGEE France Marseille 24 Mars OBSERVATION DE LA TERRE PAR SATELLITE [2] Production de profils d’Ozone à partir des données satellitales de l’Expérience GOME/ESR par UTV (Italie), ESRIN (Italie), KNMI(Hollande) Validation des profils avec des données lidar par IPSL, UTV NNO: Algorithme « Réseau de neurones » 2 versions (F. del Frate, M. Iapaolo, S. Casadio) 8 années de données ( ) sur EGEE: fichiers/algorithme avec ~ 1800 profils d’ozone/fichier – produits par J. Linford OPERA: Algorithme – Inversion (R. van A) Quelques mois sur EGEE: Fichiers 1 profil/fichier (W. Som de Cerff, S. Grijping) Validation avec lidar et radiosondages (RS) ozone: 7 sites lidar et 2 RS Effectuée sur 3 sites lidar pour les 2 algorithmes NNO/NNO2 et OPERA (M. Iapaolo, S. Godin) Lidar à l’OHP

Tutorial Clermont Ferrand – 23 mars EGEE France Marseille 24 Mars GEOPHYSIQUE INTERNE [1] Détermination rapide des mécanismes des tremblements de terre importants (E. Clévédé, IPGP) Challenge Fournir les résultats 24h après un tremblement de terre Application à lancer sur alerte  Collecter les données des 30 stations sismiques réseau mondial GEOSCOPE  Sélectionner les stations et les données  Lancer par exemple 50jobs pour inversions Application qui demande beaucoup de cpus pendant peu de temps, impossible à prévoir d’avance Peru earthquake, 23/6/2001, Mw=8.3 Data used: 15 Geoscope Stations

Tutorial Clermont Ferrand – 23 mars EGEE France Marseille 24 Mars GEOPHYSIQUE INTERNE [2] SPECFEM3D: Simulation numérique de tremblements de terre avec un modèle géologique complexe 3D D. Komatitsch (MIGP, Pau), G. Moguilny(IPGP) CHALLENGE MPI et Fortran 90 avec 2 types I/O: fichiers locaux (/tmp sur chaque nœud) et fichiers partagés (vus par tous les nœuds) Peut fonctionner sur 100 noeuds Février & Mars et 2005 a fonctionné:  4 CPUS aux LAL, CPPM, Nikhef, SCAI Février 2005:  16 CPUS au Nikhef, SCAI

Tutorial Clermont Ferrand – 23 mars EGEE France Marseille 24 Mars HYDROLOGIE [1] Gestion des ressources en eau dans la zone Méditerranéenne(Swimed) G. Lecca :CRS4 (Sardaigne, Italie), P. Renard (Université de Neuchâtel, Suisse), INAT Tunisie Etude de l’Intrusion d’eau de mer dans une nappe aquifère côtière du bassin Méditerranéen CODESA-3D: simulation de Monte Carlo basée sur un modèle de flux d’eau souterraine dépendant de la densité et de transport de sel ; a déjà tourné sur Gilda. CHALLENGE et PERSPECTIVES  Portage sur EGEE de CODESA-3D appliqué à la Sardaigne  Adapter l’ application au site pilote de Korba (Tunisie)  Utilisation EUMED pour connexion Tunisie à la grille  Exploiter cette application à partir de l’Université de Neuchâtel et de l’Institut Tunisien en utilisant les données de ces groupes.

Tutorial Clermont Ferrand – 23 mars EGEE France Marseille 24 Mars HYDROLOGIE [2] Prévision des crues à partir de données expérimentales et de modèles de météorologie, d’hydrologie et hydraulique. L. Hluchy, Viet Tran, M. Ciglan …. (II-SAS, Bratislava Slovaquie) Le modèle hydraulique a été testé sur EGEE CHALLENGE ACTUEL Portage de l’application de Cross-Grid à EGEE avec son portail, sa gestion de workflow, outils de visualisation développés avec II-SAS Développer une nouvelle solution à cette application qui sera basée sur des services web Data sources Hydrological simulation Hydraulic simulation Portal Meteorological simulation Cascade of simulations

Tutorial Clermont Ferrand – 23 mars EGEE France Marseille 24 Mars CLIMAT FhG-SCAI Objectif: Accès aux données à partir de la grille et calcul 1ère Etape: ERA40 data access at BADC and DKRZ/M&D, grid based climate data post-processing Model Simulations NEC SX6 + DataStore CERA Database WDC (World Data Center on Climate) DKRZ / M&D Germany BADC Database United Kingdom x WN CE SE DKRZ UI EGEE (LCG2) Infrastructure Components – ESR VO - Sara/Nikhef (RB, BDII,...) Cdo climate data processing package common metadata format Authorithation challenge - response

Tutorial Clermont Ferrand – 23 mars EGEE France Marseille 24 Mars PROJETS EN TEST ET FUTURS (1) Haute atmosphère martienne (IPSL): très long job (48-60h) (2) Equipes Russes Mikhail Zhizhin (Institut de physique de la Terre et Centre Géophysique) Moscou:  Data mining données météorologiques NCEP  Space Physics Interactive Data Resource (SPIDR) Serveur de base de données –archives historiques : soleil, vent solaire… Victor Malyshkin (Novosibirsk) (3) Taras Gerya (ETH, Zurich; Géologie) Processus de calculs à adapter à EGEE

Tutorial Clermont Ferrand – 23 mars EGEE France Marseille 24 Mars MetaDonnées CONTEXTE Catalogues de métadonnées classiques en Earth Sciences Intégrés souvent dans une base de données relationnelle (MySQL, PostgreSQL, Oracle) DataGrid: MySQL+Spitfire sur un serveur hors Grille RMC intégré à la grille, VOMS EGEE: MySQL hors Grille + OGSA-DAI. EN COURS (ESRIN, IPSL, KNMI, Aide NA4) Version élaborée de MySQL et/ou PostgreSQL pour entrer la trace des orbites (polygones) et faire des requêtes de colocalisation OGSA-DAI pour restreindre l’accès, gLite remplaçant naturel ?

Tutorial Clermont Ferrand – 23 mars EGEE France Marseille 24 Mars CONCLUSIONS Bilan  Une variété de travaux portés sur EGEE ; incitatif pour de nouveaux utilisateurs  Taux de succès très bon (90-100%) Perspectives  Renforcer les communautés autour des applications  Séminaires de sensibilisation et des utilisateurs de Géocluster en France Besoins  Accès sécurisé et restreint aux données et métadonnées  Accès filtré pour logiciels sous licence ; comptabilité utilisateurs  Forte priorité pour beaucoup de cpus pendant un temps relativement court: Application sur alerte (tremblement de terre, cyclone, tempête, crue….), la planification dépend du risque naturel