Attente de cette réunion : redéfinir stratégie commune calendrier rappel demande IPSL février 2014 comparatif CMIP5/CMIP6, ressources et développements.

Slides:



Advertisements
Présentations similaires
Challenge de Picardie LIGUE DE PICARDIE DE RUGBY Challenge de Picardie ETR Picardie.
Advertisements

Le Cadre de Dépenses à Moyen Terme
Session dorientation pour les membres du Comité Propositions dinscription.
1 CONSEIL de la VIE LOCALE de Montferrand Maison pour Tous - Etat des Lieux Mercredi 14 mars 2012.
MIAGE MASTER 1 Cours de gestion de projet
Les Systèmes Multi-Agents pour la Gestion de Production
Aide à la décision et à la négociation dans un problème de gestion de production distribuée Jean-Pierre Camalot et Patrick Esquirol LAAS-CNRS 7, avenue.
Recherche d’un thème de projet Identification d’un besoin
Ressources calcul 2014 Demandes d'heures DARI et PRACE 2 septembre 2013 Marie-Alice Foujols
Projet TEMPUS-ISTMAG Projet de création d’archives institutionnelles
Comité national de suivi
Chaîne de calcul IPSL - niveau 2 avril Plan Présentation du pôle de modélisation Présentation du modèle IPSL-CM5 Rappel du fonctionnement de la.
Chaîne de calcul IPSL - niveau 2 avril 2013
J-L Dufresne Responsable du pôle de modélisation Pôle de modélisation de l'IPSL: travaux en cours en vue de la préparation du prochain rapport du GIEC.
HPC et sciences du climat
Réforme de la recherche à l’INP Grenoble
(travaux sur le volet économique)
Mise en oeuvre et exploitation
Plateforme de modélisation de l'IPSL : présentation et point sur la réalisation des simulations CMIP5 Foujols 1, M-A - Dufresne 2, J-L - Denvil 1, S. –
Ressources calcul septembre 2014
Stratégie d’entreprise - Alstom Transport – Marco Férrogalini
Préambule Le présent document a pour objectif d'aider et d'aiguiller tous les porteurs de projets dans la réalisation et la conception d'une présentation.
FORÇAGE DU MODÈLE COUPLÉ DE L'IPSL AVEC L'OZONE DE LMDz-REPROBUS POUR LES SIMULATIONS CMIP5 ¹ Slimane Bekki, ¹ David Cugnet, ² Lionel Guez, ² François.
Avancement des équipes de rédaction INSPIRE CNIG - Groupe de liaison INSPIRE 8 septembre 2009 Marie-Louise ZAMBON - IGN.
EGEE is a project funded by the European Union under contract IST Noeud de Grille au CPPM.
Modélisation du climat à l’IPSL: existant, objectifs et enjeux à 4 ans
1 Directive sur les services mobiles réguliers Rapport d’étape Présentation au Comité d’orientation en matière de santé et sécurité 9 septembre 2009.
Quelques recommandations pour la présentation Vraie Vie : - Mettez en avant systématiquement votre expérience concrète : difficultés, leçons apprises lors.
Pôle de modélisation de l'IPSL: simulations en vue de la préparation du prochain rapport du GIEC.
Préambule PRESENTATION F R1.03-V1
Les exigences Pour un établissement :
Résumé CHEP 2010 Distributed processing and analysis Grid and cloud middleware Thèmes : 1.
Big Data.
Collecte, Filtrage d’information
Direction Départementale des Territoires et de la Mer de Gironde Tarification et ZRE 15 mars 2010.
Réunion Toulouse Data Node GIEC/IPCC - Prodiguer Lundi 23 novembre Sébastien Denvil Pôle de Modélisation, IPSL PRODIGUER un nœud de distribution.
Environnement des modèles Contraintes liées au parallélisme Utilisation de plusieurs machines Liens couplé/forcé.
Présentation rapide de l’état des outils IPSL Marie-Alice Foujols Octobre 2005.
Réunion calcul simulations GIEC/IPCC - Prodiguer Lundi 23 Mars PRODIGUER un noeud français de distribution des données GIEC/IPCC Sébastien Denvil.
Contribution de l’IPSL au projet CMIP5
Vendre les solutions en PME PMI GV05 Négociation.
19 janvier 2006J-P Meyer1 Revue du projet GRIF  Les enjeux scientifiques (J-P Meyer)  Le calcul au LHC  Les Projet EGEE et LCG  Le projet GRIF  La.
Configuration LOOP Retour d’expériences P. CADULE, L. BOPP, P. FRIEDLINGSTEIN.
Point sur l'utilisation des moyens de calcul à court terme et stratégie à moyen terme Marie-Alice Foujols Pôle de modélisation du climat IPSL.
Ressources calcul 2008 GENCI PRACE IDRIS : brodie NEC SX-8 - vargas IBM Power6 CCRT : mercure NEC SX-8R - GIEC NEC SX-9 platine Bull Itanium / Nehalem.
Comité d'Orientation du GISClimat - Prodiguer Mardi 18 Novembre PRODIGUER un noeud français de distribution de données GIEC/IPCC Sébastien Denvil.
Réseau de simplification Première rencontre 12 novembre 2002.
GRANDS RESEAUX DE RECHERCHE DE HAUTE- NORMANDIE REUNION DES COORDONNATEURS 26 Septembre 2008 DRRT-Région.
Travaux Parlementaires Guide d’utilisation 28/07/
L’enseignement de l’Analyse Fonctionnelle et Structurelle S 5 en S. T
Module 3- L'évaluation, un outil de progrès. 2 Pourquoi évaluer? n Une nécessité pour un expert, une équipe, une organisation qui veut apprendre à partir.
Rallyes mathématiques GS & CP
Climserv à Polytechnique (X) CICLAD à l’UPMC
L’entreprise et sa gestion
Exemple de déploiement ERP projet x Réunion de Lancement
Les machines et espaces disques du CINES en une figure occigen calcul $HOMEDIR $STOREDIR $SCRATCHDIR HPSS : Bandes robotisées occigen frontale Machines.
19 mai 2015 Le projet de la D éclaration S ociale N ominative de Pôle emploi (employeur) Josepha Costa – Directeur Gestion Administrative du Personnel.
Point d’information RNT - 3 juin Sommaire 1. Rappel : calendrier 2. Re-démarrage de la maintenance de l’application 3. Travaux en cours : premières.
Roadmap opérations Revue fin 2013 Planification 2014 Visio opérations – décembre 2013.
Bilan 2012, perspectives 2013 Conseil de Groupement – 21/2/2013 V. Breton La grandeur des actions humaines se mesure à l’inspiration qui les fait naître.
BABAR Georges Vasseur CEA Saclay, DSM/IRFU/SPP Workshop sur l’analyse des données au centre de calcul de Lyon 17 avril 2008.
Mise en place de la première ressource de substitution structurante à l'échelle de la Gironde Projet « Champ Captant des Landes du Médoc » Commission Locale.
Mésocentre ESPRI IPSL Importance des données pour la recherche à l’IPSL – Campagnes de mesure terrain – Observations satellites – Simulations Services.
C. Charlot, LLR Ecole Polytechnique DC04 CMS Objectif numéro 1: préparation du traitement offline Différent des productions MC précédentes Mise en route.
Projet LCG: Vue d’Ensemble Fabio Hernandez Responsable Technique LCG-France Centre de Calcul de l’IN2P3 Rencontre IN2P3/STIC Grenoble, 25.
Fabio Hernandez Lyon, 9 novembre 2006 LCG-France Tier-1 Réunion de Coordination.
Resource allocation: what can we learn from HPC? 20 janvier 2011 Vincent Breton Crédit: Catherine Le Louarn.
Les machines et espaces disques du TGCC en une figure
Transcription de la présentation:

Attente de cette réunion : redéfinir stratégie commune calendrier rappel demande IPSL février 2014 comparatif CMIP5/CMIP6, ressources et développements loi de Moore détails sur calendrier CMIP6 rappel besoins IPSL revus en oct 2014 après WGCM et maintenant? 20 janvier

A noter : ClimERI : proposition faite pour être proposé en ESFRI. Soutenue par Allenvi, en cours d'examen au niveau Ministère, S Joussaume infrastructure CMIP pour toutes les équipes européennes Lettre INSU janvier 2015 Mars 2015 : formalisation engagement IPSL dans CMIP6 Juin 2015 : version figée du modèle IPSLCM6-LR Automne 2015 : réalisation à blanc d’un noyau de simulations CMIP6, évaluation et validation du modèle Décembre 2015 : configurations figées en fonction de la disponibilité des ressources calcul et stockage : réalisation des simulations Calendrier 2

En discussion au niveau international Calendrier: début 2016-mi 2018 (plus étalé dans le temps que CMIP5) Organisation différente de CMIP5 mais chiffrage sur un nombre d'années simulées comparable Distribution et structure des fichiers similaires (ESGF, net-cdf) Nombre de variables comparable Autres activités = autant que CMIP pour le calcul Les grandes lignes de CMIP6 réunion GENCI/CEA/CNRS/IPSL confidentiel11/02/20143

CMIP6: Calendrier CMIP6 : début 2016-mi 2018 Calcul ( coeurs/400 coeurs): x30 env. Volume stockage (25 Po/2): x12 env. Nombre de fichiers : (5 Mi)idem (mais accumulation) Débit d'écriture (25 Po/2ans) : x12 env. ie 50 To/jour Données à distribuer (/250 To):x10 env. Espace tampon de brassage des données post-simulations-> CMOR Pilotage revu de certaines variables HF -> Réduction volumétrie totale (< x12) Attention : réflexion en cours, facteur 2 En résumé réunion GENCI/CEA/CNRS/IPSL confidentiel11/02/20144

SX9 Coupled Model Intercomparison Project – CMIP5 International communities under strong pressure CMIP5/AR5 cycle Model version set-up Model runs & data archiving Data archive ESGF IPCC AR5 31/07/12 Paper subm 15/03/13 Paper accept 03/11 09/13 AR5 WGI concept 2007 & definition CMIP5 Simulations Data Need very strong argumentation to change things here ! Arrivée NEC-SX9CCCSTORE Arrêt DMF DMF r only GENCI/centres libIGCM v2.0 : ada v2.0_beta : pack v1.6 curie

Coupled Model Intercomparison Project – CMIP6 International communities under strong pressure CMIP6/AR6 cycle + 6 ans Ressources dédiées ? Model version set-up Model runs & data archiving Data archive ESGF IPCC AR6 31/07/18 Paper subm 15/03/19 Paper accept 03/17 concept 2013 & definition CMIP6 Simulations Data Need very strong argumentation to change things here ! 09/19 AR6 WGI Curie2 ? libIGCM Développements GENCI/centres

TOP 500 top500Somme#1#500 11/ Tflops7,2 Tflops94,3 Gflops 11/20077 Pflops478,2 Tflops5,9 Tflops 11/ Pflops34 Pflops118 Tflops Moore : *16*35 *51*70 *66*20 *60 Loi de Moore : doublement tous les 18 mois 6 ans : * cœurs curie 15% curie >100 Tflops 6 ans

Calendrier : forçages et premières expériences DECK

Estimation besoins IPSL pour CMIP6

TGCCIDRISCINESHLRS (G) curie_nfcurie_nladaturingoccigenhermit GENCI9 millions h5 millions h3 millions PRACE13 millions11 millions Grand challenge 10 millions CMIP6 1er semestre millions Allocations tous projets IPSL en 2015

Déconnexion calcul/stockage Heures de calcul : besoin d’assurer le calcul Curie nœuds fins mais aussi Ada et Turing Anticiper les évolutions : curie2 Stockage : plus de latitude Stockage pour études IPSL, pour distribution internationale Revisiter le calendrier d’achat et de déploiement, adéquation aux besoins, espaces tampons, débit Anticiper évolutions : nouveaux espaces? Travail supplémentaire pour pilotage fin des sorties et compression de données : aide ingénieur Suivre les recommandations du WIP : WGCM Infrastructure Panel Et maintenant? réunion GENCI/CEA/CNRS/IPSL confidentiel11/02/201411

Sujets variés : Batch : Priorités entre chaines de calcul Alerte : XIOS en mode 1 fichier et compression incompatibles Sorties : ajout de la compression dans la chaine de calcul ou de traitement Post-traitement : nombre de jobs, performance nœuds larges, parallélisme des post-traitements, nouvelles métriques, … Supervision : environnement plus fragile, soumission Distribution des données : ESGF-France Recommandations WIP : les supporter Développements libIGCM : anticiper, en phase avec les évolutions Besoin de travailler ensemble réunion GENCI/CEA/CNRS/IPSL confidentiel11/02/201412

Réserves

Simulations Très Haute Résolution (en particulier avec nouveau coeur dynamique) Autres : Simulations régionales (CORDEX) Objectifs plus ambitieux réunion GENCI/CEA/CNRS/IPSL confidentiel11/02/201415

Article LMDZ ° 10 Résolutions Nombre de coeurs Temps réel calcul

Eléments chiffrés Deck CMIP6 RésolutionNb cœurs /simulation Nb cœurs maximum Nb heuresDurée (en jours) Stockage (en To) Débit (Go/jour/c œur) CM5A-LR CM6-LR CM6-MR piControl 500 ans AMIP ensemble de 10*31 ans +1%CO2/an140 ans abrupt4xCO2250 ans historical+RCP Total : ans

Nombre d’années de simulation par configuration

mois simulés réglage État initial Chimie-aérosls CMIP5 Arrivée SX9 Date limite Publications AR5 Changement stockage TGCC Publication sur ESG Début production Déroulement des simulations CMIP5 ( )

Pour 1 millions d’heures de calcul IPSLCM5A-LR, sorties niveau historical, produit 900 To de fichiers (Analyse et Output) Pour 1 millions d’heures de calcul IPSLCM6-LR, sorties niveau historical, produit 270 To de fichiers (Analyse et Output) Rapport 3

pack_debug RebuildFrequency PackFrequency SeasonalFrequency TimeSeriesFrequency Computing job Post-processing jobs PackFrequency PeriodLength, PeriodNb CMOR

compilation calcul rebuild pack_debug pack_restart pack_output create_se create_ts atlasmonitoringCMOR Serveurs IPSL WORKDIR SCRATCHDIR/IGCM_OUT REBUILD STOREDIR/Output RESTART DEBUG STOREDIR/Analyse/SE TS_MO … WORKDIR/MONIT ATLAS WORKDIR/cmip5 STOREDIR dods/store dods/work esgf SCRATCHDIR/RUN_DIR SCRATCHDIR/Out (scripts) BUFFER

Compilation, pilotage Calcul Pack Création fichiers temporels Monitoring CMOR Production Figures, suivi dods/work Pilotage, sources Sorties primaires Sorties secondairesdods/store Tampon Sorties distribuées esgf Chaîne de calcul IPSL : étapes de calcul et espaces fichiers

Prestation