Point sur l'utilisation des moyens de calcul à court terme et stratégie à moyen terme Marie-Alice Foujols Pôle de modélisation du climat IPSL.

Présentation au sujet: "Point sur l'utilisation des moyens de calcul à court terme et stratégie à moyen terme Marie-Alice Foujols Pôle de modélisation du climat IPSL."— Transcription de la présentation:

1 Point sur l'utilisation des moyens de calcul à court terme et stratégie à moyen terme Marie-Alice Foujols Pôle de modélisation du climat IPSL

2 Parallélisme Parallélisation MPI pour LMDZ/Orchidee – OpenMP sur la verticale : à incorporer dans la référence du couplé Parallélisation MPI possible pour NEMO Machines cibles : – Vectoriel et parallélisme modéré o(10), MPI : Mercure (NEC SX-8R et SX-9), Brodie (NEC SX-8) – Scalaire SMP parallélisme massif o(100) : Platine/Titane (BULL), vargas (IBM), performances améliorées mixte MPI/OpenMP Extrait du cours sur le modèle couplé version novembre 2009

3 Performances pour 10 ans – octobre 2009 96x95x39 – ORCA2Nb cpusTemps réelTemps CPU à demander Bull platine20 cpus50 h1 000 h NEC SX-8 brodie4 cpus40 h160 h IBM vargas32 cpus50 h1 600 h 144x142x39-ORCA2Nb cpusTemps réelTemps CPU à demander Bull platine48 cpus90 h4 300 h NEC SX-8 brodie8 cpus55 h400 h IBM vargas32 cpus100 h3 200 h

4 Performances pour 10 ans – janvier 2010 96x95x39 – ORCA2Nb cpusTemps réelTemps CPU à demander NEC SX-8 brodie4 cpus40 h160 h NEC SX-94 cpus13 h52 h Modifications récentes du modèle : Mise à jour aérosols et ozone troposphérique Ajout ozone stratosphérique Optimisations NEC, efficaces sur SX9 et … SX8

5 Parallélisme O(10-100) 3 exécutables parallèles, MPI Modèle couplé OK : – NEC SX : mercure, brodie – IBM vargas (depuis été 2009) – Bull platine (depuis 2008) Expériences internationales, plus hautes résolutions : – MareNostrum (A. Caubel, 3 mois en 2009, HPC-Europa) Cohabitation OpenMP/MPI non gérée par l’OS – ES/ES2 - Yokohama en décembre 2009 : – Expérience sur le ES : 186 procs sur ES (6 oasis, 57 orca025 et 120 echam T319 (1/3°)) – Expérience sur le ES2 : 32 procs max et … trop d’attente sur ES2 Les composantes seules : – NEMO : bench PRACE, grand challenge CINES – LMDZ : OpenMP/MPI sur Bull titane IBM babel : trop peu de mémoire par processeur pour LMDZ

6 NEMO : 752x502x31

7 NEMO ORCA12 : 4322x3059x50 Découpage avec suppression des continents : 90x14=1000 27x38=800

8 LMDZ sur titane Mixte OpenMP/MPI 96x95x39 avec/sans aérosols Nb cpusTemps réelTemps CPU à demander 6 aérosols Temps réel CPU 849 h392 h 1625 h400 h33 h523 h 3215 h467 h18 h576 h 648 h537 h 1285 h691 h6 h832 h 2564 h1 075 h

9 LMDZ sur titane Mixte OpenMP/MPI 96x95x39 et 144x142x39 sans aérosols Nb cpus96x95x39 Temps réel Temps CPU à demander 144x142x39 Temps réel CPU 849 h392 h 1625 h400 h70 h1 130 h 3215 h467 h38 h1 209 h 648 h537 h22 h1 395 h 1285 h691 hhh 2564 h1 075 h

10 Parallélisme O(1000-10000) On y travaille … aussi OK avec simulations courtes et (très) haute résolution, composantes seules Besoin de travail pour simulations plus longues, en couplé et résolutions ad hoc : – nouvelle dynamique, nouveau maillage : sans filtre et points singuliers, – IO déportées (IO server), – coupleur oasis(4), … Attention aux spécificités des machines : besoin d’anticiper Voir demande CEA + CNRS Coopération internationale : Isenes Support Oasis3 et 4 en octobre 2009 Coopérations sur les IO

11 Les autres groupes internationaux Toutes les équipes sont concentrées sur CMIP5 Toutes les équipes ont renouvelé récemment leurs calculateurs : – MetOffice, UK : IBM, 125 Tflops, 1Pflops en 2011 – DKRZ, D : IBM, 158 Tflops – CMCC, I : IBM, 1000 procs, 18 Tflops, NEC SX9, 112 procs, 11 Tflops Enjeux sur les données : – description des modèles et des résultats : questionnaire Metafor, CIM, … – diffusion des données : multisites, ESG, Prodiguer : – Distribution depuis centres producteurs : CCRT et IDRIS, … – Distribution depuis IPSL, Météo-France, Cerfacs

12