Prospective nationale sur les grilles de production Groupe Thématique Sciences de l’Ingénieur et Informatique Cécile Germain-Renaud LRI – CNRS et Université.

Présentation au sujet: "Prospective nationale sur les grilles de production Groupe Thématique Sciences de l’Ingénieur et Informatique Cécile Germain-Renaud LRI – CNRS et Université."— Transcription de la présentation:

1 Prospective nationale sur les grilles de production Groupe Thématique Sciences de l’Ingénieur et Informatique Cécile Germain-Renaud LRI – CNRS et Université Paris-Sud 11

2 Exercice National Prospective - GT S2I2 6-7 Octobre 2008 Sommaire Le groupe thématique Les communautés et les grilles aujourd’hui Les besoins Grilles de production et recherche sur les grilles Conclusions

3 Exercice National Prospective - GT S2I3 6-7 Octobre 2008 Le domaine Nano-sciences et nanotechnologies, sciences des matériaux, mécanique des matériaux et des structures, automatique et traitement du signal, electromagnétisme et ondes, informatique utilisateur  Simulation comme troisième pilier de la recherche scientifique, avec la théorie et l’expérience Recherche informatique

4 Exercice National Prospective - GT S2I4 6-7 Octobre 2008 Le groupe de travail Philippe d’AnfrayCEA Véronique Donzeau-GougeDépartement ST2I Cécile Germain-RenaudLRI Gaetan HainsDirecteur LACL Michel RiveillDirecteur GDR ASR Alain DeniseDirecteur GDR BioInformatique Moléculaire Michel Beaudoin-LafonDirecteur LRI Xavier Pennec INRIA-Sophia Epidaure (projet health e-child) Frederic DesprezDirecteur LIP Johan MontagnatI3S Olivier RichardLIG Eric WalterRep.GDR MACS (Automatique), Directeur L2S Youssoufi Touré Représentant GDR MACS (Ondes) Christian SaguezEcole Centrale Paris Andre.De LustracIEF Stéphane LantériINRIA-Sophia Georges CailletaudDirecteur Centre des Matériaux Olivier AllixDirecteur LMT Cachan Piotr Breitkopf U. Technologie Compiègne

5 Exercice National Prospective - GT S2I5 6-7 Octobre 2008 Sommaire Le groupe thématique Les communautés et les grilles aujourd’hui Les besoins Grilles de production et recherche sur les grilles Conclusions

6 Exercice National Prospective - GT S2I6 6-7 Octobre 2008 S2I et grilles de production Quelques laboratoires d’informatique fortement impliqués dans des expérimentations sur EGEE Au niveau de projets (ACI, ANR, EU) Souvent dans un contexte pluridisciplinaire, en particulier bio-médical La proximité de sites EGEE est décisive

7 Analyse Globalisée des Données d’Imagerie Radiologique www.aci-agir.org Exercice National Prospective - GT S2I 7 Grid-enabling medical images analysis AlGorille - CRAN LPC CHRU Clermont CREATIS I3S-Rainbow Epidaure/Asclepios Centre Antoine Lacassagne LRI – LAL - LIMSI St Anne Tenon FMP Short Deadline Jobs included in gLite 3.1 ACI Masses de données gPTM3D selected for the first EGEE-II review MOTEUR-Globus Medicus demo awarded at RSNA 2008 Goal: leverage medical imaging algorithms through grids Basic research issues involved – Scheduling: reactive grids, workflows – Data and metadata management – Validation/analysis methods of medical imaging algorithms

8 Grid Workflow Efficient Enactment for Data Intensive Applications GWENDIA ANR-06-MDCA-009 Grid Workflow Enactment for Data Intensive Applications Grid-enabled data-intensive workflows Large scale grids –Coarse grain parallelism Study workflow languages –Workflow representation and languages expressiveness –DAGs and graphs of services Scalable experiments –Large scale applications deployment –Workflow engines scalability Life Sciences applications I3S, CREATIS, INRIA-GRAAL, LPC

9 Author: Haiwu HE ChinaGrid 2008,Dunhuang version:1 9 Enabling Desktop Grids for e- Science (EDGeS)

10 Author: Haiwu HE ChinaGrid 2008,Dunhuang version:1 10 Project Partners

11 Enabling Grids for E-sciencE EGEE-III INFSO-RI-222667 EGEE'08, 23/9/2008, Istanbul, Turkey - E. Floros, C. Loomis 11 Grid Observatory The Grid Observatory is a new scientific activity within EGEE. It aims to integrate the collection of data on the behaviour of the EGEE grid and EGEE users with the development of models and of an ontology for the domain knowledge. EGEE'08, 23/9/2008, Istanbul, Turkey - E. Floros, C. Loomis 11 Results will be relevant for end-users, middleware development and system administration. Involves computer science research and development in both the grid and the machine learning areas specific work within the emerging field of autonomic computing. For more information visit: http://grid-observatory.orghttp://grid-observatory.org For more information visit: http://grid-observatory.orghttp://grid-observatory.org

12 Enabling Grids for E-sciencE EGEE-III INFSO-RI-222667 EGEE'08, 23/9/2008, Istanbul, Turkey - E. Floros, C. Loomis 12 EGEE and the NA4 activity are in close collaboration with The MathWorks™ in an effort to integrate the popular MATLAB® Parallel Computing Toolbox™ with gLite –Trials started July ’08. First round to be completed by October ‘08. –Selected users are currently testing the integration –Operational support provided by 2 production clusters gLite and MATLAB® Integration EGEE'08, 23/9/2008, Istanbul, Turkey - E. Floros, C. Loomis 12 Info and support: https://twiki.cern.ch/twiki/bin/view/EGEE/GLiteAndMATLABToolkitIntegrationhttps://twiki.cern.ch/twiki/bin/view/EGEE/GLiteAndMATLABToolkitIntegration Tutorial to be delivered in SC’08

13 Enabling Grids for E-sciencE EGEE-III INFSO-RI-222667 EGEE'08, 23/9/2008, Istanbul, Turkey - E. Floros, C. Loomis 13 EGEE and the NA4 activity are in close collaboration with The MathWorks™ in an effort to integrate the popular MATLAB® Parallel Computing Toolbox™ with gLite –Trials started July ’08. First round to be completed by October ‘08. –Selected users are currently testing the integration –Operational support provided by 2 production clusters gLite and MATLAB® Integration EGEE'08, 23/9/2008, Istanbul, Turkey - E. Floros, C. Loomis 13 Info and support: https://twiki.cern.ch/twiki/bin/view/EGEE/GLiteAndMATLABToolkitIntegrationhttps://twiki.cern.ch/twiki/bin/view/EGEE/GLiteAndMATLABToolkitIntegration Tutorial to be delivered in SC’08

14 Exercice National Prospective - GT S2I14 6-7 Octobre 2008 Sommaire Le groupe thématique Les communautés et les grilles aujourd’hui Les besoins Grilles de production et recherche sur les grilles Conclusions

15 Exercice National Prospective - GT S2I15 6-7 Octobre 2008 Méthodes Constats  Exposition très inégale  Spécificités des communautés L’enquête  Mai-juillet 2008, 89 réponses, dont 24 de responsables  Un outil de diffusion autant que de collecte d’information Entretiens individuels, contributions, etc.

16 Exercice National Prospective - GT S2I16 6-7 Octobre 2008 Un déficit d’information Le modèle de production est inconnu ou très mal connu des utilisateurs potentiels Confusion grilles de production, grilles de recherche, systèmes parallèles Pensez-vous être suffisamment informé sur les grilles de production et leur apport potentiel à votre recherche ?

17 Exercice National Prospective - GT S2I17 6-7 Octobre 2008 Les besoins Etes vous limité par les ressources informatiques actuellement à votre disposition ?

18 Exercice National Prospective - GT S2I18 6-7 Octobre 2008 Les applications Bio-informatique Optimisation, validation Méthodes Monte- Carlo, recherche aléatoire Pouvez-vous citer une application phare de votre domaine pour laquelle l'accès à une grille de production vous a donné ou vous donnerait un avantage décisif ? Verriez-vous un intérêt à l'utilisation d'une grille de production ?

19 Exercice National Prospective - GT S2I19 6-7 Octobre 2008 Les verrous Forte présence de  Logiciels métier pas toujours robustes  Environnements de calcul commerciaux Rapport spécifique développement /exploitation: cycles de vie courts  Réticences à l’investissement dans une technologie mal connue  L’expertise doit être rapidement partageable Faible impact des communautés S2I dans un environnement dominé par la production  Consommation de ressources modeste  Sous-communautés de petite taille Le prototypage académique doit pouvoir déboucher sur une exploitation industrielle, incluant les logiciels commerciaux

20 Exercice National Prospective - GT S2I20 6-7 Octobre 2008 Sommaire Le groupe thématique Les communautés et les grilles aujourd’hui Les besoins Grilles de production et recherche sur les grilles Conclusions

21 Exercice National Prospective - GT S2I21 6-7 Octobre 2008 Analyse et Propositions Thématique : les grilles comme systèmes complexes  Observer des systèmes réels  Expérimenter et valider des solutions en maîtrisant les conditions expérimentales  Déployer les travaux réalisés sur les grilles de recherche  Alimenter des travaux initialement développés dans une grille de recherche par les caractéristiques d'une grille de production Des objectifs spécifiques  Vers une grille de production autonomique  Mettre en œuvre une procédure de migration de logiciel  Travailler le passage à l’échelle  Disposer de simulateurs réalistes

22 Exercice National Prospective - GT S2I22 6-7 Octobre 2008 Sommaire Le groupe thématique Les communautés et les grilles aujourd’hui Les besoins Grilles de production et recherche sur les grilles Conclusions

23 Exercice National Prospective - GT S2I23 6-7 Octobre 2008 Conclusions Environnements logiciels: prérequis et opportunité  Mutualisation des coûts des logiciels commerciaux  Meilleure diffusion des logiciels développés dans les laboratoires, incitation à la robustification/ergonomie  Support et diffusion de l’action Matlab/gLite Rapport spécifique développement /exploitation  Incitations à l’investissement dans la maîtrise de la technologie  Visibilité de temps et de coûts  Formation et support réactifs et de proximité Revisiter le schéma des Organisations Virtuelles (EGI/NGI)  Réseau d’experts, par extension des structures existantes Travailler la prise en compte par EGEE des spécificités et du rôle des communautés S2I Incitations sur les thématiques d’interaction production-recherche Convergences grilles/cloud et grilles/collaboratif  Veille technologique et recherche

24 Exercice National Prospective - GT S2I24 6-7 Octobre 2008 Les rapports Le rapport complet http://indico.lal.in2p3.fr/getFile.py/access? contribId=20&resId=1&materialId=paper&c onfId=517 La synthèse http://indico.lal.in2p3.fr/getFile.py/access? contribId=20&resId=0&materialId=paper&c onfId=517