GRIF : Site EGEE au Service de la Recherche en IdF

Présentation au sujet: "GRIF : Site EGEE au Service de la Recherche en IdF"— Transcription de la présentation:

1 GRIF : Site EGEE au Service de la Recherche en IdF
Michel Jouvin LAL, Orsay Tutorial Grille, LLR 6 Juin 2008

2 Agenda Objectifs Ressources Organisation Status Conclusions
19/11/20186/6/2008 GRIF, site EGEE au service de la recherche en IdF

3 Les Objectifs… Contexte : la grille EGEE/OSG est la seule ressource des expériences LHC (CERN) T0 : CERN (15% des ressources) T1 : copie/archivage des données brutes, reconstruction 35% des ressources T2 : simulation + analyse 50% des ressources Noeud IdF de la grille EGEE/LCG construit par 5 laboratoires de l’IN2P3 + CEA/IRFU depuis 2005 Besoin de couvrir les 4 expériences LHC 80% des chercheurs français en région IdF, 5 laboratoires HEP Aucun laboratoire assez gros pour faire un T2 2 laboratoires (LAL+IRFU) ayant déjà une expérience de la grille en 2005 Mettre en commun les forces techniques LLR est 1 des membres de GRIF 19/11/20186/6/2008 GRIF, site EGEE au service de la recherche en IdF

4 … Les Objectifs Développement de l’utilisation non HEP
Ouverture aux autres communautés (biomed, esr, …) LAL et DAPNIA ont toujours fournis des ressources significatives à ces communautés Inscrit dans le projet GRIF depuis ses origines : initialement prévu 20% hors LHC. Rejoint par l’APC (IN2P3) en juin 2007 (astro-physique) Partenariat avec l’Institut des Systèmes Complexes Recherches pluri-disciplinaires sur la complexité Gros traitements de données, modélisation, imagerie Doublement de l’objectif CPU initial, financé par l’ISC 19/11/20186/6/2008 GRIF, site EGEE au service de la recherche en IdF

5 Les Ressources… Objectif (initial) de ressources ambitieux pour faire face aux besoin de l’analyse Prévisionnel 2008 : 3000 kSI2K, 700 TB disque Aujourd’hui : 5000 kSI2K, 500 TB disque 1 CE et 1 SE par site GRIF Tous les SEs considérés comme équivalent par chaque CE 1 réseau privé regroupant l’ensemble des sites GRIF Interconnexion 10 Gb/s entre site Fibres noires fournies essentiellement par RENATER 1 lien externe 10 Gb/s avec CCIN2P3 (Lyon) pour le transfert de données Démonstration de transferts réels soutenus à 250 MB/s pour 1 SE Des services d’intérêt général pour EGEE VOMS server : gestion des données d’une VO WMS : soumission de job MyProxy : serveur de renouvellement de proxy 19/11/20186/6/2008 GRIF, site EGEE au service de la recherche en IdF

6 … Ressources 1 UI publique : grid11.lal.in2p3.fr
Accessible à toute personne possédant un certificat grille Donne accès aux ressources de l’ensemble de la grille 1 VO par site GRIF pour les utilisateurs locaux non membre d’autres Vos Chaque VO a accès à l’ensemble des CEs de GRIF Possibilité de créer d’autres VOs pour des besoins spécifiques Accès best effort aux ressources disponibles pour de nombreuses VOs 25+ VOs déjà supportées Ouvert au support de nouvelles VOs 19/11/20186/6/2008 GRIF, site EGEE au service de la recherche en IdF

7 Organisation Objectif : être un site unique et non un regroupement administratif de sites Comité Scientifique : orientations stratégiques 1 représentant scientifique / laboratoire Responsable : J.P. Meyer (IRFU) Comité Technique : 1 des principaux atouts de GRIF 20 personnes représentant 10 FTEs répartis dans les différents sites Communication quotidienne, réunion mensuelle Responsable : Michel Jouvin Un outil d’administration unique pour l’ensemble de GRIF afin de garantir la cohérence du site Une seule base de donnée définissant la configuration Possibilité d’administrer l’ensemble de GRIF depuis n’importe quel site 19/11/20186/6/2008 GRIF, site EGEE au service de la recherche en IdF

8 Utilisation en Croissance
19/11/20186/6/2008 GRIF, site EGEE au service de la recherche en IdF

9 Contribution GRIF par VO
ISC n’utilise pas encore la ressource GRIF… 19/11/20186/6/2008 GRIF, site EGEE au service de la recherche en IdF

10 Contribution GRIF (Atlas)
French contribution to Atlas : ~25% GRIF in Atlas top-10 in Europe in March/April 19/11/20186/6/2008 GRIF, site EGEE au service de la recherche en IdF

11 Contribution GRIF (LHCb)
French contribution to LHCb = ~15% 19/11/20186/6/2008 GRIF, site EGEE au service de la recherche en IdF

12 GRIF Contribution (Biomed)
French contribution to Biomed : ~25% 19/11/20186/6/2008 GRIF, site EGEE au service de la recherche en IdF

13 Projets Connexes Grille Campus de l’Université Paris 11 : fertiliser l’interaction des différentes communautés Production : physique, biologie, informatique Infrastructures de grille : GRIF (LAL, IPNO), XtremWeb Recherche en informatique Méthodes et algorithmes d’interprétation : apprentissage statistique, fouilles de données… Calcul pair à pair, desktop grid Soutenu par le PPF DEMAIN EDGES (FP7) : interaction et interopérabilité entre grilles institutionnelles et desktop grids Implique le LAL et LRI (Université Paris 11) CARRIOCAS : R&D sur les file systems distribués dans un réseau inter-site très haut débit (40 Gb/s) Partenariat avec CEA/DIF (CCRT) et EDF R&D Pole de compétitivité 19/11/20186/6/2008 GRIF, site EGEE au service de la recherche en IdF

14 Conclusions GRIF est une des ressources importantes de EGEE
Contributeur majeur aux besoins des expériences LHC Offre des ressources significatives à des communautés avec de moindre besoin Ouvert au support de nouvelles communautés Les “financeurs” plus prioritaires dans l’accès aux ressources GRIF a démontré la possibilité de construire un site à plusieurs en mutualisant des infrastructures et des moyens humains existants Augmentation de l’expertise grille globale GRIF engagé dans la diffusion de l’utilisation de la grille Un grille multidisciplinaire fonctionne et est la seule possibilité pour l’avenir 19/11/20186/6/2008 GRIF, site EGEE au service de la recherche en IdF