Projet LCG: Déploiement Pierre Girard EGEE/LCG ROC EGEE/LCG site deployment Centre de Calcul de l’IN2P3 LCG France Lyon, 14 décembre.

Slides:



Advertisements
Présentations similaires
LCG DATAGRID - France 8 Juillet 2002 LCG : LHC Grid computing - qui, quoi, quand, comment ? Quoi ? But : préparer l'infrastructure informatique des 4 expériences.
Advertisements

User Support Sophie Nicoud DataGrid France – CPPM 22/09/02.
DataGrid Revue Résumé de la seconde revue européenne du projet Datagrid.
Nadia LAJILI STATUS REPORT WP6 Workshop Oxford Lyon,le 19 Juillet 2001.
…. Service 1Service 2Service NService 3 …… North Central USA South Central USA Irlande Pays-Bas Hong Kong Singapour Contrat de service entreprise,
Plateforme de Calcul pour les Sciences du Vivant Le Système dInformation de gLite.
EGEE-II INFSO-RI Enabling Grids for E-sciencE EGEE and gLite are registered trademarks VO Fusion Pierrick Micout, CEA - DAPNIA.
EGEE-II INFSO-RI Enabling Grids for E-sciencE EGEE and gLite are registered trademarks Le monitoring réseau dans EGEE Guillaume.
EGEE-II INFSO-RI Enabling Grids for E-sciencE EGEE and gLite are registered trademarks La région France et les sites de calcul EGEE.
Services de production grille en France Gilles Mathieu IN2P3-CC France Grilles Frédérique Chollet IN2P3-LAPP LCG France Rencontres France Grilles et LCG-France,
EGEE-II INFSO-RI Enabling Grids for E-sciencE EGEE and gLite are registered trademarks Les sites de calcul EGEE en France David.
Alice LCG Task Force Meeting 16 Oct 2008Alice LCG Task Force Meeting 16 Oct 2008 BARBET Jean-Michel - 1/20BARBET Jean-Michel - 1/20 LCGFR Marseille Juin.
L’instance nationale de DIRAC Gilles Mathieu Workshop opérations 10 mai - Lille Lille – Mai 2012.
EGEE is a project funded by the European Union under contract IST Noeud de Grille au CPPM.
Rôle des CI dans la démarche qualité
Accounting régional. Status actuel Base de données node56 : – 22GiB de données – 16 sites – 3.7TiB disponibles… Tous sites sur la base de données node56.
Nouveau modèle d’opérations Gilles Mathieu – 10 mai 2011.
LCG-France: Tier-1 au CC-IN2P3 Bilan 2005 et perspectives 2006 Fabio Hernandez Responsable Technique LCG-France Centre de Calcul de l’IN2P3
Résumé CHEP 2010 Distributed processing and analysis Grid and cloud middleware Thèmes : 1.
EGEE-II INFSO-RI Enabling Grids for E-sciencE EGEE and gLite are registered trademarks Contact Sécurité du ROC français R. Rumler.
Déploiement LCG-2 Etat actuel au CC-IN2P3 Fabio Hernandez Centre de Calcul de l’IN2P3 Lyon, 22 juillet 2004.
Quattor : Opérations Courantes - G. Philippon/M. Jouvin4-5/2/2009Quattor : Opérations Courantes - G. Philippon Opérations courantes.
Le noeud de grille Tier 3 LAPP.
EGEE-II INFSO-RI Enabling Grids for E-sciencE EGEE and gLite are registered trademarks Transition vers EGEE-III (et EGI?) Pierre.
Compte rendu Journée JOSY
EGEE-II INFSO-RI Enabling Grids for E-sciencE EGEE and gLite are registered trademarks Rapport du ROC France Pierre Girard French.
Lcg-fr workshop: 14/12/2005 Thomas Kachelhoffer - CC1 Réflexion en cours sur le support. Objectif de la présentation: lancer une réflexion sur l’organisation.
Transition EGEE SA1 FR vers Opérations France Grille
Installation UI EGEODE Équipe GRID1 Installation UI EGEODE.
EGEE-II INFSO-RI Enabling Grids for E-sciencE EGEE and gLite are registered trademarks OSCT / OSCT-DC R. Rumler Lyon/Villeurbanne.
DataGrid, LCG, EGEE au CC Rolf Rumler Coordinateur EGEE au CC
Palaiseau Réunion CCIN2P3/LCG 22/07/2004 Distribution des données CMS Distribution des données et préparation de l’analyse Production MC distribuée et.
EGEE-II INFSO-RI Enabling Grids for E-sciencE EGEE and gLite are registered trademarks L’OAG R. Rumler, CC-IN2P3 (CNRS) EGEE’07,
LHCb DC06 status report (LHCb Week, 13/09/06) concernant le CC : –Site currently fine / stable 3% of simulatated events 30% of reconstructed events –Site.
EGEODE 08/11/2006 Équipe GRID1 EGEODE EGEODE. 08/11/2006 Équipe GRID2 Plan  La géophysique sur la Grille : EGEODE  Partenariat académique  Comment.
Enabling Grids for E-sciencE EGEE-III INFSO-RI Sécurité sur la Grille G. Philippon (LAL – CNRS ) Tutorial EGEE Utilisateur (DAKAR)
GRIF Status Michel Jouvin LAL/Orsay
INFSO-RI Enabling Grids for E-sciencE NA4 test Eric Fede on behalf of the team.
Monitoring: état et perspectives Cette présentation fera le point sur le travail effectué au sein du groupe de travail, créé au sein de LCG-France et EGEE.
EGEE-II INFSO-RI Enabling Grids for E-sciencE EGEE and gLite are registered trademarks Session “Site Administrator” Pierre Girard.
Cécile Barbier David Bouvet Christine Leroy L'exploitation de la grille au quotidien.
Catalogues de fichiers de données. David Bouvet2 Problématique Possibilité de répliquer les fichiers sur divers SE  nécessité d’un catalogue de fichiers.
Opérations France-Grilles : Etat des lieux Hélène Cordier/Gilles Mathieu LCG France, 30 Mai 2011.
Projet LCG: Infrastructure opérationnelle Pierre Girard EGEE/LCG ROC deputy EGEE/LCG RC coordinator Centre de Calcul de l’IN2P3
Retour d'expérience sur le déploiement d'un site grille de production Pierre Girard EGEE/LCG ROC Deputy EGEE/LCG RC coordinator Centre de Calcul de l’IN2P3.
Réunion EGEE France 11/6/2004Page 1Rolf Rumler Structure de l’exploitation d’EGEE.
Grid au LAL Michel Jouvin LAL / IN2P3
C. Charlot, LLR Ecole Polytechnique DC04 CMS Objectif numéro 1: préparation du traitement offline Différent des productions MC précédentes Mise en route.
EGEE is a project funded by the European Union under contract IST Initiation à l’infrastructure Tutorial Grille (LCG/EGEE)
Projet LCG: Vue d’Ensemble Fabio Hernandez Responsable Technique LCG-France Centre de Calcul de l’IN2P3 Rencontre IN2P3/STIC Grenoble, 25.
EGEE is a project funded by the European Union under contract INFSO-RI Copyright (c) Members of the EGEE Collaboration Infrastructure Overview.
Groupe de travail Monitoring LCG-France / SA1-FR Christine Leroy Pierre Girard Fabio Hernandez Frédérique Chollet.
Fabio Hernandez Lyon, 9 novembre 2006 LCG-France Tier-1 Réunion de Coordination.
Tutorial ATLAS France, CCIN2P3, 05/02/2007 INFSO-RI Enabling Grids for E-sciencE Introduction à la grille LCG/EGEE Pierre Girard.
Réunion des sites LCG France- Marseille juin ACTIVITES DU GROUPE ACCOUNTING FRANCE GRILLES Cécile Barbier (LAPP)
EGEE-II INFSO-RI Enabling Grids for E-sciencE EGEE and gLite are registered trademarks La région France dans la grille EGEE David.
Mardi 30 mars 2010 Les Outils d'Exploitation et de Surveillance Cyril L’Orphelin, Atelier technique France Grilles, 31 Mai 2010 IN2P3/CNRS Computing Centre,
Tier 2 au LAPP. Plan Historique Objectifs Infrastructures Status/métriques Avenir Conclusion.
EGEE induction course, 22/03/2005 INFSO-RI Enabling Grids for E-sciencE Infrastructure Overview Pierre Girard French ROC deputy.
Session: Intégration de nouveaux sites Le point de vue du ROC Pierre Girard French EGEE ROC deputy CC-IN2P3 grid site administrator.
Tutorial “Administrateur de site EGEE”, CCIN2P3, 24/10/2007 INFSO-RI Enabling Grids for E-sciencE Introduction à la grille LCG/EGEE.
TÂCHES D’ADMINISTRATION DE LA NAGIOSBOX BIOMED LE 24 Mai 2011, Christine Leroy,
Stratégie technique G. Mathieu – V. Breton. Stratégie vers les fournisseurs de services et de ressources France Grilles2 Jouer le rôle central dans le.
EGEE-II INFSO-RI Enabling Grids for E-sciencE EGEE and gLite are registered trademarks Monitoring dans EGEE Frederic Schaer ( Judit.
EGEE France, Marseille, 24 mars 2005 INFSO-RI Enabling Grids for E-sciencE Activité SA1 Regional Operations Centre Pierre Girard.
1DSM - IRFU / PM Compte rendu du site GRIF.
08/02/2007 Site Grille : Ambitions 2007 Pierre Girard LCG-France Tier
EGEE-II INFSO-RI Enabling Grids for E-sciencE EGEE and gLite are registered trademarks Session “Site Administrator” Pierre Girard.
Infrastructure Opérationnelle d’EGEE
Infrastructure Opérationnelle d’EGEE2
Transcription de la présentation:

Projet LCG: Déploiement Pierre Girard EGEE/LCG ROC EGEE/LCG site deployment Centre de Calcul de l’IN2P3 LCG France Lyon, 14 décembre 2005

P.Girard 2 Table des Matières Objectifs Contexte Déploiement LCG France Conclusions Liens utiles

P.Girard 3 Objectifs Déploiement de production Le rythme est donné Au niveau des sites français

P.Girard 4 Objectifs Déploiement de production  Installation et mise-à-jour du middleware  Optimiser la disponibilité des ressources  Garantir la stabilité et la continuité des services  Gestion des risques  Configuration adaptée à chaque expérience  Concertation entre VOs et Sites pour optimiser l’utilisation des ressources  Identifier les services à faire tourner  Adaptation à l’infrastructure de production de chaque site

P.Girard 5 Objectifs Le rythme est donné 2006: tout le monde entre dans la danse Vous êtes ICI

P.Girard 6 Objectifs Au niveau des sites français Maîtrise experte du middleware  Sur la version courante, et autant que possible sur la (ou les) prochaine(s) version(s)  Comprendre son fonctionnement pour ne pas le subir Maîtrise des interventions sur les sites  Définition de procédures pour  des interventions « sans (trop de) douleurs »  la sécurité, les « backup », etc.  Retour à la production dans un état stable et fonctionnel Identification des sources d’information et des interlocuteurs  Pour la configuration des VOs  Pour le middleware  Pour les plannings et la coordination

P.Girard 7 Contexte Projets LCG/EGEE Cycle de vie du Middleware Rôles d’un ROC Outils d’aide au déploiement Outils d’aide à la configuration

P.Girard 8 Contexte Projets LCG/EGEE LCG: modèle de calculEGEE: modèle d’exploitation RAL/UK CNAF/IT PIC/SP CCIN2P3/FR FNAL/US T0 T1s Cambridge Rome Nikhef GRIF Krakow T2s IN2P3-SUBATECH IN2P3-LPC T3s IN2P3-CPPM IN2P3-LAPP UK/CCLRC IT/INFN SWE/IFAE FR/IN2P3 SEE/GRNET ROCs Cambridge Rome Nikhef GRIF Krakow RCs IN2P3-SUBATECH IN2P3-LPC IN2P3-CPPM IN2P3-LAPP OCC … … … CGG-LCG2 IPSL-IPGP-LCG2 … IN2P3-CC CEA-DAPNIA-SACLAY 170 sites Le même middleware Les mêmes sites La même infrastructure de grille Définit une utilisation Définit le fonctionnemen t Ne pas dupliquer les structures Réutiliser et adapter aux besoins de LCG

P.Girard 9 Contexte Cycle de vie du Middleware EGEE-II : Décomposition du M/W en 2 couches  Foundation Grid Middleware  Application independent  Security model and infrastructure, Computing (CE) & Storage Elements (SE), Accounting, Information providers and monitoring  Higher-Level Grid Services  Specific solutions for supported applications  Workload Management, Replica Management, Visualization, Workflows, Grid economies, etc. ProductionPre-production Testing/ Integration Support/ Development Other sw providers SA1SA3 JRA1 componentsreleases components high-level services components feedback, bugs, fixes Bob Jones - EGEE 4th conference - Pisa

P.Girard 10 Contexte Rôles d’un ROC Intermédiaire entre les sites et le projet  Représente officiellement les sites de sa fédération auprès du projet.  Coordonne, assiste et suit les sites dans leur déploiement  S’informe continuellement des évolutions du projet, en assurant une forte présence dans les différents événements du projet Certification des sites de sa fédération  Utilise sa propre infrastructure de test (grille régionale) et/ou utilise celle proposée par le projet  Peut sortir un site de production si besoin est (problème de sécurité, dysfonctionnement avéré, etc.)

P.Girard 11 Contexte Outils d’aide au déploiement (1) Test, Monitoring et Metrics GIIS Monitor Site Functional Tests Soumission de SFTs

P.Girard 12 Contexte Outils d’aide au déploiement (2) Analyse d’une intervention et de ses conséquences Arrêt BQS Pb CE au redémarrage Drainage BQS Prévu Imprévu Ajout de mesure préventive : Basculer sur un CE de secours

P.Girard 13 Contexte Outils d’aide à la configuration Gestion des ressources et du workflow  CIC Français  CC-IN2P3   Vue par acteur: User, VO, RC, ROC, CIC  Support des procédures d’exploitation  ex.: CIC On-Duty  Point d’entrée unique  Intégrateur des outils d’exploitation

P.Girard 14 LCG France Etat des lieux Ressources Services Perspectives

P.Girard 15 LCG France Etat des lieux Production  T1: CC (certifié)  3 T2s: GRIF (certifié), LPC (certifié), SUBATECH (en cours)  2 T3s: LAPP (certifié), CPPM (certifié) Pré-production (IN2P3-CC)  VOMS  FTS  CE gLite Le ROC rassemble une communauté d’experts Grid  Anime des formations  Favorise l’entraide et l’échange de procédés entre sites  Ex.: installation du M/W via Quattor ou YAIM, résolution de problèmes Le ROC s’appuie sur les outils fournis par EGEE  Infrastructure de production  Une fois certifiés, les sites sont autonomes

P.Girard 16 Déploiement LCG France Ressources Prévoir l’accroissement des ressources gérées par les Computing et Storage Elements ~Capacité actuelle du CC-IN2P3 ~10 x Capacité actuelle du CC-IN2P3 L’inertie augmente avec la capacité

P.Girard 17 Déploiement LCG France Services Actuellement  ~3 Resource Brokers  1 File Transfer Service  +ieurs LCG File Catalogs (locaux)  +ieurs User Interfaces  3 MyProxy servers  +ieurs MonBox (Accounting)  4 VO Boxes Futur ?  Doit-on prévoir des services dédiés à la communauté française ?

P.Girard 18 Déploiement LCG France Perspectives (1) Infrastructure de test française  Réutilisation et amélioration des SFTs  Frédéric Schaer (CCIN2P3)  D’autres intéressés ?  Testbed « light »  S’isoler de la production  Utilisation de machines virtuelles –TestGrid de Grid-Ireland (140 VMs avec 45 machines) –VMware (LAPP, CC), Xen (CGG) –A venir, test d’échange d’images de VMs entre le LAPP et le CC  D’autres intéressés ? Estimation des sites: 12% des SFTs sont pertinents

P.Girard 19 Déploiement LCG France Perspectives (2) La pré-production n’est pas le monopole du CC  Invitation des autres sites à y participer Concertation avec les VOs  Exemple du CC :  Contacts actifs avec les VOs –David Bouvet: Atlas et Lhcb –Artem Trunov: Alice et Cms  Site Web avec Wiki/Logs : –Utilisation par tous les sites ?  Calendrier « online » mixant les événements des VOs et des sites ?

P.Girard 20 EGEE fournit le cadre du déploiement  + d’une mise-à-jour tous les 2 mois  Transition vers gLite (certains nœuds gLite déjà en production) Le ROC/T1 coordonne le déploiement au niveau français Tous les sites Français sont fonctionnels Il est important que les Sites et VOs fonctionnent de concert Il y a encore … Conclusions

P.Girard 21 Liens utiles EGEE  ROC France :  CIC France :  Projet EGEE : LCG  GOC :  Projet LCG : User Support GGUS : Monitoring GridIce : Monitoring Gstat :

P.Girard 22 Questions