EGEE-II INFSO-RI-031688 Enabling Grids for E-sciencE www.eu-egee.org EGEE and gLite are registered trademarks Monitoring dans EGEE Frederic Schaer ( Judit.

Slides:



Advertisements
Présentations similaires
Intégration du système de production LHCb sur la DataGRID V. Garonne, CPPM, Marseille Réunion DataGRID France, 13 fv fév
Advertisements

1 Grille de calcul et physique des particules Vincent Garonne CPPM, Marseille Novembre 2003 Contenu de la présentation Etat de lart : Grille de calcul.
EGEE-II INFSO-RI Enabling Grids for E-sciencE EGEE and gLite are registered trademarks Le monitoring réseau dans EGEE Guillaume.
EGEE-II INFSO-RI Enabling Grids for E-sciencE EGEE and gLite are registered trademarks La région France et les sites de calcul EGEE.
EGEE-II INFSO-RI Enabling Grids for E-sciencE EGEE and gLite are registered trademarks Les sites de calcul EGEE en France David.
EGEE is a project funded by the European Union under contract IST Noeud de Grille au CPPM.
Projet LCG: Déploiement Pierre Girard EGEE/LCG ROC EGEE/LCG site deployment Centre de Calcul de l’IN2P3 LCG France Lyon, 14 décembre.
Gestion de données : Besoins de la VO Biomed Sorina Pop Laboratoire Creatis Université de Lyon, CREATIS; CNRS UMR5220; Inserm U1044; INSA-Lyon; Université.
Résumé CHEP 2010 Distributed processing and analysis Grid and cloud middleware Thèmes : 1.
EGEE-II INFSO-RI Enabling Grids for E-sciencE EGEE and gLite are registered trademarks Contact Sécurité du ROC français R. Rumler.
EGEE-III INFSO-RI Enabling Grids for E-sciencE EGEE and gLite are registered trademarks SLA, SLD, MoU et Sécurité Rolf Rumler, CC-IN2P3.
Déploiement LCG-2 Etat actuel au CC-IN2P3 Fabio Hernandez Centre de Calcul de l’IN2P3 Lyon, 22 juillet 2004.
Quattor : Opérations Courantes - G. Philippon/M. Jouvin4-5/2/2009Quattor : Opérations Courantes - G. Philippon Opérations courantes.
Le noeud de grille Tier 3 LAPP.
EGEE-II INFSO-RI Enabling Grids for E-sciencE EGEE and gLite are registered trademarks Transition vers EGEE-III (et EGI?) Pierre.
EGEE-II INFSO-RI Enabling Grids for E-sciencE EGEE and gLite are registered trademarks Rapport du ROC France Pierre Girard French.
Transition EGEE SA1 FR vers Opérations France Grille
EGEE-II INFSO-RI Enabling Grids for E-sciencE EGEE and gLite are registered trademarks OSCT / OSCT-DC R. Rumler Lyon/Villeurbanne.
EGEE-II INFSO-RI Enabling Grids for E-sciencE EGEE and gLite are registered trademarks L’OAG R. Rumler, CC-IN2P3 (CNRS) EGEE’07,
Enabling Grids for E-sciencE EGEE-III INFSO-RI La Grille EGEE M. Jouvin (LAL-Orsay) Tutorial EGEE Utilisateur (LLR) 4 Juin 2008.
EGEE-II INFSO-RI Enabling Grids for E-sciencE EGEE and gLite are registered trademarks Data management David Bouvet IN2P3-CC Clermont.
EGEE-II INFSO-RI Enabling Grids for E-sciencE EGEE and gLite are registered trademarks Sécurité sur le GRID Ahmed Beriache (CGG)
EGEE-II INFSO-RI Enabling Grids for E-sciencE EGEE and gLite are registered trademarks Sécurité sur le GRID Ahmed Beriache (CGG)
EGEE-II INFSO-RI Enabling Grids for E-sciencE EGEE and gLite are registered trademarks Soumission de jobs David Bouvet IN2P3-CC.
Enabling Grids for E-sciencE EGEE-III INFSO-RI Sécurité sur la Grille G. Philippon (LAL – CNRS ) Tutorial EGEE Utilisateur (DAKAR)
INFSO-RI Enabling Grids for E-sciencE NA4 test Eric Fede on behalf of the team.
Monitoring: état et perspectives Cette présentation fera le point sur le travail effectué au sein du groupe de travail, créé au sein de LCG-France et EGEE.
EGEE-II INFSO-RI Enabling Grids for E-sciencE EGEE and gLite are registered trademarks Session “Site Administrator” Pierre Girard.
Cécile Barbier David Bouvet Christine Leroy L'exploitation de la grille au quotidien.
Mardi 30 mars 2010 Technologies employées par le portail des opérations Cyril L’Orphelin, Olivier Lequeux, Pierre Veyre IN2P3/CNRS Computing Centre, Lyon,
INFSO-RI Enabling Grids for E-sciencE Support MPI avec Torque/PBS C. Loomis (LAL-Orsay) EGEE-FR Conférence Téléphonique 7 Juin 2005.
Catalogues de fichiers de données. David Bouvet2 Problématique Possibilité de répliquer les fichiers sur divers SE  nécessité d’un catalogue de fichiers.
Mercredi 1er juin 2016 Panorama sur les outils de monitoring Cyril L’Orphelin David Bouvet.
EGEE-II INFSO-RI Enabling Grids for E-sciencE EGEE and gLite are registered trademarks Monitoring de ressources grille à l’échelle.
EGEE-II INFSO-RI Enabling Grids for E-sciencE EGEE and gLite are registered trademarks Data Management René Météry CS Tutorial EGEE.
Projet LCG: Infrastructure opérationnelle Pierre Girard EGEE/LCG ROC deputy EGEE/LCG RC coordinator Centre de Calcul de l’IN2P3
Retour d'expérience sur le déploiement d'un site grille de production Pierre Girard EGEE/LCG ROC Deputy EGEE/LCG RC coordinator Centre de Calcul de l’IN2P3.
INFSO-RI Enabling Grids for E-sciencE Les services d’EGEE Fede Eric Inspirée de la présentation de Frédéric Hemmer JRA1 EGEE 1 st.
Réunion EGEE France 11/6/2004Page 1Rolf Rumler Structure de l’exploitation d’EGEE.
EGEE is a project funded by the European Union under contract IST Initiation à l’infrastructure Tutorial Grille (LCG/EGEE)
EGEE-II INFSO-RI Enabling Grids for E-sciencE EGEE and gLite are registered trademarks Soumission de jobs C. Loomis / M. Jouvin.
INFSO-RI Enabling Grids for E-sciencE Sécurité sur la Grille C. Loomis (LAL-Orsay) Tutorial EGEE Utilisateur (LAL) 8 octobre 2007.
EGEE is a project funded by the European Union under contract INFSO-RI Copyright (c) Members of the EGEE Collaboration Infrastructure Overview.
Tier-2 : GRIF  CEA/IRFU  LAL  LLR  LPNHE  IPNO  APC Suivi des opérations au niveau français: quelle organisation, quels outils Hélène Cordier LCG-FR.
Tutorial ATLAS France, CCIN2P3, 05/02/2007 INFSO-RI Enabling Grids for E-sciencE Introduction à la grille LCG/EGEE Pierre Girard.
Réunion des sites LCG France- Marseille juin ACTIVITES DU GROUPE ACCOUNTING FRANCE GRILLES Cécile Barbier (LAPP)
20-mars-2008Eric Lançon1 Activités ATLAS sur le nuage Français Emprunts a K. Bernardet, C. Biscarat, S. Jezequel, G. Rahal.
EGEE-II INFSO-RI Enabling Grids for E-sciencE EGEE and gLite are registered trademarks La région France dans la grille EGEE David.
Mardi 30 mars 2010 Les Outils d'Exploitation et de Surveillance Cyril L’Orphelin, Atelier technique France Grilles, 31 Mai 2010 IN2P3/CNRS Computing Centre,
Mercredi 22 juin 2016 Suivi des jobs grille Colloque LCG France Mars 2007.
EGEE induction course, 22/03/2005 INFSO-RI Enabling Grids for E-sciencE Infrastructure Overview Pierre Girard French ROC deputy.
Session: Intégration de nouveaux sites Le point de vue du ROC Pierre Girard French EGEE ROC deputy CC-IN2P3 grid site administrator.
Tutorial “Administrateur de site EGEE”, CCIN2P3, 24/10/2007 INFSO-RI Enabling Grids for E-sciencE Introduction à la grille LCG/EGEE.
TÂCHES D’ADMINISTRATION DE LA NAGIOSBOX BIOMED LE 24 Mai 2011, Christine Leroy,
Colloque LCG France14-15 mars SURVEILLANCE ET GESTION D’INCIDENTS Cécile Barbier (LAPP)
Réunion LCG France18-19 mai ACTIVITES DU GROUPE DE TRAVAIL ACCOUNTING LCG-FR / SA1-FR Cécile Barbier (LAPP)
INFSO-RI Enabling Grids for E-sciencE Data management Daniel Jouvenot IN2P3-LAL ORSAY - 02/02/2007.
INFSO-RI Enabling Grids for E-sciencE La gestion des données Daniel Jouvenot LAL-IN2P3-CNRS 18/06/2008.
EGEE France, Marseille, 24 mars 2005 INFSO-RI Enabling Grids for E-sciencE Activité SA1 Regional Operations Centre Pierre Girard.
08/02/2007 Site Grille : Ambitions 2007 Pierre Girard LCG-France Tier
EGEE-II INFSO-RI Enabling Grids for E-sciencE EGEE and gLite are registered trademarks Session “Site Administrator” Pierre Girard.
Site Monitoring -Contexte des sites Grilles EGEE &/|| LCG -Etat des sites Francais -Le groupe de travail LCG-Fr / SA1-FR monitoring et les prochaines actions.
Lundi 11 juillet 2016 Exploitation globale de la grille Hélène Cordier Operations LCG.
EGEE-II INFSO-RI Enabling Grids for E-sciencE EGEE and gLite are registered trademarks Grid Service Monitoring Working Group Exemple.
EGEE-II INFSO-RI Enabling Grids for E-sciencE EGEE and gLite are registered trademarks Opérations : vers un modèle décentralisé...
Le portail des opérations: retour d'expérience
Surveillance des services grille par NAGIOS
Surveillance des services grille par NAGIOS
Infrastructure Opérationnelle d’EGEE
Infrastructure Opérationnelle d’EGEE2
Transcription de la présentation:

EGEE-II INFSO-RI Enabling Grids for E-sciencE EGEE and gLite are registered trademarks Monitoring dans EGEE Frederic Schaer ( Judit Novak, Piotr Nyczyk, Valentin Vidic)

Enabling Grids for E-sciencE EGEE-II INFSO-RI Journées Informatique IN2P3/DAPNIA, Lyon Valpré 2 Etat des lieux Outils disponibles GOC DB SFT SFT Admin Pages SAM GRIDVIEW Gstat GGUS CIC Dashboard FCR

Enabling Grids for E-sciencE EGEE-II INFSO-RI Journées Informatique IN2P3/DAPNIA, Lyon Valpré 3 GOC DB Information Statique centralisée Données sur l’ensemble des sites partenaires (ou presque) contact, security contact, certification status, site type 290 sites actuellement scheduled downtimes Utilisé par monitoring tools SFT + gstat (via RGMA), SAM scripts qui génèrent des fichiers de config (BDII) operations management tools On Duty Dashboard

Enabling Grids for E-sciencE EGEE-II INFSO-RI Journées Informatique IN2P3/DAPNIA, Lyon Valpré 4 GOC DB

Enabling Grids for E-sciencE EGEE-II INFSO-RI Journées Informatique IN2P3/DAPNIA, Lyon Valpré 5 GOC DB

Enabling Grids for E-sciencE EGEE-II INFSO-RI Journées Informatique IN2P3/DAPNIA, Lyon Valpré 6 SFT Affichage du status d’un site, point de vue utilisateur Teste differents aspects d’un CE / Site: job submission, replica management, LCG version, rgma, CA rpms, etc. Soumission SFT officielle depuis le CERN Soumission pour les VOs dteam et ops Toutes les 3 heures Sur les sites certifiés; en production, et monitorés (status défini dans la GOC DB) Résultats des différents tests en ligne

Enabling Grids for E-sciencE EGEE-II INFSO-RI Journées Informatique IN2P3/DAPNIA, Lyon Valpré 7 SFT

Enabling Grids for E-sciencE EGEE-II INFSO-RI Journées Informatique IN2P3/DAPNIA, Lyon Valpré 8 SFT Admin Pages (Poznan) Soumission SFT à la demande Interface web pour les SFT Soumission possible aux sites non-certifiés Utilisé par : ROCs: certification d’un site site admins, GOoDs (Grid Operator On Duty)

Enabling Grids for E-sciencE EGEE-II INFSO-RI Journées Informatique IN2P3/DAPNIA, Lyon Valpré 9 SAM Service Availability Monitoring monitoring framework pour les services GRID "evolution des SFT " services mis en jeu : –CE, SE, BDII, RB, FTS etc. Developpement des sondes réparti –CERN, RAL, Sinica web services + Oracle DB

Enabling Grids for E-sciencE EGEE-II INFSO-RI Journées Informatique IN2P3/DAPNIA, Lyon Valpré 10 SAM

Enabling Grids for E-sciencE EGEE-II INFSO-RI Journées Informatique IN2P3/DAPNIA, Lyon Valpré 11 GRIDVIEW Statistiques de disponibilité, basé sur R-GMA et SAM Différents services évalués –Data transfers –Job status –Service Availability  CE, SE, SRM Rapports très variés  Affichage par VO  Affichage par (importance de) site  Disponibilité globale

Enabling Grids for E-sciencE EGEE-II INFSO-RI Journées Informatique IN2P3/DAPNIA, Lyon Valpré 12 GRIDVIEW

Enabling Grids for E-sciencE EGEE-II INFSO-RI Journées Informatique IN2P3/DAPNIA, Lyon Valpré 13 GSTAT Monitoring de l’Information System (BDII) Critères : Temps de réponse Cohérence des informations Graphiques générés CPU availability (nombre de CPUs), storage space, running jobs... Mise à jour toutes les 5 mins

Enabling Grids for E-sciencE EGEE-II INFSO-RI Journées Informatique IN2P3/DAPNIA, Lyon Valpré 14 GSTAT

Enabling Grids for E-sciencE EGEE-II INFSO-RI Journées Informatique IN2P3/DAPNIA, Lyon Valpré 15 GGUS Global GRID User Support ticketing system pour la grille, basé sur Remedy tickets créés par : Utilisateurs individuels d’EGEE Opérateurs (GOoD) Fournit des liens vers La documentation, Des outils de monitoring Des “news”

Enabling Grids for E-sciencE EGEE-II INFSO-RI Journées Informatique IN2P3/DAPNIA, Lyon Valpré 16 CIC dashboard Partie intégrante du CIC portal Résumé des informations de monitoring (GSTAT + SFT/SAM + GOC DB) –Classement par importance de site (CPUs) Création et management de tickets –1 ticket par site et par problème –Attention aux problèmes liés ! (Ré-)envoi d’ s (templates) si mise à jour de ticket

Enabling Grids for E-sciencE EGEE-II INFSO-RI Journées Informatique IN2P3/DAPNIA, Lyon Valpré 17 CIC dashboard

Enabling Grids for E-sciencE EGEE-II INFSO-RI Journées Informatique IN2P3/DAPNIA, Lyon Valpré 18 Lien entre les outils CIC dashboard gstat Monitoring tools GGUS Problem reporting et tracking fix Modifications des tickets Sites Admins (s) sft Grid operator tests résultats

Enabling Grids for E-sciencE EGEE-II INFSO-RI Journées Informatique IN2P3/DAPNIA, Lyon Valpré 19 FCR Freedom of Choice for Resources Sélection des “tests critiques” (SFT) et des ressources pour les VOs manipulation de la configuration des BDII Selection CEs Selection des SEs Le but : Sélectionner les fonctionnalités importantes pour chaque VO Blacklister (officieusement et automatiquement) les sites instables Exclure une ressource déficiente dès que possible

Enabling Grids for E-sciencE EGEE-II INFSO-RI Journées Informatique IN2P3/DAPNIA, Lyon Valpré 20 FCR - VO Biomed FCR : SFT :

Enabling Grids for E-sciencE EGEE-II INFSO-RI Journées Informatique IN2P3/DAPNIA, Lyon Valpré 21 Questions