Calcul CMS: bilan 2008 C. Charlot / LLR LCG-DIR mars 2009.

Slides:



Advertisements
Présentations similaires
LCG DATAGRID - France 8 Juillet 2002 LCG : LHC Grid computing - qui, quoi, quand, comment ? Quoi ? But : préparer l'infrastructure informatique des 4 expériences.
Advertisements

ATLAS Data Challenges. Les Data Challenges (DC) en français Challenges des Données ont pour but de Valider: –le modèle dorganisation et dutilisation des.
La Grille de Calcul du LHC
Revue de performance fournisseurs
Bonjour!! Pour être prêt: Répondez aux questions:
Les normes: Communication 1.2 Comparisons 4.1 Les questions essentielles: 1. What do the expressions depuis, il y a... que, voilà... que, ça fait... que.
9-mai-2006 Eric Lancon 1 Tier-1 et Ferme d’Analyse à Lyon Tier-1 de Lyon  Processing et stockage des données réelles  Stockage des données de simulations.
Sujet Objet Les pronoms interrogatifs et relatifs
Software engineering, data stores and databases CHEP 2010 Andres Gomez Casanova CC-IN2P3 Storage Team.
Réunion LCG-France, 7/4/2008 C.Charlot Acc è s aux donn é es Accès à dCache Problèmes de stageout des fichiers produits sur les WNs  Aussi pour le stagein.
Calcul CMS: bilan CCRC08 C. Charlot / LLR LCGFR, 3 mars 2008.
2-mars-2009Eric Lançon1 Nouvelles d’ATLAS Reunion LCG 2 mars 2009 Lyon.
CMS ATLAS LHCb CERN Tier 0 Centre at CERN National Centres Lab a Russia Lab c Uni n Lab b Manno Canada Uni y Uni x Tier3 physics department  Ge  Germany.
Gestion de données : Besoins de la VO Biomed Sorina Pop Laboratoire Creatis Université de Lyon, CREATIS; CNRS UMR5220; Inserm U1044; INSA-Lyon; Université.
Mod è le de Calcul CMS C. Charlot / LLR CTDR:
Résumé CHEP 2010 Distributed processing and analysis Grid and cloud middleware Thèmes : 1.
Projet LCG-France Planning Ressources humaines
Questions: -W-W-W-What are their main tasks? - What skills should laboratory technicians have? (quote at least 6) -W-W-W-Why is it important for a lab.
CAF-13/09/2010Luc1 Squad Report T2 Période 19/06-11/09 Irena, Sabine, Emmanuel.
ANR RADIA (ex-RADEC) Desintegrations radiative des particules belles.
Annual Best Practices Sessions / Ateliers annuels sur les pratiques exemplaires PERFORMANCE MONITORING, REPORTING AND EVALUATION: WHAT’S THE POINT OF.
CS IN2P3 – Lundi 8 décembre 2003Bruno Espagnon – IPN Orsay Le Bras Dimuon d'ALICE Résolution de 70 MeV pour le J/  et 100 MeV pour le  (soit 1%) Etude.
Experiments, Schedule & Access to the hall. Magdalena Kowalska.
Activité Photons/Higgs But : Une activite complete sur les photons : Calibration, Identification Mesures de photons directs/Recherche de bosons de Higgs.
D Pallin 5/03/ Réunion groupe ATLAS-LPC 9/03/2009.
Service Challenge 4 – Tests de Débit Bilan pour le Tier-1 LCG-France Fabio Hernandez Responsable Technique LCG-France Centre de Calcul de l’IN2P3
Depuis Describing how long one has been doing something.
DEPUIS: SINCE, FOR Les normes: Les questions essentielles:  Communication 1.2- Which tense is used with “Depuis” to express an action that begins in the.
Annual Best Practices Sessions / Ateliers annuels sur les pratiques exemplaires PERFORMANCE MONITORING, REPORTING AND EVALUATION: WHAT’S THE POINT OF.
Château de Versailles IIM Project Customer Management System
1 de 24 Cours 11 - synchronisationMGL Witold Suryn Cours 11 – SQIM - synchronisation et gestion de changements 1 Ingénierie de la qualité du système.
Palaiseau Réunion CCIN2P3/LCG 22/07/2004 Distribution des données CMS Distribution des données et préparation de l’analyse Production MC distribuée et.
Movea VP Manufacturing
Recapitulatif des sujets abordés Frédérique Chollet Fabio Hernandez Fairouz Malek Réunion LCG-France Tier-2s & Tier-3s Paris, 20 mars 2008.
 PASS É MEANS PAST TENSE  IMPARFAIT MEANS IMPERFECT  PASSÉ IS FOR WHEN WE ARE TALKING ABOUT A SHORT DURATION OF A TIME (PASSÉ EST POUR UNE COURTE DURÉE)
SC4 ATLAS Ghita Rahal CC-IN2P3 Réunion LCG FRANCE Direction 3 Juillet 2006.
LHCb DC06 status report (LHCb Week, 13/09/06) concernant le CC : –Site currently fine / stable 3% of simulatated events 30% of reconstructed events –Site.
University of Ottawa - Bio 4118 – Applied Biostatistics © Antoine Morin and Scott Findlay 24/07/2015 2:29 PM Bootstrap et permutations.
HEPIX N. Neyroud 1.
Calcul et Grille CMS ou comment on extrait les aiguilles de la botte de foin Conseil scientifique LLR 14/10/2010 C. Charlot.
Projets IN2P3 08/07/05E. Kajfasz1 -IN2P
Calcul de puissance en IRMf Réunion 2 CNF 2015/2016.
Frédérique Chollet Fairouz Malek Pierre Girard Yannick Patois Réunion LCG-France, Lyon 1 er décembre 2010 Pour clore cette édition…
Eric Lançon1 Calcul ATLAS en France Le CAF au PAF * CAF : Calcul Atlas France *Célèbre contrepèterie.
CCRC’08 - phase 2 Point de vue des sites A partir des informations et de contributions de Jean-Michel Barbet Christine Leroy Eric Fede Michel Jouvin Jean-Claude.
1Prod Monte Carlo sur le nuage français La production Monte-Carlo sur le nuage français J.Schwindling CEA / DAPNIA Organisation de la production Monte-Carlo.
11/9/07-PAFL.Poggioli/LAL1/25 Gestion des données : DDM Distributed Data Management Préambule Le modèle ATLAS DDM –Principe, Tests, Suivi, Problèmes Next.
ATLAS et l’analyse au CCIN2P3  Le modèle de calcul de ATLAS  L’analyse à Lyon  Points critiques Avertissement : cette présentation n’est malheureusement.
1 Status de l’étude de mesure d’impulsion par MCS Application aux ‘softs’ muons D. Duchesneau Situation actuelle: algorithme de base et vérification avec.
25/06/20101LCG - France CPPM Marseille L’expérience CMS à GRIF LLR – E.Poly.,Palaiseau: Pascale Hennion Paulo Mora de Freitas Igor Semeniouk Philippe Busson.
Grid au LAL Michel Jouvin LAL / IN2P3
CMS CCRC08 phase 2 C. Charlot / LLR LCG-DIR juin 2008.
C. Charlot, LLR Ecole Polytechnique DC04 CMS Objectif numéro 1: préparation du traitement offline Différent des productions MC précédentes Mise en route.
Projet LCG: Vue d’Ensemble Fabio Hernandez Responsable Technique LCG-France Centre de Calcul de l’IN2P3 Rencontre IN2P3/STIC Grenoble, 25.
CAF-11/10/2010Luc1 Squad Report T1 Période 13/09-11/10 Irena, Sabine, Emmanuel.
Réunion des sites LCG France- Marseille juin ACTIVITES DU GROUPE ACCOUNTING FRANCE GRILLES Cécile Barbier (LAPP)
20-mars-2008Eric Lançon1 Activités ATLAS sur le nuage Français Emprunts a K. Bernardet, C. Biscarat, S. Jezequel, G. Rahal.
Activité Photons/Higgs But : Une activite complete sur les photons : Calibration, Identification Mesures de photons directs/Recherche de bosons de Higgs.
Tier2: Subatech Tier2: LPC Tier2: GRIF CEA/DAPNIA LAL LLR LPNHE IPNO Tier2: GRIF CEA/DAPNIA LAL LLR LPNHE IPNO AF: CC-IN2P3 Tier3: LAPP Tier1: CC- IN2P3.
F. DERUE, Réunion des sites LCG France, LPNHE, 20 mars Historique et but 2. Projet scientifique 3. Projet technique 4. Suivi des productions.
FD relative displacement measurements A.Jeremie ATF2 GM System team: K.Artoos, C.Charrondière, A.Jeremie, J.Pfingstner, D.Schulte, R.Tomas-Garcia B.Bolzon.
Courrier électronique ( s) Some features of s: Boîte de messagerie - Inbox Nouveau message -- New message Dossiers - Folders Suprimer - Delete.
CALCUL ATLAS LCG France (CC IN2P3 Lyon) 30 Avril SOMMAIRE Data Challenge 2 (DC2) d’ATLAS Utilisation du CC IN2P3.
C. Charlot, Calcul CMS, LCG-DIR, fév 2007 Calcul CMS 2006 TDR de Physique CMS Physics TDR, Volume 1, CERN-LHCC , feb. 2006, 548pp CMS Physics TDR,
Vue d'ensemble de l'utilisation du CCIN2P3 par les expériences LHC
Organisation Tiers CMS-France
Efficacité des jobs CMS en 2010
LCG – France et ALICE Bilan 2006 Planning fevrier 2007
Transcription de la présentation:

Calcul CMS: bilan 2008 C. Charlot / LLR LCG-DIR mars 2009

Réunion LCG-France, 02/03/2009 C.Charlot Activit é s 2008 CCRC08 Test complet en vrai grandeur du système de calcul Transfert T0->T1, T1 T1, T1->T2 Processing workflow CSA08 Prompt reco et calibration/alignment workflows Prompt analysis Production MC Activité continue de production MC et reprocessing pour les études de physiques Mise en opération des T2s Placement des données et analyses aux T2s

Réunion LCG-France, 02/03/2009 C.Charlot CCRC08: Objectifs g é n é raux Test complet du système de calcul En vraie grandeur De façon concomitente avec les autres expériences Transferts et processing workflows simultanément

Réunion LCG-France, 02/03/2009 C.Charlot Transferts: T0->T1 week 1 week 2 week 3 official start of CCRC’08 Phase2 issues with issues with

Réunion LCG-France, 02/03/2009 C.Charlot Transferts: T0->T1 Rate Prod+Debug week 1 week 2 issues with - credential problem at IN2P3 - migration agent problem Quality Prod+Debug Target rate achieved in week 2 and in week 3. Target rate achieved in week 2 and in week 3.

Réunion LCG-France, 02/03/2009 C.Charlot Transferts T1-T1 Objectif: répliquer les AODs après re-reco en 4 jours Taille totale sample: 28.6TB Équivalente a 3 jours au taux nominal ~250M AOD events Tous les sites on passés la métrique Y inclu l’émission/réception du sample 14TB Graphe Temps entre le premier et le denier transfert pour le dataset Autre test prévu Envoyé un échantillon re-RECO et AOD depuis T1 envoyés vers le CERN

Réunion LCG-France, 02/03/2009 C.Charlot Transferts T1-T2 Bon résultats pour les T2s français et régionaux T2s participants Cycle 1 Cycle 2 T2s participants Pb FTS transferts avec les autres sites résolu

Réunion LCG-France, 02/03/2009 C.Charlot Tests soumission Soumission régulière de ~100k jobs/jour dans l’ensemble du système T0-T1-T2 Pics à ~200k/jour, le WM semble passer le test d’échelle eg. T2s

Réunion LCG-France, 02/03/2009 C.Charlot CSA08 Aim of CSA08: Test the full scope of offline data handling and analysis activities needed for LHC data-taking operations in Prompt reconstruction Calibration and Alignment Re-reconstruction Express analyses Focus is on DPG activities, with calibration and alignment forming the central component In contrast to CSA07, perform alignment and calibration in "real-time", as needed for real data-taking mode Resulting constants used to re-reconstruct the data ready for physics analysis

Réunion LCG-France, 02/03/2009 C.Charlot T0 / CAF Workflows  ES/CS Prompt Reconstruction AlCaReco production AlCaReco’s ready AlCa task Constants Validation Upload Constants to Conditions database Test reconstruction AlCaReco’s copied to CAF T0 CAF DQM AlCa task Constants Validation AlCa task Constants Validation Re-Reconstruction T1 Signoff: Constants ready for Reprocessing Analysis T2 + CAF (S156)

Réunion LCG-France, 02/03/2009 C.Charlot CSA08: results Main objectives achieved in 4 weeks pre-defined schedule Full quota of 150M events produced and reconstructed Calibration and alignement exercizes completed in time by all subdetectors Re-reconstruction at T1 with new calibration constants Some example results Ecal Endcap Calibration

Réunion LCG-France, 02/03/2009 C.Charlot Analysis workflow

Réunion LCG-France, 02/03/2009 C.Charlot T2/T3 français Tier 3 IPNL Tier 2 IPHC Tier 1 CC IN2P3 Tier 2 CC AF qq‰Raw Data, qq%RECO, ~qq 10%AOD, Monte-Carlo Tier 2 GRIF qq‰Raw Data, qq%RECO, ~qq 10%AOD, Monte-Carlo Noeud PhEDEx et/ou CE Site T2s on un T3 intégré (depuis é t é 2008)

Réunion LCG-France, 02/03/2009 C.Charlot T2 associations

Réunion LCG-France, 02/03/2009 C.Charlot Production MC Q3Q4 2008

Réunion LCG-France, 02/03/2009 C.Charlot Calcul CMS par activit é (dec. 08)

Réunion LCG-France, 02/03/2009 C.Charlot Activit é par site (dec. 08)

Réunion LCG-France, 02/03/2009 C.Charlot Analyse par site (dec. 08)

Réunion LCG-France, 02/03/2009 C.Charlot Contacts CMS aux sites T1_FR_CCIN2P3: Farida, Nelli, Claude T2_FR_CCIN2P3: Tibor, Claude T2_FR_IPHC: Yannick, Daniel T2_FR_GRIF: Andrea, Pascale (LLR), Delphine, Christine (IRFU) T3_FR_IPNL: Guillaume, Yoan, Stéphane

Réunion LCG-France, 02/03/2009 C.Charlot Conclusions T1_FR_CCIN2P3 est en place depuis longtemps Assurer la stabilité du stockage, gestion des transferts encore lourde Les 3 T2s français sont opérationnels GRIF fonctionne très bien Arrivée de T2 IPHC Placements de données favorables pour la France Contribution forte de nos ressouces Activité analyse aux T2s français en augmentation