Calcul CMS: bilan 2008 C. Charlot / LLR LCG-DIR mars 2009.

Présentation au sujet: "Calcul CMS: bilan 2008 C. Charlot / LLR LCG-DIR mars 2009."— Transcription de la présentation:

1 Calcul CMS: bilan 2008 C. Charlot / LLR LCG-DIR mars 2009

2 Réunion LCG-France, 02/03/2009 C.Charlot Activit é s 2008 CCRC08 Test complet en vrai grandeur du système de calcul Transfert T0->T1, T1 T1, T1->T2 Processing workflow CSA08 Prompt reco et calibration/alignment workflows Prompt analysis Production MC Activité continue de production MC et reprocessing pour les études de physiques Mise en opération des T2s Placement des données et analyses aux T2s

3 Réunion LCG-France, 02/03/2009 C.Charlot CCRC08: Objectifs g é n é raux Test complet du système de calcul En vraie grandeur De façon concomitente avec les autres expériences Transferts et processing workflows simultanément

4 Réunion LCG-France, 02/03/2009 C.Charlot Transferts: T0->T1 week 1 week 2 week 3 official start of CCRC’08 Phase2 issues with CASTOR @CERN** issues with CASTOR @CERN*

5 Réunion LCG-France, 02/03/2009 C.Charlot Transferts: T0->T1 Rate Prod+Debug week 1 week 2 issues with CASTOR @CERN - credential problem at IN2P3 - migration agent problem Quality Prod+Debug Target rate achieved in week 2 and in week 3. Target rate achieved in week 2 and in week 3.

6 Réunion LCG-France, 02/03/2009 C.Charlot Transferts T1-T1 Objectif: répliquer les AODs après re-reco en 4 jours Taille totale sample: 28.6TB Équivalente a 3 jours au taux nominal ~250M AOD events Tous les sites on passés la métrique Y inclu l’émission/réception du sample 14TB Graphe Temps entre le premier et le denier transfert pour le dataset Autre test prévu Envoyé un échantillon re-RECO et AOD depuis T1 envoyés vers le CERN

7 Réunion LCG-France, 02/03/2009 C.Charlot Transferts T1-T2 Bon résultats pour les T2s français et régionaux T2s participants Cycle 1 Cycle 2 T2s participants Pb FTS transferts avec les autres sites résolu

8 Réunion LCG-France, 02/03/2009 C.Charlot Tests soumission Soumission régulière de ~100k jobs/jour dans l’ensemble du système T0-T1-T2 Pics à ~200k/jour, le WM semble passer le test d’échelle eg. T2s

9 Réunion LCG-France, 02/03/2009 C.Charlot CSA08 Aim of CSA08: Test the full scope of offline data handling and analysis activities needed for LHC data-taking operations in 2008. Prompt reconstruction Calibration and Alignment Re-reconstruction Express analyses Focus is on DPG activities, with calibration and alignment forming the central component In contrast to CSA07, perform alignment and calibration in "real-time", as needed for real data-taking mode Resulting constants used to re-reconstruct the data ready for physics analysis

10 Réunion LCG-France, 02/03/2009 C.Charlot T0 / CAF Workflows  ES/CS Prompt Reconstruction AlCaReco production AlCaReco’s ready AlCa task Constants Validation Upload Constants to Conditions database Test reconstruction AlCaReco’s copied to CAF T0 CAF DQM AlCa task Constants Validation AlCa task Constants Validation Re-Reconstruction T1 Signoff: Constants ready for Reprocessing Analysis T2 + CAF (S156)

11 Réunion LCG-France, 02/03/2009 C.Charlot CSA08: results Main objectives achieved in 4 weeks pre-defined schedule Full quota of 150M events produced and reconstructed Calibration and alignement exercizes completed in time by all subdetectors Re-reconstruction at T1 with new calibration constants Some example results Ecal Endcap Calibration

12 Réunion LCG-France, 02/03/2009 C.Charlot Analysis workflow

13 Réunion LCG-France, 02/03/2009 C.Charlot T2/T3 français Tier 3 IPNL Tier 2 IPHC Tier 1 CC IN2P3 Tier 2 CC AF qq‰Raw Data, qq%RECO, ~qq 10%AOD, Monte-Carlo Tier 2 GRIF qq‰Raw Data, qq%RECO, ~qq 10%AOD, Monte-Carlo Noeud PhEDEx et/ou CE Site T2s on un T3 intégré (depuis é t é 2008)

14 Réunion LCG-France, 02/03/2009 C.Charlot T2 associations

15 Réunion LCG-France, 02/03/2009 C.Charlot Production MC Q3Q4 2008

16 Réunion LCG-France, 02/03/2009 C.Charlot Calcul CMS par activit é (dec. 08)

17 Réunion LCG-France, 02/03/2009 C.Charlot Activit é par site (dec. 08)

18 Réunion LCG-France, 02/03/2009 C.Charlot Analyse par site (dec. 08)

19 Réunion LCG-France, 02/03/2009 C.Charlot Contacts CMS aux sites T1_FR_CCIN2P3: Farida, Nelli, Claude T2_FR_CCIN2P3: Tibor, Claude T2_FR_IPHC: Yannick, Daniel T2_FR_GRIF: Andrea, Pascale (LLR), Delphine, Christine (IRFU) T3_FR_IPNL: Guillaume, Yoan, Stéphane

20 Réunion LCG-France, 02/03/2009 C.Charlot Conclusions T1_FR_CCIN2P3 est en place depuis longtemps Assurer la stabilité du stockage, gestion des transferts encore lourde Les 3 T2s français sont opérationnels GRIF fonctionne très bien Arrivée de T2 IPHC Placements de données favorables pour la France Contribution forte de nos ressouces Activité analyse aux T2s français en augmentation