LCG – France et ALICE Bilan 2006 Planning fevrier 2007

Slides:



Advertisements
Présentations similaires
Calcul CMS: bilan 2008 C. Charlot / LLR LCG-DIR mars 2009.
Advertisements

Le Tier2 de Subatech Logiciel : Jean-Michel Barbet
Eric Lançon1 Calcul ATLAS en France Le CAF au PAF * CAF : Calcul Atlas France *Célèbre contrepèterie.
CAF LCG-FRANCE A.Rozanov LCG France 22 Juillet SOMMAIRE Composition CAF DC2 ATLAS Demandes fin 2004.
CALCUL ATLAS LCG France (CC IN2P3 Lyon) 30 Avril SOMMAIRE Data Challenge 2 (DC2) d’ATLAS Utilisation du CC IN2P3.
05-fevrier-2007Eric Lancon1 ATLAS Bilan Planning 2007.
Le projet MUST Méso infrastructure de calcul et de stockage ouverte sur la grille européenne LCG/EGEE Colloque Grille Rhône-Alpes 10 janvier 2008.
Fabio HERNANDEZ Responsable Grid Computing Centre de Calcul de l'IN2P3 - Lyon Lyon, 30 avril 2004 Déploiement LCG-2 au CC-IN2P3 Etat d’avancement.
Evaluation de requêtes Quelques résultats préliminaires 1 Amin Mesmoudi.
INFSO-RI Enabling Grids for E-sciencE Statistiques d'usage d'un site de la grille LCG/EGEE Emmanuel Medernach, IN2P3 LPC.
Alice LCG Task Force Meeting 16 Oct 2008 BARBET Jean-Michel - 1 /20 LCGFR Marseille Juin 2010Jean-Michel BARBET Subatech 1 /22 Support de la VO Alice à.
1 Stéphane JEZEQUEL JI06 Modèle de calcul d'ATLAS et Exercices en vraie grandeur de la grille WLCG par l'expérience ATLAS S. Jézéquel Journées Informatiques.
1 Stéphane JEZEQUEL 23 Juin 2008 Analyse des données LHC dans ATLAS S. Jézéquel.
Alice LCG Task Force Meeting 16 Oct 2008 BARBET Jean-Michel - 1 /20 LCGFR-T2T3, Annecy Mai 2009Jean-Michel BARBET Subatech 1 /18 IN2P3-SUBATECH :
Facilité d'Analyse au CC-IN2P3 (LAF) Renaud Vernet Journées LCG France 22 novembre 2010.
Projet LCG-France Planning Fairouz Malek, Fabio Hernandez Responsables LCG-France Journées projets de l’ IN2P3 Paris, 5 juillet 2007.
LCG-FRANCE_19/05/09L. Poggioli1 ATLAS Activités du nuage FR Production MC Reprocessing Analyse Au quotidien Next L.Poggioli, LAL.
ALICE February/March exercise summary Latchezar Betev WLCG Collaboration Workshop 22 April 2008.
C. Charlot, Calcul CMS, LCG-DIR, fév 2007 Calcul CMS 2006 TDR de Physique CMS Physics TDR, Volume 1, CERN-LHCC , feb. 2006, 548pp CMS Physics TDR,
Et exige qu’on y réponde.
Gestion des données : DDM Distributed Data Management
Intégration Continue et SQL
Le nœud de grille de calcul de l'IPHC dans CMS
Compte rendu HEPIX et CHEP2015 Stockage et gestion des données
Réunion Analyse D0 France au CCIN2P3 19 janvier 2004
Les nouveautés dans les modèles de Calcul au LHC
Vue d'ensemble de l'utilisation du CCIN2P3 par les expériences LHC
Planification budgétaire Tier2s & Tier-3s Etat d’avancement
GRIF : Grille pour la Recherche en
ATLAS Computing model et utilisation de LCG
12 mars 2004, Lyon Reunion CAF F.Chollet 1
Fonctionnement de la grille
Activités présentes et à venir
Surveillance des services grille par NAGIOS
Etat des lieux des VO Boxes LHC
Projet de participation CMS au GRIF
Configuration FTS pour CMS
Réunion de Coordination – Bilan des opérations LCG Hélène CORDIER
Statut du T2 Île de France
Offres Viveris Systèmes
David Bouvet LCG France T2 T3 – LPNHE
Stratégies de déclenchement
Jobs ATLAS sur la grille
Utilisation effective de la Grille par ATLAS S. Jézéquel (LAPP)
La grille de calcul EGEE
Atelier régulation de la production dans un contexte grille
Résumé de la réunion PAF-CAF 12/04/2010
Le comptage de l’examen paraclinique
Bilan reprocessing données cosmiques Atlas
Production pour LHCb sur la grille
Prélude ERP 7 Présentation 19/09/2018 © Gérard Baglin,
AGENDA Demandes de prix dans Baan
La grille EGEE dans le monde et à Orsay
Le Contrôle Budgétaire
ALICE Data Challenge Rappel sur l’environnement logiciel
Prélude 7 ERP Présentation 15/11/2018 © Gérard Baglin,
GRIF : Site EGEE au Service de la Recherche en IdF
Mésocentre de calcul et de stockage ouvert sur la grille EGEE (MUST) LAPP/ Université de Savoie / EGEE.
Les résultats de la prise en charge de la tuberculose
Serveurs d’applications
Prélude ERP 7 Présentation 09/12/2018 © Gérard Baglin,
Rapport sur le projet [Nom du projet]
Infrastructure Opérationnelle d’EGEE2
DC04 CMS Objectif Status Planning
Comité Scientifique GRIF
Efficacité des jobs CMS en 2010
LUSTRE Integration to SRM
Résumé des Actions Suite aux Réunions CB et MB
Comité Scientifique GRIF
Michel Jouvin LAL/Orsay
Transcription de la présentation:

LCG – France et ALICE Bilan 2006 Planning 2007 5 fevrier 2007 ALICE@LCG-France

BILAN 2006 5 fevrier 2007 ALICE@LCG-France

Physics Data Challenge 2006 Production Monte-Carlo Toutes les tâches soumises par LCG-GRID Tâche = Simulation + Reconstruction (8h  1M SI2K) Résultats exportés vers T0 (2Go par tâche) Production permanente depuis 9 mois 6 T1s + 49 T2s = <1500> CPUs en continu Efficacité des services ALICE > 90% Un seul SE au T0 5 fevrier 2007 ALICE@LCG-France

Contribution LCG France ~10% de la capacité CPU (normalisée en KSI2K) disponible pour ALICE Support dans sites: Artem Trunov (CCIN2P3), Jean-Michel Barbet (Subatech) Subatech: 14% CC+T2s 63% T2s GRIF: 5% CC+T2s 23% T2s LPC: 3% CC+T2s 14% T2s CC: 78% CC+T2s 5 fevrier 2007 ALICE@LCG-France

Contribution LCG France Ressources CPU promises en 2006: CCIN2P3: 10% des ressources totales déclarées pour 2006 dans T1 Subatech(42%)+GRIF(21%)+LPC (5%)+AF(33%): 5% des ressources totales déclarées pour 2006 dans T2 T1+T2s: 7% des ressources totales déclarées pour 2006 dans T2 CC/autres = 70% Les contributions CPU de LCG ont été celles attendues 5 fevrier 2007 ALICE@LCG-France

Physics Data Challenge 2006 Transfert T0 →T1 FTS : test de réplication des données brutes Continument en test depuis septembre 2006 Objectif de 300Mo/s atteint Beaucoup d’instabilités (FTS, MS, VO box) Pas de tests T1 ↔ T1, T1 ↔T2 SE xrootd + dCache (en test), + CASTOR, DPM (en développement) Requête T0 → CC: 50Mo/s sur toute l’année (taux réel) 5 fevrier 2007 ALICE@LCG-France

Ressources – stockage et transferts Sep-Nov 2006, test FTS, T0 → 5 T1s CCIN2P3 – 220 TB (40% of total) Taux de transfert moyen - 40Mo/s 5 fevrier 2007 ALICE@LCG-France

T1 & T2s Contraintes sur les ressources (stockage et réseau) dans T1 Archivage des données MC provenant des T2s Serveur des données ESD réelles pour analyse dans T2s Serveur des données ESD MC pour T1s 5 fevrier 2007 ALICE@LCG-France

T1-T2 Relations A revoir 5 fevrier 2007 ALICE@LCG-France

PDC06: conclusions En 2006 les ressources CPU fournies par LCG-France (T1 & T2s) sont à peu-près celles déclarées dans le MoU LCG Ces ressources sont insuffisantes Les ressources pour le stockage de données n’ont pas été utilisées du fait de l’absence de SE Les tests de transfert T0 → CC ont atteint les taux requis, mais la stabilité du service reste insatisfaisante Pas de tests de transfert CC ↔ T2s Depuis le début de l’année, le suivi des opérations au CC est problématique, en l’absence d’un contact sur place. 5 fevrier 2007 ALICE@LCG-France

Planning 2007 5 fevrier 2007 ALICE@LCG-France

Répétition générale Production MC comme avant pour les besoins de la physique SE installés dans tous les sites Stratégie « comme pour de vrai » DAQ: MC brute, calibrage, contrôle, enregistrement CAF: reconstruction/analyse préliminaire T0: première reconstruction et exportation T1 T1: deuxième reconstruction et analyse organisée T2: Production MC et analyses individuelles 5 fevrier 2007 ALICE@LCG-France

FTS automatique Données brutes insérées dans catalogue Déclenchement d’un transfert aléatoire dans T1s FTD demande un transfert FTD utilises FTS pour le transfert Le gestionnaire notifie la fin du transfert Le catalogue est mis à jour 1 AliEn File Catalogue 2 Transfer queue 6 Transfer Manager Transfer broker 5 3 FTD FTD MSS 4 MSS 5 fevrier 2007 ALICE@LCG-France

Reconstruction dans T0 Données brutes Insertion données brutes (fichiers) dans catalogue Déclenchement de la soumission de tâches CE demande une CE soumet JobAgent JobAgent exécutes tâche Distribution résultat (ESD) dans T1s 1 AliEn File Catalogue 6 2 Task queue Job broker 3 CE CE 5 fevrier 2007 ALICE@LCG-France

Vœux pour 2007 Remplacer Artem SE au CC xrootd+dCache et T2s Stabilité de FTS Analyse … beaucoup reste à apprendre Plus de ressources… 5 fevrier 2007 ALICE@LCG-France

Ressources requises en 2007 Running time 7  105 s (pp@900 GeV) Ressources totales disponibles à l’été 2007 Réseau New 2007 CERN External Total Tier0 CAF Tier1 Tier1s Tier2s CPU(MSI2K) 0.068 0.030 0.90 2.18 3.24 5.41 5.51 DISK(PB) 0.017 0.046 0.32 0.38 1.00 0.68 1.68 2.07 MS (PB) 0.077 - 0.36 0.44 0.98 1.42 T0 → T1 (max) T1 ↔ T1 T1 → T2 T1← T2 300 MB/s 25(in)/40(out) MB/s 2 MB/s 70 MB/s 5 fevrier 2007 ALICE@LCG-France