LCG-France Tier-1 & AF Réunion mensuelle de coordination

Slides:



Advertisements
Présentations similaires
2-mars-2009Eric Lançon1 Nouvelles d’ATLAS Reunion LCG 2 mars 2009 Lyon.
Advertisements

LHCb DC06 status report (LHCb Week, 13/09/06) concernant le CC : –Site currently fine / stable 3% of simulatated events 30% of reconstructed events –Site.
CAF-11/10/2010Luc1 Squad Report T1 Période 13/09-11/10 Irena, Sabine, Emmanuel.
Resource allocation: what can we learn from HPC? 20 janvier 2011 Vincent Breton Crédit: Catherine Le Louarn.
05-fevrier-2007Eric Lancon1 ATLAS Bilan Planning 2007.
Réunion Calcul LHC-France 30 Avril 2004 Buts et rôles du comité MoU: discussions ? Demande urgentes Quelques propositions … F. Ohlsson-Malek, LCG-F.
Fabio HERNANDEZ Responsable Grid Computing Centre de Calcul de l'IN2P3 - Lyon Lyon, 30 avril 2004 Déploiement LCG-2 au CC-IN2P3 Etat d’avancement.
CNRS GRID-FR CA Sophie Nicoud
Alice LCG Task Force Meeting 16 Oct 2008 BARBET Jean-Michel - 1 /20 LCGFR-T2T3, Annecy Mai 2009Jean-Michel BARBET Subatech 1 /18 IN2P3-SUBATECH :
Yannick Patois 1 Utilisation LCG-France Les Technical Evolution Groups et LCG-France.
EGEE-II INFSO-RI Enabling Grids for E-sciencE EGEE and gLite are registered trademarks Opérations : vers un modèle décentralisé...
An Introduction To Two – Port Networks The University of Tennessee Electrical and Computer Engineering Knoxville, TN wlg.
Traffic Sign Recognition Jacob Carlson Sean St. Onge Advisor: Dr. Thomas L. Stewart.
IP Multicast Text available on
Template Provided By Genigraphics – Replace This Text With Your Title John Smith, MD 1 ; Jane Doe, PhD 2 ; Frederick Smith, MD, PhD 1,2 1.
Update on Edge BI pricing January ©2011 SAP AG. All rights reserved.2 Confidential What you told us about the new Edge BI pricing Full Web Intelligence.
Overview of SUN’s Unix Campus-Booster ID : **XXXXX Copyright © SUPINFO. All rights reserved Introduction to Solaris 10.
Notes for teacher. You can just use slides 2-5 if you wish. If you want to do the practical activity (slides 6-8) you will need to: print off Slide 6.
LCG-France Tier-1 & AF Réunion mensuelle de coordination
LES MODULES PLAN DE DEVELOPPEMENT PERSONNEL LEADERSHIP ART ORATOIRE.
Passage de Main SYSGRID Réunion 1
Speaking Exam Preparation
Vue d'ensemble de l'utilisation du CCIN2P3 par les expériences LHC
Planification budgétaire Tier2s & Tier-3s Etat d’avancement
12 mars 2004, Lyon Reunion CAF F.Chollet 1
Projet eXtreme DataCloud XDC
Surveillance des services grille par NAGIOS
Pierre Girard LCG-France Tier
Fonctionnement de la grille
Consolidation des services FTS et LFC
LCG-France Tier-1 & AF Réunion mensuelle de coordination
LCG-France Tier-1 & AF Réunion mensuelle de coordination
LCG-France Tier-1 & AF Réunion mensuelle de coordination
Surveillance des services grille par NAGIOS
Etat des lieux des VO Boxes LHC
2ème coloque LCG-France
Infrastructure de grille LHC en France et ressources associées
Quantum Computer A New Era of Future Computing Ahmed WAFDI ??????
Réunion de Coordination – Bilan des opérations LCG Hélène CORDIER
Etat actuel et perspectives des CEs
LCG-France Tier-1 & AF Réunion mensuelle de coordination
LCG –France Tier2 & AF Réunion de Coordination – Problèmes récurrents des VOs 11 Juin- 10 Septembre Hélène CORDIER.
Résumé CB WLCG du 3 février 2005
Le Projet GRIF Efficient Handling and processing of
CRG TM for YETS November 6th 2017.
Exercices: Système d’Information
Organisation LCG-France Lien avec le computing LHC
LCG –France Tier2 & AF Réunion de Coordination – Problèmes récurrents des VOs 10 Septembre – 21 Octobre Hélène CORDIER.
1 ISO/TC 176/SC 2/N1219 ISO 9001:2015 Revision overview - General users July 2014.
High-Availability Linux Services And Newtork Administration Bourbita Mahdi 2016.
La grille EGEE dans le monde et à Orsay
Qu’est-ce que tu as dans ta trousse?
Infrastructure Opérationnelle d’EGEE
Benchmarking noise policies
Forum national sur l’IMT de 2004.
Introduction à GENIUS et GILDA
Quelle est la date aujourd’hui?
Infrastructure Opérationnelle d’EGEE2
DC04 CMS Objectif Status Planning
BRMS Implementation Status Update Template designed by 18-July-2015.
Rapid Deployment Solution Real Estate Q1 and Q Best Practice Flow Diagrams.
les instructions Bonjour la classe, sortez vos affaires
LCG – France et ALICE Bilan 2006 Planning fevrier 2007
Résumé des Actions Suite aux Réunions CB et MB
Lequel The Last Part.
Cold Fusion High Availability “Taking It To The Next Level” Presenter: Jason Baker, Digital North Date:
3rd February, 2016 Alstom Controlling. © ALSTOM All rights reserved. Information contained in this document is indicative only. No representation.
Reporting on national biodiversity strategies,
M’SILA University Information Communication Sciences and technology
Transcription de la présentation:

LCG-France Tier-1 & AF Réunion mensuelle de coordination 21/07/2018 22/03/2012 LCG-France Tier-1 & AF Réunion mensuelle de coordination Pierre Girard Pierre.girard@in2p3.fr

Les rats quittent le navire… Nouvelles de LCG Plan Les rats quittent le navire… Nouvelles de LCG CR du dernier CP de LCG-France CR du dernier T1SCM CR du dernier GDB Disponibilité du site Dossiers en cours Evénements 22/03/2012

Les rats quittent le navire… Mode “passage de main” Responsable du projet LCG@CC.IN2P3.FR Quoi Représentation auprès de LCG France Représentation auprès de WLCG Activités WLCG au CCIN2P3 Comment transmettre les connaissances Oralement (ok qd qq’un à qui parler) Wiki ? EDMS ? Administrateur grille (sysgrid) Discuté avec le chef de l’équipe Infrastructure Validation certificats GRID2-FR du CC Fait Nouveaux contacts Jérôme Bernier (Primaire) Benoît Delaunay (Secondaire) 22/03/2012

Nouvelles de LCG 22/03/2012

CR du dernier CP de LCG-France CP du 27 février 2012 «  L’activité des sites en 2011 indique que l’infrastructure composée de 9 Tier-2 Tier-3 (en tenant compte de l’AF du CC) autour du Tier-1 répond avec efficacité aux besoins de calcul des expériences. » « Compte tenu des baisses continues des budgets alloués par les TGIR pour le CCIN2P3 et LCG, et donc des notifications décroissantes aux T2/T3, il est décidé de préparer une concertation sur l'avenir du calcul en général et celui du LHC en particulier avec tous les partenaires, expériences et directeurs des laboratoires hébergeant des sites LCG-France. L’objectif est de décider une politique claire de l’IN2P3 avec priorités sur les 3-4 prochaines années au plus tard à la fin de l’été 2012. » 22/03/2012

T1 Service Coordination Meeting du 15 avril 2012 CR du dernier T1SCM T1 Service Coordination Meeting du 15 avril 2012 http://indico.cern.ch/conferenceDisplay.py?confId=181610 22/03/2012

LHC Machine Plans for 2012 Mike Lamont (CERN) Source: http://indico.cern.ch/materialDisplay.py?contribId=9&materialId=slides&confId=181610 22/03/2012

LHC Machine Plans for 2012 Mike Lamont (CERN) Source: http://indico.cern.ch/materialDisplay.py?contribId=9&materialId=slides&confId=181610 22/03/2012

FTS 2.2.8 deployment at Tier1s FTS Transfer Dashboard Migration vers FTS 2.2.8 poussée par ATLAS Planning établi entre tous les T1s https://docs.google.com/spreadsheet/ccc?key=0AthhzXLQok7XdFpUeDBfLXE2S1RDZE4zcHp6QWVpUFE#gid=0 CCIN2P3 Lundi 26 mars 2012 David ? Cette version intègre des sondes de monitoring Dashboard en préparation Présentation: http://indico.cern.ch/getFile.py/access?contribId=10&resId=0&materialId=slides&confId=181610 Démo http://dashb-wlcg-transfers.cern.ch/ui/ Source: http://indico.cern.ch/getFile.py/access?contribId=10&resId=0&materialId=slides&confId=181610 22/03/2012

GDB du 21 mars 2012 CR du dernier GDB http://indico.cern.ch/conferenceDisplay.py?confId=155066 22/03/2012

Election du nouveau chairman du GDB 21/07/2018 Election du nouveau chairman du GDB And the winner is … MICHEL JOUVIN 22/03/2012

CR du dernier GDB Source: http://indico.cern.ch/getFile.py/access?sessionId=1&resId=1&materialId=0&confId=155066 22/03/2012

Modernisation of the CERN Computing Infrastructure (Ian Bird) http://indico.cern.ch/materialDisplay.py?sessionId=4&materialId=0&confId=155066 Source: 22/03/2012

Modernisation of the CERN Computing Infrastructure (Ian Bird) Agile Infrastructure project has 3 aspects Management tool chain Use of virtualisation Monitoring Possible utilisation de Hadoop pour le stockage central et l’analyse Cloud technology Choix d’Openstack Participation du CERN à “Openstack Foundation” Cloud investigations Use of commercial clouds: issues of policy, overall feasibility, data management, cloud models, cost Helix Nebula project is one step in this direction ATLAS est un use case Will consider other direct investigations with other providers CERN Openlab http://indico.cern.ch/materialDisplay.py?sessionId=4&materialId=0&confId=155066 Source: 22/03/2012

Role of Helix Nebula: The Science Cloud http://indico.cern.ch/materialDisplay.py?sessionId=4&materialId=0&confId=155066 Source: 22/03/2012

Modernisation of the CERN Computing Infrastructure (Ian Bird) http://indico.cern.ch/materialDisplay.py?sessionId=4&materialId=0&confId=155066 Source: Timescales Prototyping in 2012 hopefully Testing in 2013 Production in 2014 22/03/2012

Experiment Operations ALICE (Latchezar Betev) http://indico.cern.ch/materialDisplay.py?contribId=0&sessionId=5&materialId=slides&confId=155066 The LEGO Analysis Trains Polling together many user analysis tasks (wagons) in a single set of Grid jobs (the train) Managed through a web interface by a Physics Working Group conductor (ALICE has 8 PWGs) SLC6 notes Many applications will see a large increase in virtual memory usage (but not resident memory)when running on RHEL 6 vs RHEL 5. Re-write of proxy-renewal service (IT/ES – M.Litmaath) Etude d’un déploiement sur nos VO boxes (toutes VOs) Contact avec Maarten pour faisablilité 22/03/2012

Experiment Operations LHCb (Philippe Charpentier) http://indico.cern.ch/getFile.py/access?contribId=1&sessionId=5&resId=0&materialId=slides&confId=155066 Many non-pledged sites 1.4 PB free on LHCb-Disk space tokens Parce que des sites ont déployé leurs pledges 2012 en avance Tape recall and cache management: We need to know the actual size of the cache read buffers Not available with SRM for dCache 4 GB virtual memory now OK Limit per process, not process group (5GB in this case)! If possible only kill the offending process, not the job! SL6 being certified, but not foreseen in production during 2012 data taking Requires MW python bindings for 2.7 22/03/2012

Experiment Operations CMS (Stephen Gowdy) http://indico.cern.ch/materialDisplay.py?contribId=2&sessionId=5&materialId=slides&confId=155066 Intéressant organigramme des « computing operations » de CMS Software deployment 2 solutions for sites: CVMFS or CRON installation Multi-Core CMSSW jobs Cf. présentation Clear memory gain (~20%) with multi-core processing Lazy download produces a large startup overhead for multi-core jobs Small overhead if Lazy download turned off Tier-1 sites will not like to move parts of their resources to multi-core usage 22/03/2012

Experiment Operations ATLAS (Alessandro Di Girolamo) http://indico.cern.ch/materialDisplay.py?contribId=3&sessionId=5&materialId=slides&confId=155066 Memory requirements (for high pileup MC12) “there will be jobs which need vmem > 3.5GB” “we ask sites to have limits on vmem of 4GB. SWAP should be set to 2*RAM size. Physical memory requirement not changed (2 GB).” LFC migration Done for IN2P3-CC Thanks to Emmanouil, David and Osman FTS 2.2.8 functionality ~60% of FTS servers already upgraded, other Tier1s have planned/are planning Issue observed on Tier0 FTS Server Gridftp resume transfers in case of particular failures condition Fix already provided in a nonEMI release, installed on CERN pilot and Tier0 FTS server. Will be included in the next EMI rel. CVMFS progress (90 / 150 sites) Helix nebula test https://indico.cern.ch/getFile.py/access?resId=0&materialId=slides&contribId=30&sessionId=3&subContId=3&confId=169695 Automation of Operations / Evaluation of sites Site usability for analysis activity could be injected in SAM/NAGIOS 22/03/2012

EMI News CREAM BLAH, v.1.16.5 (12 April 2012) Fixes the job registry corruption caused by the purge of the registry under heavy load UI/WN GFAL/lcg_util, v. 1.12.0 – minor release Glue 2.0 support in gLite data clients Return estimatedWaitTime for files in an asyncrhonous SRM request in Python Bug fixes: checksum is case sensitive in lcg-get-checksum/lcg-rep … lcg-rep segmentation fault with dcache endpoints Extension of security support of gLite 3.2 glite-WN and glite-UI To September 30 2012 Means that sites can keep gLite until EMI-2 !!! UI/WN tarball support First testing version available Documentation: https://twiki.cern.ch/twiki/bin/view/EMI/EMIuiwnTar Beta testing http://indico.cern.ch/materialDisplay.py?contribId=4&sessionId=8&materialId=slides&confId=155066 Source: 22/03/2012

Résultats du site 22/03/2012

Résultats Janvier 2012 MyWLC IN2P3-CC LCG Office http://grid-monitoring.cern.ch/mywlcg/sa/?group=1&site=457&graph=1&profile=15 LCG Office https://espace.cern.ch/WLCG-document-repository/ReliabilityAvailability/Tier-1/2012/tier1_reliab_0212/Tier1_Summary_Feb2012.pdf 22/03/2012

Disponibilités des VOs pour février 2012 https://espace.cern.ch/WLCG-document-repository/ReliabilityAvailability/Forms/AllItems.aspx?RootFolder=%2FWLCG-document-repository%2FReliabilityAvailability%2FTier-1%2F2011%2Ftier1_reliab_122011 Source: Disponibilités des VOs pour février 2012 ALICE CMS ? ATLAS LHCb 22/03/2012

Evénements A venir (à mettre à jour) EGI User Forum, Munich, 19-23 March HEPiX Spring Meeting, Prague, 23-27 April 2012 EMI AHM, DESY, 8-10 May WLCG Workshop, NYC, 19-20th May 2012 CHEP2012, NYC, 21-25th May 2012 LCG France, Nantes (SUBATECH), 6-7 June 2012 http://indico.in2p3.fr/conferenceDisplay.py?confId=6455 EGI Technical Forum, Prague, 17-21September 2012 HEPiX Fall Meeting, IHEP, 15-19 October 2012 JI IN2P3/IRFU, La Londe les Maures, du 22 au 25 octobre 2012 22/03/2012