04/06/20151J-P Meyer GRIF-10ans déjà! ( )http://grif.fr.

Slides:



Advertisements
Présentations similaires
18 avril 2002réunion Datagrid France1 E-toile Plate-forme RNTL 2001 Environnement matériel et logiciel pour le développement et l expérimentation de grille.
Advertisements

Grille Régionale Rhône-Alpes Institut des Grilles du CNRS Yonny CARDENAS CC-IN2P3 Réunion du groupe de travail grilles Projet CIRA Grenoble, le 2 Juin.
Présentation préparée avec C. Germain, B. Kegl et M. Jouvin.
Lexpertise au service de vos besoins. Notre entreprise (Alex) Contexte (Nico) Objectifs Enjeux Rappel de lexistant Réseau local (Manu) Réseau étendu (Claire)
15 décembre 2005C. Leroy1 État d’avancement du Projet GRIF  Le projet GRIF  État des lieux fin 2005  Vers un nœud unique multi site  Évolution du projet.
Planification budgétaire Tier-2s Tier-3s Fairouz Malek, Fabio Hernandez, Frédérique Chollet Comité de direction 7 juillet 2008.
Biennale du LPNHE 2011, 20/09/ Le projet GRIF-UPMC : évolution et utilisation Liliana Martin Victor Mendoza Frédéric Derue
Réseaux LCG France Réunion LCG France 18 Mai 2009.
Services de production grille en France Gilles Mathieu IN2P3-CC France Grilles Frédérique Chollet IN2P3-LAPP LCG France Rencontres France Grilles et LCG-France,
Centre de Calcul de l'IN2P3 - Lyon Toulouse - Lyon, 21 décembre 2004 Les projets de grille au Centre de Calcul de l’IN2P3.
Alice LCG Task Force Meeting 16 Oct 2008Alice LCG Task Force Meeting 16 Oct 2008 BARBET Jean-Michel - 1/20BARBET Jean-Michel - 1/20 LCGFR Marseille Juin.
EGEE is a project funded by the European Union under contract IST Noeud de Grille au CPPM.
J-P MEYER Présentations invitées et Tables rondes ou Morceaux choisis et vue biaisée d’un physicien.
1 Directive sur les services mobiles réguliers Rapport d’étape Présentation au Comité d’orientation en matière de santé et sécurité 9 septembre 2009.
20 mars 2006J-P Meyer1 Le Projet GRIF (Grille de Recherche d’Île de France)  La Grille de Calcul: Qu’est ce que c’est?  Histoire de la Grille: Morceaux.
CEA-DAPNIAPierrick Micout Réunion Tier 2 « Ile de France » 22 juin 2005.
Frédérique Chollet Yannick Patois Réunion LCG-France, Nantes 19 septembre 2012 Résultats du questionnaire DPM.
Résumé CHEP 2010 Distributed processing and analysis Grid and cloud middleware Thèmes : 1.
Le noeud de grille Tier 3 LAPP.
Comité scientifique GRIF, 19/01/ LPNHE Paris Projet GRIF au LPNHE Paris Le 2 février prochain il y aura une revue de projet au LPNHE. Le projet GRIF.
17/05/20101J-P Meyer GRIF-STATUS Etat du site Nos engagements vis-à-vis d’ATLAS.
19 janvier 2006J-P Meyer1 Revue du projet GRIF  Les enjeux scientifiques (J-P Meyer)  Le calcul au LHC  Les Projet EGEE et LCG  Le projet GRIF  La.
L’environnement Labo : Laboratoire de Physique des Particules d’Annecy-le vieux: LAPP (PP, Astro) Effectif du labo : 144 personnes Nombre d’IT : 76 dont.
19 septembre 2005J-P MEYER et M. JOUVIN Démonstrateur de fédération de nœuds de grille EGEE-LCG en région Île de France Projet 1/2 Le contexte:  Préparation.
Michel Jouvin LAL/Orsay
Les fermes de PCs au Centre de Calcul de l’IN2P3 Journée « ferme de PCs » 27 juin 2000 Benoit Delaunay
U. Bassler Colloque calcul : moyens en informatique DU 17/03/14.
Calcul et Grille CMS ou comment on extrait les aiguilles de la botte de foin Conseil scientifique LLR 14/10/2010 C. Charlot.
29 mars 2006J-P Meyer1 Evaluation des besoins en infrastructures et réseau  Evaluation des besoins en infrastructures  Evaluation des besoins réseau.
9ème Forum Utilisateurs CATIA CERN Retour d‘expérience IN2P3 08 novembre 2011V. Boninchi1.
GRIF Status Michel Jouvin LAL/Orsay
Hébergement d’une infrastructure de Cloud Expérience d’un laboratoire Guillaume Philippon.
Retour d'expérience de l'utilisation du cloud comme infrastructure de service Guillaume PHILIPPON.
BaBar France 18/01/2010 Vincent Poireau 1 Page d’aide :
5 mai 2008J-P Meyer1 Eléments de réflexion pour une ressource d’analyse - Trois exemples de travaux d’analyses effectuées à l’IRFU dans ATLAS: 1) AOD –>
LYON G.Lamanna Introduction Giovanni Lamanna IN2P3 Informatique Lyon 12 février 2014.
Bilan 2012, perspectives 2013 Conseil de Groupement – 21/2/2013 V. Breton La grandeur des actions humaines se mesure à l’inspiration qui les fait naître.
U. Bassler Résumée du Colloque Calcul DU 17/03/14.
PUGNERE Denis Institut de Physique Nucléaire de Lyon Rencontres LCG-France mai 2013 – LLR Palaiseau.
1.Rapide rappel de l’enquête 2.Quelques éléments chiffrés 3.Les préconisations et urgences 4.Et depuis décembre ? 5.Comment assurer un suivi par la suite.
Développement des templates Quattor de gLite à EMI Guillaume PHILIPPON.
Utilisation de Quattor par GRIF Michel Jouvin LAL/Orsay
Réunion EGEE France 11/6/2004Page 1Rolf Rumler Structure de l’exploitation d’EGEE.
Grid au LAL Michel Jouvin LAL / IN2P3
Mercredi 7 novembre 2007 Dominique Boutigny Activités et Évolution du CC-IN2P3 Réunion des Expériences 2007.
Réseau "Détecteurs semi-conducteurs" Journée instrumentation, Paris, 27 novembre 2012.
Biennale du LPNHE 2011, 20/09/ Le projet GRIF-UPMC : évolution et utilisation Liliana Martin Victor Mendoza Frédéric Derue
6-7 Octobre 2008J-P MEYER1 Conclusions du groupe de travail thématique 7 Physique subatomique: - physique des particules, - physique nucléaire, - astroparticules.
C. Charlot, LLR Ecole Polytechnique DC04 CMS Objectif numéro 1: préparation du traitement offline Différent des productions MC précédentes Mise en route.
Conseil de Coordination du Réseau des Informaticiens (CCRI) A la demande du nouveau chargé de mission informatique, une réunion a eu lieu le 30 Janvier.
Configuration des sites Intérêt de la mutualisation ! Existant avec Quattor Tendance Puppet Discussion.
Projet LCG: Vue d’Ensemble Fabio Hernandez Responsable Technique LCG-France Centre de Calcul de l’IN2P3 Rencontre IN2P3/STIC Grenoble, 25.
12/11/20151J-P Meyer GRIF aujourd’hui et demain ( )
1er septembre 2005J-P Meyer1 Statut du projet GRIF (Grille de Recherche d’Île de France) Rappel du projet But: Mettre en place une ressource d’analyse.
Présentation au conseil scientifique. Une e-infrastructure dédiée au traitement des données Infrastructure distribuée, par les utilisateurs, pour les.
Fabio Hernandez Lyon, 9 novembre 2006 LCG-France Tier-1 Réunion de Coordination.
Réunion des sites LCG France- Marseille juin ACTIVITES DU GROUPE ACCOUNTING FRANCE GRILLES Cécile Barbier (LAPP)
LCG France point Réseau Mai 2013.
Tier 2 au LAPP. Plan Historique Objectifs Infrastructures Status/métriques Avenir Conclusion.
Equipe Projets Grille Fabio Hernandez Centre de Calcul de l’IN2P3 Lyon, 28 mai 2004.
 Lois et constituants de l'Univers 1. Astroparticules, astrophysique nucléaire, cosmologie 2. Physique hadronique et nucléaire 3. Physique des particules.
Communication LHC-France, LPNHE 29 juin 2006 Perrine Royole-Degieux 1 Communication LHC.
FORMATION BE-OP-TI EDMS XXXXXX05/03/16 FORMATION DES OPERATEURS TI 1.
F. DERUE, Réunion des sites LCG France, LPNHE, 20 mars Historique et but 2. Projet scientifique 3. Projet technique 4. Suivi des productions.
1DSM - IRFU / PM Compte rendu du site GRIF.
Le Centre de Calcul de l'IN2P3 7 septembre 2010 Dominique Boutigny Un instrument informatique de pointe au service de la recherche Rencontre avec Oracle.
Réunion des utilisateurs de MUST 8 juillet 2011 Bourget du Lac.
Réseau LCG-France LCG France 11/2008 Centre de Calcul de l'IN2P3/CNRS.
Statut du T2 Île de France
Le Projet GRIF Efficient Handling and processing of
Transcription de la présentation:

04/06/20151J-P Meyer GRIF-10ans déjà! ( )

04/06/2015J-P Meyer2 Un bref historique de GRIF l’IN2P3 et du CEA  création d’un centre Tier1 au CCIN2P3 décembre 2004 le LAL et le DAPNIA se concertent pour un Tier2 17 février 2005 réunion avec les laboratoires LHC d’IdF  DAPNIA, LAL, LPNHE participent au projet.  naissance de GRIF début mars 2015 septembre 2005 l’IPNO et le LLR participent à GRIF septembre 2006 adhésion de l’APC  GRIF devient un très gros bébé avec des problèmes de croissance  la question lancinante est: Comment financer le projet?  mais avec une équipe technique solide (~10 FTE): 2 DAPNIA, 2 LAL, 2LLR, 1 LPNHE, 1 IPNO, ~0,25 APC et un soutient de projet européen ~2FTE

04/06/2015J-P Meyer3 Le défi du calcul et système batch - Un système de batch unifié et supportant la charge Nombre de travaux en attente et en exécution le 2 juin h au DAPNIA (1 CE avec deux cœurs physiques)

04/06/2015J-P Meyer4 Nombre de travaux en attente et en exécution le 21 mai h00 à l’IRFU 2 CE dont un MCORE 5200 cœurs (HTon)

04/06/2015J-P Meyer5 Batchs GRIF Calcul: 1 cœurs/CPU en 2005  24 à 40 cœurs/CPU en 2015

04/06/2015J-P Meyer6 Un système de stockage unifié et pouvant accueillir plusieurs PetaByte de données. Le défi stockage Stockage: G/disque  6 à 8 T/disque Les méthodes d’accès se sont multipliées (srm, xrootd, http) Le nœud maitre du système de stockage DPM est saturé de requêtes pas moment.

04/06/2015J-P Meyer7 Le défi du financement Fonds Propres (k€) LCG-FR (k€) NON-LCG (k€) (k€) 3703,31446, ,0 63,64%24,86%11,50%

04/06/2015J-P Meyer8 Le défi des infrastructures 2004 PC de bureau sur des étagères 2006 machines rack 2007 stockage dense (Thumper X4500 SUN) 2009 machines twin + rack réfrigérés à l’eau 2010 C6000 dual-twin DELL, Blades,… 2015 FX2 DELL, … …… IRFU: 1 rack 2004  16 racks à eau

04/06/2015J-P Meyer : 1 rack dans 1 pièce de qq m2 LPNHE : 2 salles de 65 m2, ~20 racks GRIF, informatique LPNHE, autres labos

04/06/2015J-P Meyer10 Le défi du personnel 2005 ~ 8 FTE + 2 EGEE 2009 ~ 10 FTE + 2 EGI 2015 ~ 5,5 FTE Le défi de l’évolution continuel des logiciels - DataGrid - LCG - UMI -ZFS,NFS, XFS,LUSTER,CEPH -TORQUE, HTCONDOR -SL4,SL5,SL6,SL7, DEBIAN -QUATTOR, PUPPET -…. -CLOUD, HPC -BIGDATA ?

04/06/2015J-P Meyer11 - atteindre un niveau de disponibilité/fiabilité suffisant (>90%)  très facile au début avec une définition gros grain de GRIF ( plusieurs CE et SE par expérience) Disponibilité et fiabilité

04/06/2015J-P Meyer12  plus difficile avec la définition actuelle ou nos sous sites qui sont vu des expériences comme des T2 distincts. Moyenne des sous-sites/VO Disponibilité et fiabilité

04/06/2015J-P Meyer13 Tenir les engagements sur les ressources Ratio réalisé T2+T3 / 70% déclaration T2 - LCG considère qu’un site rempli ses engagement si efficacité est > 70% alors qu’en moyenne pour GRIF elle est plus proche de 90% - Nous intégrons une part T3 (~30%) qui n’est pas déclarée, mais dont les heures de calcul sont additionnées à celles du T2.

04/06/2015J-P Meyer14 GRIF et les VO Plus de 30 VO actives ce dernier mois et des engagements de fournir des ressources pour 7 VO (4LHC, HESS, CTA, HARPO)

04/06/2015J-P Meyer15

04/06/2015J-P Meyer16 75% LHC 10% Astro-Particule

04/06/2015J-P Meyer17 GRIF-10ans déjà! -l’aventure du LHC commence à peine!  prévoir les fêtes pour les 20 ans et les 30 ans de GRIF! -L’argent et surtout le personnel deviennent des ressources rares -L’évolution des technologies des réseaux et de l’informatique se poursuit à un rythme rapide -La concrétisation de l’université Paris-Saclay va probablement aussi bouleverser d’avantage le paysage informatique IdF. -Nous devons valoriser l’expérience du travail en commun et nous adapter à un contexte qui change.

04/06/2015J-P Meyer18 QUESTIONS?

04/06/2015J-P Meyer19 Le défi réseau - créer un site unifié vu de l’extérieur  problème de débit réseau  RENATER nous aide bien  problème de sécurité réseau  pour le moment on a survécu  problème de fiabilité (services non redondable)  problème d’administration et de spécificité des sous sites (CEA, CNRS, X)  pas la même culture et pas les mêmes réseaux 2,5G Juss-NRD Cachan Ors-NRD LPNHE 1G LAL 1G CEA 1G GRIF-IRFU 100mb IPNO LLR X 10mb 100mb 1G

04/06/2015J-P Meyer20 Réseau actuel GRIFOPN Le défis réseau

04/06/2015J-P Meyer21

04/06/2015J-P Meyer22