29 mars 2006J-P Meyer1 Evaluation des besoins en infrastructures et réseau  Evaluation des besoins en infrastructures  Evaluation des besoins réseau.

Présentation au sujet: "29 mars 2006J-P Meyer1 Evaluation des besoins en infrastructures et réseau  Evaluation des besoins en infrastructures  Evaluation des besoins réseau."— Transcription de la présentation:

1 29 mars 2006J-P Meyer1 Evaluation des besoins en infrastructures et réseau  Evaluation des besoins en infrastructures  Evaluation des besoins réseau  Tests de Transferts (T2-T2, T2-T1)

2 29 mars 2006J-P Meyer2  Evaluation des besoins en infrastructures Eléments de calcul Nb Wel/cpu100 Nb Wth/cpu70 Nb Ksi2k/cpu1,2 Nb U/cpu0,25 Annéeksi2kWelecWthNb U 2006806666466717 2007210175001225144 20087206000042001150 2009128010666674667267  Eléments de calcul Bi Optéron Bi cœur 2.2 GHz 2 disques, alim unique, 1U,... Hors machines de service: UI,SE,CE,BDII,RB,DPM

3 29 mars 2006J-P Meyer3  Eléments de stockage Eléments de stockage Nb Wele/TB51 Nb Wth/TB51 Nb U/TB0,8 Nb Serv/TB0,2 Nb Wel/Serv350 Nb Wth/Serv300 Nb U/Serv2 AnnéeTBWeleWthNb U 2006202420222024 2007556655610566 20082102541023310252 20094104961045510492 + NAS 4U 2U 6TB brut  5 TB effectifs Bi-pro mono cœur +

4 29 mars 2006J-P Meyer4 AnnéeWeleWthNb RackNb m2 200690866887210 20072415518356420 200885410653111260 200915627612017723115  Total infrastructures 2m rack 1m 0,6m 98m 2 5m 2 /rack Tout est indicatif: erreur estimée: +- 20% Surestimé?

5 29 mars 2006J-P Meyer5  Evaluation Besoins Réseaux  en interne en partant des jobs réalisables sur la partie T2 du DAPNIA  avec l’extérieur en partant de l’espace disque disponible et des données AOD souhaitées sur le T2

6 29 mars 2006J-P Meyer6  Les besoins réseau : en interne AnnéeCPU(ksi2k)Disque (TB) 2006 8020 2007 21055 2008 720210 2009 1280410 Nb ksi2k/WN5,2 Nb cpu/WN4(Bi pro Bi cœur) Nb anajob/cpu0,25(1 Job/WN) Nb simjob/cpu0,75(3 Jobs/WN) Trafic/simjob0,1 (Mb/s)(650Mo/18h) trafic/anajob100 (Mb/s)(12,5Go/1000s) Trafic/WN 100,3 (Mb/s) (en moyenne) Nb FS/TB0,2(5TB/serveur)

7 29 mars 2006J-P Meyer7 Chaine de traitement des données: Pythia, MC@NLO,HERWING,... (simule la collision p-p) GEANT3, GEANT4, … (simule la réponse du détecteur) reconstruction simulation génération ASCII  ROOT ROOT analyse ROOT (AOD et/ou ESD) ATHENA Reco (reconstruction des traces,…) ROOT (RooTup final) analyse finale publication Programme de filtrage (sélection d’un canal de physique) histogrammes Coupures finales, … (réjection du bruit de fond) 0,1 Mb/s 1 Mb/s 100 Mb/s

8 29 mars 2006J-P Meyer8 AnnéeNb WN Trafic Rés.Nb job Nb serv. Trafic Ser. Fic. (Mb/s)analysesimulationfichier(Mb/s) 200615150515454376 20074040124012011365 20081381384113841442330 20092462467424673882301  Le trafic engendré (en interne):  Performances mesurées: Interne Serveur de fichier: Lec.  1.2 Gb/s; Ecr.  1 Gb/s Réseau Serveur de fichier: 800 Mb/s Actuellement: 1 serveur de fichier pour 10 TB  Le trafic engendré par 1 job d’analyse/WN sature déjà la configuration 2006  il faut passer à 1 serveur de fichier pour 5 TB Trafic interne DAPNIA: (1/4 job d’ana. 3/4 job de simul.)

9 29 mars 2006J-P Meyer9  Evaluation Besoins Reseaux  en interne en partant des jobs réalisables sur la partie T2 du DAPNIA  avec l’exterieur en partant de l’espace disque disponible et des données AOD souhaitées sur le T2

10 29 mars 2006J-P Meyer10 Le trafic engendré (externe)(1/2) Trafic externe entrant: (AOD dispo. en 4 semaines max) AnnéeGRIF (Mb/s)DAPNIA (Mb/s) 20066020 2007670200 20081540460 20092020600 2eme hypothèses : En partant de l’espace disque disponible et des données AOD souhaitées sur le T2

11 29 mars 2006J-P Meyer11 Le trafic engendré (externe) (2/2) Trafic externe sortant: (SIMUL vers Tier1) (3/4 des jobs) AnnéeGRIF (Mb/s)DAPNIA (Mb/s) 20063010 20077020 200821565 200932095 Trafic inter-site: ATLAS (LAL,DAPNIA,LPNHE) Année Trafic Rés. In Trafic Rés. Out (Mb/s) 2006300 2007800 20082800 20094900 Supposons que 10% des jobs d’analyse vont lire les données sur un autre site

12 29 mars 2006J-P Meyer12 Tests de transferts pré SC4 en cours cette semaine pour le LAL, le LPNHE et le DAPNIA. Début des tests officiels SC4 T1  T2 en juin… Tests effectués DAPNIA - LAL et DAPNIA – LYON avec des outils classiques (lcg-cr, lcg-rep, lcg-cp) mais à partir d’un seul serveur de fichier pour le moment.  Résultats un peu décevant: - Transferts DAPNIA-LAL (100 Mbit/s)  saturation - DAPNIA-LYON (SE 01 ) (80 Mbits/s)  SE 01 à 100Mbit/s - Transferts DAPNIA-LAL+DAPNIA-LYON  120 Mbits/s  on s’attendrait plutôt à 180 Mbit/s - en interne au DAPNIA UI-SE avec les mêmes outils on atteint 600 Mbits/s! Ou est la limitation?