1 M. Biasotto – Legnaro, 22 Dicembre 2005 Prototipo Tier 2 di Legnaro-Padova INFN Legnaro.

Presentazione sul tema: "1 M. Biasotto – Legnaro, 22 Dicembre 2005 Prototipo Tier 2 di Legnaro-Padova INFN Legnaro."— Transcript della presentazione:

1

2 1 M. Biasotto – Legnaro, 22 Dicembre 2005 Prototipo Tier 2 di Legnaro-Padova INFN Legnaro

3 2 M. Biasotto – Legnaro, 22 Dicembre 2005 2000: Prototipo farm Linux LNL – 10 nodi di calcolo (vecchi PC riciclati), 1 disk server, 1 gateway – Esperienza setup e gestione farm: installazione automatica, monitoring, batch system, ecc. – In produzione da gennaio 2001 – Mantenuta negli anni in parallelo al prototipo T2 – Utenti LNL: Auriga, Prisma, Gasp, N_TOF, Garfield, Div. Acceleratori, ecc. Foto farm LNL

4 3 M. Biasotto – Legnaro, 22 Dicembre 2005 Prototipo T2: 2001 Setup e avvio Farm CMS-INFNGRID 34 nodi di calcolo, 10 disk server: 44 box, 88 CPU, ~35 kSI2000, ~3 TB infrastruttura logistica – stanza di 70mq, 30 KW (iniziali, poi espansi a 90), UPS e raffreddamento – scaffali e PC minitower al posto di rack Tools di installazione e gestione – installazione automatica, batch system (LSF) – monitoring (MRTG)

5 4 M. Biasotto – Legnaro, 22 Dicembre 2005 Prototipo T2: 2001

6 5 M. Biasotto – Legnaro, 22 Dicembre 2005 Prototipo T2: 2001

7 6 M. Biasotto – Legnaro, 22 Dicembre 2005 Prototipo T2: 2002 + 24 nodi di calcolo (+12 ksi2000) + 3 server nuovi, + upgrade vecchi (+6 TB) nuovo tool di monitoring (Ganglia)

8 7 M. Biasotto – Legnaro, 22 Dicembre 2005 Prototipo T2: 2003 + 14 nodi di calcolo dual Xeon 2.4GHz + 1 BladeCenter IBM (14 nodi calcolo) + 2 disk server da 5TB (HD IDE + RAID 3ware) Attivato il link 1Gbps verso il GARR

9 8 M. Biasotto – Legnaro, 22 Dicembre 2005 Prototipo T2: 2004 + 4 Blade Centers Intel + disk server da 5TB + 1 switch 48 porte GE - dismissione vecchie macchine

10 9 M. Biasotto – Legnaro, 22 Dicembre 2005 Prototipo T2: 2005 no upgrade hardware dismissione vecchie macchine piccolo upgrade adesso per inizio 2006: 6 nodi di calcolo dual-core e nuovo storage SATA-FC\

11 10 M. Biasotto – Legnaro, 22 Dicembre 2005

12 11 M. Biasotto – Legnaro, 22 Dicembre 2005 Remstats example

13 12 M. Biasotto – Legnaro, 22 Dicembre 2005 Remstats vs MRTG

14 13 M. Biasotto – Legnaro, 22 Dicembre 2005

15 14 M. Biasotto – Legnaro, 22 Dicembre 2005 Configurazione GATEWAY SERVERS COMPUTING NODES OS DATA OS LOCAL DATA RAID 0 HW Users home App. software OS RAID 1 HW RAID 0 SW NFS

16 15 M. Biasotto – Legnaro, 22 Dicembre 2005 LCFG: sviluppo futuro ldxprof Load Profile Generic Component Profile Object rdxprof Read Profile LCFG Objects Local cache Client nodes Web Server HTTP XML Profile LCFG Config Files Make XML Profile Server Software Repository (RPMs) Installation Server (DHCP, kernel images installroot) NFS Software Repository (RPMs) FTP HTTP NMA Objects NMA Config Cache Manager Configuratio n DataBase Bootstrap Service Images PXE TFTP DHCP User Interface

17 16 M. Biasotto – Legnaro, 22 Dicembre 2005 Attivita CMS: 2001 Produzione MC e analisi per CMS (quanti eventi? chiedere a Lacaprara)

18 17 M. Biasotto – Legnaro, 22 Dicembre 2005 Attivita CMS: 2002 Spring 2002 Production: 1.2 milioni di eventi simulati a LNL per un totale di 1.5 TB di dati Analisi in locale e trasferimento al CERN CMS-EDG stress test

19 18 M. Biasotto – Legnaro, 22 Dicembre 2005 Attivita CMS: 2003 PCP03 Production: oltre 5 milioni di eventi simulati a LNL (10% del totale) Analisi in locale e trasferimento al CERN

20 19 M. Biasotto – Legnaro, 22 Dicembre 2005 Attivita CMS: 2004 Lattivita di produzione in CMS comincia a spostarsi su grid Produzioni MC in locale: 3.2 M eventi, per la maggior parte DST di dataset prodotti l'anno prima Produzioni MC via grid (quanti job o eventi?) Publishing dei dati locali (PubDB) per analisi a tutto CMS via grid tools: ~5 TB di dati

21 20 M. Biasotto – Legnaro, 22 Dicembre 2005 Attivita CMS: 2005 Produzioni MC locali: 1M eventi DST + 4M Hit+Digi cosmici Produzioni MC via grid (quanti job o eventi?) Service Challenge 3: trasferimenti T1CNAF-T2LNL in entrambe le direzioni (alcuni TB di dati, rate ~20MB/s), test DPM

22 21 M. Biasotto – Legnaro, 22 Dicembre 2005

23 22 M. Biasotto – Legnaro, 22 Dicembre 2005 Layout farm LNL 2002: produzione + analisi FastEth 32 – GigaEth 1000 BT SWITCH N1 FastEth SWITCH S1 S11 N24 N1 FastEth SWITCH N1 N24 S10 To WAN 34 Mbps 2001 ~ 1Gbps 2002 S12 S13 Production computing nodes Analysis computing nodes Production servers Analysis servers

24 23 M. Biasotto – Legnaro, 22 Dicembre 2005 Configurazione farm ibrida FastEth GE backbone GE backbone SWITCH N1FastEth SWITCHS1 SE1 N24FastEth SWITCHSn To WAN SE2 SE3 ComputingNodes ComputingNodes Local Servers Grid Storage Elements GWG1 UI Local Gateway Local Login CE N1 N24

25 24 M. Biasotto – Legnaro, 22 Dicembre 2005 Layout farm CMS: production + analysis + grid FastEth 32 – GigaEth 1000 BT SWITCH N1 FastEth SWITCH S1 S10 N24 N1 FastEth SWITCH N1 N24 S9 To WAN 34 Mbps 2001 ~ 1Gbps 2002 S11 S12 Production computing nodes Analysis computing nodes Production servers Analysis servers GW G1 G2 CE S10 S11 SE N1 N24 N1 N1 UI