Gaetano Maron, Presentazione T2 LNL-Padova, Legnaro 22 dicembre 2005 1 Il centro di calcolo Tier2 di LNL-PD Gaetano Maron.

Presentazione sul tema: "Gaetano Maron, Presentazione T2 LNL-Padova, Legnaro 22 dicembre 2005 1 Il centro di calcolo Tier2 di LNL-PD Gaetano Maron."— Transcript della presentazione:

1 Gaetano Maron, Presentazione T2 LNL-Padova, Legnaro 22 dicembre 2005 1 Il centro di calcolo Tier2 di LNL-PD Gaetano Maron

2 Gaetano Maron, Presentazione T2 LNL-Padova, Legnaro 22 dicembre 2005 2 Legnaro LHC Computing Centre Tier 2 Provides local computing capability and storage to the CMS experiment since 2001 It joined the first Grid testbeds (DataGrid and INFNGrid) in 2002 and the LHC Computing Grid (LCG) in 2003, now providing grid access to all the LCH experiments. It contributes to all the CMS MC productions and analysis both as local production and grid wide production It is Tier 2 candidate for CMS and ALICE experiments 2001 2005 CMS Computing Power 200 KSI2K Storage 25 TB 2008 CMS+Alice Computing Power 1415 KSI2K Storage 555 TB 2010 CMS+Alice Computing Power 3800 KSI2K Storage 1132 TB

3 Gaetano Maron, Presentazione T2 LNL-Padova, Legnaro 22 dicembre 2005 3 Servizi Coinvolti nel T2 Divisione Ricerca / STIE Divisione Tecnica –Servizio Impianti e Sicurezze (R. Pegoraro) –Servizio Edilizia ed attivita Generali (E. Brezzi)

4 Gaetano Maron, Presentazione T2 LNL-Padova, Legnaro 22 dicembre 2005 4 T2 computing center layout 10 GE backbone DS1DSn To WAN DPM Computing Nodes (Blade Centers) Local Servers GW UI Local Gateway CE GigaEth SWITCH N1 N14 GigaEth SWITCH N1 N14 GigaEth SWITCH N1 N14 GigaEth SWITCH N1 N14 GigaEth N1 N14 DS1DS2 SRM Storage Element Grid GateKeeper Grid User Interface SWITCH DSn SAN

5 Gaetano Maron, Presentazione T2 LNL-Padova, Legnaro 22 dicembre 2005 5 CMS + Alice 200520062007200820092010 CPU (kSI2K) 140280753141526403800 Disk (TB)30732065559121132 CPU (#box)3965123178214237 CPU (#disk) 91171319551622608 #Racks24791113 Potenza (kW) 254080130170200

6 Gaetano Maron, Presentazione T2 LNL-Padova, Legnaro 22 dicembre 2005 6 CPU Form Factor GigaEth N1 Nn SWITCH Mng Module Blade form factor back-plane embedded network/san switches embedded mng module (kvm like) hot swap replacement redundant power supply, switch, etc.

7 Gaetano Maron, Presentazione T2 LNL-Padova, Legnaro 22 dicembre 2005 7 Sistemi di Storage 2000 - DAS 2002 – DAS Rack mounted 24 dischi – 5 U 2005 SAN Direct Access Disk Server Ata/Sata Disk -Cntrl FCS Sata FCS Switch Storage Area Network Disk Servers

8 Gaetano Maron, Presentazione T2 LNL-Padova, Legnaro 22 dicembre 2005 8 Sala III – Ground Floor CPU + Dischi SALA 0009 per CPU ~ 60 m 2 / 150 kW SALA 0022 per STORAGE ~ 40 m 2 / 50 kW UPS sala 22 Frigoriferi Sala 9 Gruppo Elettrogeno Tier 2 Storage T2 Farm LNL Servizi

9 Gaetano Maron, Presentazione T2 LNL-Padova, Legnaro 22 dicembre 2005 9 Sala III underground: UPS 0002 UPS per sala 9

10 Gaetano Maron, Presentazione T2 LNL-Padova, Legnaro 22 dicembre 2005 10 Possibili Estensioni Sala equivalente della 0009 al piano 1 Utilizzo completo della sala 0022

11 Gaetano Maron, Presentazione T2 LNL-Padova, Legnaro 22 dicembre 2005 11 Centro Stella della farm RC1 RC2 RC3 RC8 RD1 RD2 RD5 10 Gbps backbone 40 Gbps 50 Gbps Racks CPUsRacks dischi ~ 1 Gbps per nodo

12 Gaetano Maron, Presentazione T2 LNL-Padova, Legnaro 22 dicembre 2005 12 Collegamento con il T3 di Padova RC1 RC2 RC3 RC8 RD1 RD2 RD5 10 Gbps backbone Dark fiber 10 Gpbs Link diretto senza passare per Il router di sezione PRO piu economico non interferisce con il router possibilita di accedere ai dati direttamente (dCache/DPM) varie possibilita di operare T2 LNL Backup T3 Pd RC1 RC2 RC3 RC8 RD1 RD2 RD5 10 Gbps backbone T2 LNL Router Pd Router LNL Al pop Pd T3 Pd Llink attraverso I router Architettura standard, ben conosciuta e testata Da definire con attenzione le specifiche del T3 e preparare dei test bed. Soluzione a 1 Gbps gia pronta da testare Cisco 6509 CEF720 4 porte 10 Gbps

13 Gaetano Maron, Presentazione T2 LNL-Padova, Legnaro 22 dicembre 2005 13 Consumo CPU e dischi

14 Gaetano Maron, Presentazione T2 LNL-Padova, Legnaro 22 dicembre 2005 14 25 SI2K/W Limite a 600 W Limite 600 (+ 50%)

15 Gaetano Maron, Presentazione T2 LNL-Padova, Legnaro 22 dicembre 2005 15 Potenza Elettrica per il T2

16 Gaetano Maron, Presentazione T2 LNL-Padova, Legnaro 22 dicembre 2005 16 Impianti frigoriferi La sala 0022 e’ gia condizionata (fino a 90 kW non ridondati) Condizionamento sala 0009 (60 m 2 ) : sistema n+1 60 kW 2007 2008 Cooled water ai racks

17 Gaetano Maron, Presentazione T2 LNL-Padova, Legnaro 22 dicembre 2005 17 Rack CPU freddi per sala 0009 Il numero di rack per le CPU e’ stato calcolato in modo Da non superare mai i 20 kW per rack. Per le CPU pensiamo di utilizzare rack raffreddati ad acqua. Knurr 22 kW 12 Keuro/rack CIAT societa francese di condizionatori. Soluzione semplice scambiatore sulla porta posteriore ventole sulla stessa porta CMS on-line rack fino a 10 kW (2.5 Keuro/rack) Trattative in corso per 20 kW

18 Gaetano Maron, Presentazione T2 LNL-Padova, Legnaro 22 dicembre 2005 18 UPS + Gruppo elettrogeno La sala 0022 ha gia ups n+1 per un totale di 90 kW La sala 0009 avra’ 2 UPS da 200 kW l’uno Il centro T2 sara’ munito di un gruppo elettrogeno dedicato da 630 kW

19 Gaetano Maron, Presentazione T2 LNL-Padova, Legnaro 22 dicembre 2005 19 Costo Infrastrutture 20 40 5325 55 67 68 22 3 3 3 3 3 3 84 0 321 52 28 35 51 13 24 Con rack knurr

20 Gaetano Maron, Presentazione T2 LNL-Padova, Legnaro 22 dicembre 2005 20 Organigramma T2 Responsabile Gestione G. Maron (M. Biasotto) Responsabile Attivita CMS U. Gasparini Responsabile Attivita Alice L. Vannucci Responsabile Tecnico M. Biasotto Responsabile Impianti R. Pegoraro Responsabile interfaccia GRID S. Fantinel Servizi di Base Biasotto Berti Toniolo Sistemisti Biasotto Berti Toniolo Gulmini Badoer Outsourcing Tecnico A Tecnico B

21 Gaetano Maron, Presentazione T2 LNL-Padova, Legnaro 22 dicembre 2005 21 Personale del centro T2

22 Gaetano Maron, Presentazione T2 LNL-Padova, Legnaro 22 dicembre 2005 22