Gaetano Maron, Presentazione T2 LNL-Padova, Legnaro 22 dicembre Il centro di calcolo Tier2 di LNL-PD Gaetano Maron

Gaetano Maron, Presentazione T2 LNL-Padova, Legnaro 22 dicembre Legnaro LHC Computing Centre Tier 2 Provides local computing capability and storage to the CMS experiment since 2001 It joined the first Grid testbeds (DataGrid and INFNGrid) in 2002 and the LHC Computing Grid (LCG) in 2003, now providing grid access to all the LCH experiments. It contributes to all the CMS MC productions and analysis both as local production and grid wide production It is Tier 2 candidate for CMS and ALICE experiments CMS Computing Power 200 KSI2K Storage 25 TB 2008 CMS+Alice Computing Power 1415 KSI2K Storage 555 TB 2010 CMS+Alice Computing Power 3800 KSI2K Storage 1132 TB

Gaetano Maron, Presentazione T2 LNL-Padova, Legnaro 22 dicembre Servizi Coinvolti nel T2 Divisione Ricerca / STIE Divisione Tecnica –Servizio Impianti e Sicurezze (R. Pegoraro) –Servizio Edilizia ed attivita Generali (E. Brezzi)

Gaetano Maron, Presentazione T2 LNL-Padova, Legnaro 22 dicembre T2 computing center layout 10 GE backbone DS1DSn To WAN DPM Computing Nodes (Blade Centers) Local Servers GW UI Local Gateway CE GigaEth SWITCH N1 N14 GigaEth SWITCH N1 N14 GigaEth SWITCH N1 N14 GigaEth SWITCH N1 N14 GigaEth N1 N14 DS1DS2 SRM Storage Element Grid GateKeeper Grid User Interface SWITCH DSn SAN

Gaetano Maron, Presentazione T2 LNL-Padova, Legnaro 22 dicembre CMS + Alice CPU (kSI2K) Disk (TB) CPU (#box) CPU (#disk) #Racks Potenza (kW)

Gaetano Maron, Presentazione T2 LNL-Padova, Legnaro 22 dicembre CPU Form Factor GigaEth N1 Nn SWITCH Mng Module Blade form factor back-plane embedded network/san switches embedded mng module (kvm like) hot swap replacement redundant power supply, switch, etc.

Gaetano Maron, Presentazione T2 LNL-Padova, Legnaro 22 dicembre Sistemi di Storage DAS 2002 – DAS Rack mounted 24 dischi – 5 U 2005 SAN Direct Access Disk Server Ata/Sata Disk -Cntrl FCS Sata FCS Switch Storage Area Network Disk Servers

Gaetano Maron, Presentazione T2 LNL-Padova, Legnaro 22 dicembre Sala III – Ground Floor CPU + Dischi SALA 0009 per CPU ~ 60 m 2 / 150 kW SALA 0022 per STORAGE ~ 40 m 2 / 50 kW UPS sala 22 Frigoriferi Sala 9 Gruppo Elettrogeno Tier 2 Storage T2 Farm LNL Servizi

Gaetano Maron, Presentazione T2 LNL-Padova, Legnaro 22 dicembre Sala III underground: UPS 0002 UPS per sala 9

Gaetano Maron, Presentazione T2 LNL-Padova, Legnaro 22 dicembre Possibili Estensioni Sala equivalente della 0009 al piano 1 Utilizzo completo della sala 0022

Gaetano Maron, Presentazione T2 LNL-Padova, Legnaro 22 dicembre Centro Stella della farm RC1 RC2 RC3 RC8 RD1 RD2 RD5 10 Gbps backbone 40 Gbps 50 Gbps Racks CPUsRacks dischi ~ 1 Gbps per nodo

Gaetano Maron, Presentazione T2 LNL-Padova, Legnaro 22 dicembre Collegamento con il T3 di Padova RC1 RC2 RC3 RC8 RD1 RD2 RD5 10 Gbps backbone Dark fiber 10 Gpbs Link diretto senza passare per Il router di sezione PRO piu economico non interferisce con il router possibilita di accedere ai dati direttamente (dCache/DPM) varie possibilita di operare T2 LNL Backup T3 Pd RC1 RC2 RC3 RC8 RD1 RD2 RD5 10 Gbps backbone T2 LNL Router Pd Router LNL Al pop Pd T3 Pd Llink attraverso I router Architettura standard, ben conosciuta e testata Da definire con attenzione le specifiche del T3 e preparare dei test bed. Soluzione a 1 Gbps gia pronta da testare Cisco 6509 CEF720 4 porte 10 Gbps

Gaetano Maron, Presentazione T2 LNL-Padova, Legnaro 22 dicembre Consumo CPU e dischi

Gaetano Maron, Presentazione T2 LNL-Padova, Legnaro 22 dicembre SI2K/W Limite a 600 W Limite 600 (+ 50%)

Gaetano Maron, Presentazione T2 LNL-Padova, Legnaro 22 dicembre Potenza Elettrica per il T2

Gaetano Maron, Presentazione T2 LNL-Padova, Legnaro 22 dicembre Impianti frigoriferi La sala 0022 e’ gia condizionata (fino a 90 kW non ridondati) Condizionamento sala 0009 (60 m 2 ) : sistema n+1 60 kW Cooled water ai racks

Gaetano Maron, Presentazione T2 LNL-Padova, Legnaro 22 dicembre Rack CPU freddi per sala 0009 Il numero di rack per le CPU e’ stato calcolato in modo Da non superare mai i 20 kW per rack. Per le CPU pensiamo di utilizzare rack raffreddati ad acqua. Knurr 22 kW 12 Keuro/rack CIAT societa francese di condizionatori. Soluzione semplice scambiatore sulla porta posteriore ventole sulla stessa porta CMS on-line rack fino a 10 kW (2.5 Keuro/rack) Trattative in corso per 20 kW

Gaetano Maron, Presentazione T2 LNL-Padova, Legnaro 22 dicembre UPS + Gruppo elettrogeno La sala 0022 ha gia ups n+1 per un totale di 90 kW La sala 0009 avra’ 2 UPS da 200 kW l’uno Il centro T2 sara’ munito di un gruppo elettrogeno dedicato da 630 kW

Gaetano Maron, Presentazione T2 LNL-Padova, Legnaro 22 dicembre Costo Infrastrutture Con rack knurr

Gaetano Maron, Presentazione T2 LNL-Padova, Legnaro 22 dicembre Organigramma T2 Responsabile Gestione G. Maron (M. Biasotto) Responsabile Attivita CMS U. Gasparini Responsabile Attivita Alice L. Vannucci Responsabile Tecnico M. Biasotto Responsabile Impianti R. Pegoraro Responsabile interfaccia GRID S. Fantinel Servizi di Base Biasotto Berti Toniolo Sistemisti Biasotto Berti Toniolo Gulmini Badoer Outsourcing Tecnico A Tecnico B

Gaetano Maron, Presentazione T2 LNL-Padova, Legnaro 22 dicembre Personale del centro T2

Gaetano Maron, Presentazione T2 LNL-Padova, Legnaro 22 dicembre