Gianpaolo Carlino Bologna, 6 Marzo 2007 Stato dei Tier-2 Italiani di ATLAS Attività nei Tier-2 Attività della Federazione dei Tier-2 Risorse disponibili nei Tier-2 Infrastrutture dei Tier-2

Bologna 6/3/2007Gianpaolo Carlino - Stato dei Tier2 di ATLAS2 ProtoTier-2 LNF: MDT: Calibrazioni e Performance (LNF) Higgs SM & MSSM (CS, LNF, RM1, RM2) Z’, Nuova Fisica (LNF, RM2) Tier-2 s.j. Milano Calorimetri (MI, PI), Pixel Detector (MI) Higgs SM & MSSM (MI, PI) Top (BO, PI, UD) SUSY (BO, MI, PV) Fisica del B (CS, GE, PI) Standard Model (PV) Tier-2 Napoli: SUSY (LE, NA) RPC – LVL1 & HLT Muon Trigger: Calibrazioni e Performance (BO, LE, NA, RM1, RM2) Tier-2 Roma: Higgs SM (RM1) Standard Model (RM3) Nuova Fisica (RM1) Calibrazioni MDT (CS, RM1, RM3) Attività nei Tier-2 italiani

Bologna 6/3/2007Gianpaolo Carlino - Stato dei Tier2 di ATLAS3 Attività del CSC nel periodo fine 2006, inizi 2007 Produzione: 40 M eventi di fisica e 80 M eventi di single particle in corso: inizio – fine: release 12 del software di ATLAS La release 12 permette di scegliere tra configurazioni geometriche di rivelatore ideale e “as installed”: Geometria ideale Geometria disallineata Geometria disallineata e “distorta” Mappa più realistica del campo magnetico (parziale asimmetria) Descrizione accurata del materiale inerte e dei canali morti Full trigger simulation e studio dei trigger menus Il Computing System Commissioning

Bologna 6/3/2007Gianpaolo Carlino - Stato dei Tier2 di ATLAS4 Attività del CSC nel periodo fine 2006, inizi 2007 Ricostruzione: Produzione ESD/AOD Replica AOD in tutti i Tier-1 e nell’insieme dei Tier-2 in modo da avere molto copie disponibili sulla griglia per l’analisi. Release Inizio 26-feb M eventi ricostruiti ad oggiAnalisi User analysis da effettuare completamente sulla griglia spedendo i job nei siti in cui sono replicati i dati. Il Computing System Commissioning

Bologna 6/3/2007Gianpaolo Carlino - Stato dei Tier2 di ATLAS5 Lavoro finalizzato nella prima metà del 2007 in una serie di note (CSC notes) Lo scopo non è quello di scrivere delle note (aggiornando i risultati del TDR di fisica) ma di rendere l’intero sistema funzionante e operativo per il data taking Sinergia tra attività di software/computing, studio di performances & analisi per evitare duplicazioni e creare integrazioni tra i gruppi Sono stati definiti circa 100 argomenti fra performances e studi di fisica 15 note con editore italiano (vedi presentazione Luminari) Risultati Preliminari: Trigger & Physics Week (18 Marzo) – Software Week (26 Marzo) Pubblicazione note: Giugno 2007 Le note CSC

Bologna 6/3/2007Gianpaolo Carlino - Stato dei Tier2 di ATLAS6 Produzione: Eventi di fisica contributo ~ 10% della Cloud Italiana Eventi di single particles produzione esclusiva nella Cloud Italiana Single Muon per studi di performance Muon Trigger Slice (15 M) occupazione spazio disco: ~ 8 TB dati formato DIGI Ricostruzione e Analisi: Copia completa AOD al CNAF e all’insieme dei Tier-2 spazio disco: 20 TB ricostruzione e distribuzione AOD (rel ) in atto, inizio: 26-2 finalizzazione analisi Contributo significativo al DDM Sviluppo di tool per la distrubuzione razionale degli AOD nei Tier-2 in base alle attività di analisi Analisi distribuita: test e utilizzo dei tool di accesso remoto ai dati e di analisi distribuita (GANGA) Attività CSC nei Tier-2 italiani

Bologna 6/3/2007Gianpaolo Carlino - Stato dei Tier2 di ATLAS7 Organizza la partecipazione INFN alle attività di servizio del computing di ATLAS – –Shifts nel Production System ( Doria, Vilucchi, Mei, Negri, Resconi, Campana al CERN ProdSys Coordinator) tutorial di Milano lo scorso settembre (primo in ATLAS) – –Correlato monitoring dei nostri siti e accounting (risultati DGAS da Barchiesi e De Salvo che permettono accounting singoli utenti e ruolo produzione, i primi per tutto ATLAS) – –Distribuzione dei dati in Italia ( Negri e’ l’esperto con aiuto Campana, ma Wen Mei LNF da poco disponibile ad impegno quasi a tempo pieno e da Napoli disponibilità a sviluppi in interfaccia per sottoscrizioni di liste specifiche) Messa a punto e controllo di DDM e componenti in Italia (LFC e Vobox al CNAF, SE nei 5 siti incluso CASTOR) in SC4 Messa a punto e controllo di DDM e componenti in Italia (LFC e Vobox al CNAF, SE nei 5 siti incluso CASTOR) in SC4 Sottoscrizione degli AOD per CSC e gestione trasferimenti Sottoscrizione degli AOD per CSC e gestione trasferimenti – –Supporto all’analisi in Italia Tutorial a Milano in febbraio (socondo in ATLAS), supporto installazioni GANGA, messa a punto (De Salvo) e implementazione in tutti i siti dell’accesso RFIO agli SE per analisi anche ROOT interattiva Rapprenta la comunità computing ATLAS Italia verso WLCG (CB) e verso ATLAS per le attività di servizio (per le risorse c’e’ NCB) La Federazione dei Tier-2 italiani

Bologna 6/3/2007Gianpaolo Carlino - Stato dei Tier2 di ATLAS8 CPUDisco WNCorekSI2kWNCorekSI2kTBTB LNF Milano Napoli ?? Roma totale : risorse periodo ott.2006 – oggi (vedi plot seguenti) 2007: risorse per CSC production e analisi Le Risorse dei Tier-2 italiani I Tier-2 di ogni “flavour” hanno contribuito a tutte le attività di computing di ATLAS Sviluppo Risorse vedi presentazione Luminari

Bologna 6/3/2007Gianpaolo Carlino - Stato dei Tier2 di ATLAS9 Utilizzo risorse LNF (10/2006 – 02/2007) During this period: 25 CPUs dedicated to ATLAS; 1 CPU dedicated to monitor tasks. The figure presents day by day the accumulated Wall_time for all jobs completing execution The same values are presented integrating over the period. The site was used 88% of the time by ATLAS users, 3% of the time by others and the total efficiency was 91%

Bologna 6/3/2007Gianpaolo Carlino - Stato dei Tier2 di ATLAS10 Utilizzo risorse Milano (10/2006 – 02/2007) Utilizzo risorse Milano (10/2006 – 02/2007) 53 CPU dedicated to ATLAS. 1 CPU dedicated to monitor tasks.

Bologna 6/3/2007Gianpaolo Carlino - Stato dei Tier2 di ATLAS11 Utilizzo risorse Napoli (10/2006 – 02/2007) Utilizzo risorse Napoli (10/2006 – 02/2007) 34 CPU Wall time efficiency = 86% Tutte le VO di LHC sono abilitate a utilizzare le risorse

Bologna 6/3/2007Gianpaolo Carlino - Stato dei Tier2 di ATLAS12 Utilizzo risorse Roma (01/2007 – 02/2007) Problemi LSF

Bologna 6/3/2007Gianpaolo Carlino - Stato dei Tier2 di ATLAS13 Wall clock time nei Tier-2 ATLAS

Bologna 6/3/2007Gianpaolo Carlino - Stato dei Tier2 di ATLAS14 Job sottomessi ai Tier-2 ATLAS

Bologna 6/3/2007Gianpaolo Carlino - Stato dei Tier2 di ATLAS15 Infrastruttura Tier-2 (sj) Milano La versione rivista del piano infrastrutturale è nel documento presentato all’apposita commissione in ottobre 2006 La commissione ha concluso che le soluzioni prospettate in particolare per il condizionamento (che aveva suscitato iniziali perplessità) come anche per i locali l’impianto elettrico sono soddisfacenti. Progressi da ottobre 2006: – –In novembre 2006 e’ stato completato il rifacimento dell’impianto elettrico dei locali secondo il piano – –E’ stato attivato il gruppo di continuità che garantisce 20’ di funzionamento – –E’ stato da poco reperito lo spazio adatto per installare il gruppo elettrogeno, che sta quindi per essere ordinato – –Nelle prossime settimane si prevede che partirà la gara per l’integrazione della sala macchine nel sistema di supervisione ed allarme tecnologico già attivo e funzionante per la parte impiantistica della Sezione Resta ancora da decidere solo il piano dettagliato (incluso il tipo di gas) per l’impianto anti-incendio I locali (vedi piantina seguente) sono sufficienti ad accogliere il Tier-2 di ATLAS come previsto a regime e tutta l’infrastruttura è già finanziata e in fase avanzata di implementazione.

Bologna 6/3/2007Gianpaolo Carlino - Stato dei Tier2 di ATLAS16 Infrastruttura Tier-2 (sj) Milano Pianta della sala macchine del centro calcolo con possibile distribuzione dei rack

Bologna 6/3/2007Gianpaolo Carlino - Stato dei Tier2 di ATLAS17 Sviluppo del Proto Tier-2 di Frascati: Non sono previsti al momento lavori infrastrutturali ma il centro e’ comunque in grado di espandersi oltre quanto previsto per il CPU: Nel RACK contenente gli attuali server e WN possono essere ancora installate ulteriori 16 blade che con la potenza di CPU attuali corrispondono a circa 100 KSI2K Un secondo RACK puo’ essere installato nell’attuale sala calcolo senza dover modificare gli impianti infrastrutturali. Per esempio 4 bay IBM da 9U, contenenti ognuno 14 lame bi-processori quad core potrebbero fornire una potenza di calcolo di almeno 650 KSI2K Storage: Il RACK esistente ospita attualmente tre bay di 3U contenenti ognuno 14 dischi. Ulteriori 10 bay contenenti dischi da 750 GB fornirebbero ulteriore storage pari a 705 TB Infrastruttura Proto Tier-2 LNF

Bologna 6/3/2007Gianpaolo Carlino - Stato dei Tier2 di ATLAS18 Programma dei lavori : Lavori edili preparazione sala: aprile Linee idrauliche impianti rifregerazione: maggio Lavori nuova linea elettrica (in parallelo): aprile-maggio Consegna ed istallazione armadi Kuerr: inizio maggio Consegna ed istallazione chiller Stulz: inizio giugno Piena operatività della sala: giugno 2007 Infrastruttura Tier-2 Roma

Bologna 6/3/2007Gianpaolo Carlino - Stato dei Tier2 di ATLAS19 Sistema di condizionamento e distribuzione dei rack Infrastruttura Tier-2 Roma

Bologna 6/3/2007Gianpaolo Carlino - Stato dei Tier2 di ATLAS20 Infrastruttura Tier-2 Napoli Sala Tier-2 INFN: Operativa da Dicembre Rack autocondizionati RITTAL, spazio disponibile e dimensionamento degli impanti per ospitare fino a 10 Rack Sistema antincendio in fase di installazione. Sistema di monitoraggio e gestione delle risorse sia presidiato che remoto in fase avanzata di sviluppo. Il gruppo elettrogeno sarà condiviso con il CED SCoPE Sala Progetto SCoPE: Gara edilizia: aggiudicata – fine lavori: ottobre Gara Risorse: in corso – fine lavori: febbraio 2008 Piena operatività della sala: febbraio 2008 Spazio totale disponibile: 30 Rack. Spazio disponibile Tier-2 ATLAS: 10 Rack

Gianpaolo Carlino - Stato dei Tier2 di ATLAS21 Bologna 6/3/2007 Tier-2 ATLAS e Prototipo SCoPE Rack Rittal + CMC Unit PC1 Monitoraggio ambientale (T, HV, UPS) PC3 HW Monitoring (Operating Systems) PC2 SW Monitoring (servers, storage) PC4 GRID Monitoring (infrastruttura, servizi) Backup system UPS INFN 120 kVA LOCALE TIER-2 ATLAS CHILLER Locali o spazi esterni SIST. ANTINCENDIO PRESENTER 42” Campus Grid Network 1 Gb/s 8 blade bi. dual core Rack Rittal + CMC Unit Unità di raffreddamento switch Rack UNIV. FED II SE + 9 TB Servers servizi GRUPPO ELETTRO GENO UniNA Locali PON SCoPE 7 blade bi. dual core Rack-1 TIER-2 ATLAS switch Unità di raffreddamento 17 biproc. UPS INFN 300 kVA SE + 28 TB Rack Rittal + CMC Unit Rack-2 TIER-2 ATLAS switch Unità di raffreddamento CISCO Gb/s Servers

Bologna 6/3/2007Gianpaolo Carlino - Stato dei Tier2 di ATLAS22 Infrastruttura Tier-2 Napoli

Bologna 6/3/2007Gianpaolo Carlino - Stato dei Tier2 di ATLAS23 Conclusioni Ben definite le attività di ricerca dei gruppi italiani e i Tier-2 di riferimento Le attività di analisi e di computing per il Computing System Commissioning sono in fase avanzata Contributi sostanziali e originali al sistema di produzione e di distribuzione dei dati di ATLAS Utilizzo efficiente delle risorse disponibili nei Tier-2 Lavori infrastrutturali nelle sedi dei Tier-2 completati o in completamento. Nessuna difficoltà ad ospitare le risorse previste per i prossimi anni.

Bologna 6/3/2007Gianpaolo Carlino - Stato dei Tier2 di ATLAS24 Backup slides

Bologna 6/3/2007Gianpaolo Carlino - Stato dei Tier2 di ATLAS25 Totale eventi richiesti per CSC Standard Model Standard Model (incl. calib. samp.) QCD, W, Z, top, SM Higgs, dibosons, B physics, calibration samples 4.2 * 10 7 Non Standard Model Non Standard Model SUSY, Exotics, non-SM Higgs, non-SM Top 2.2 * 10 6 Single particles Single particles e/gamma, muons, pions, K+/-, tau 7.8 * 10 7

Bologna 6/3/2007Gianpaolo Carlino - Stato dei Tier2 di ATLAS26 CSC event sizes and samples Physics event sizes: AOD 0.48 MByte/ev ESD 2.3 MByte/ev (without InDet preprod data on) ESD 3.0 MByte/ev (with InDet preprod data on) MCTruth 0.08 MByte/ev Physics samples: 20 M events simulated 7 M events in the queues Single particle event sizes: AOD 0.01 MByte/event ESD 0.45 MByte/event Single particle samples: 20 M events simulated Present situation:

Bologna 6/3/2007Gianpaolo Carlino - Stato dei Tier2 di ATLAS27 Stima risorse necessarie ( ) Stima risorse totali ATLAS autunno 2007: Tier-1:3.2MSI2k CPU,2.2 PB disco,1.5 PB nastro Tier-2:2.3MSI2k CPU,1.3 PB disco MoU (plans for) pledges INFN 2007 per ATLAS: Tier-1:0.8MSI2k CPU,400 TB disco,330 TB nastro Tier-2:0.8MSI2k CPU,200 TB disco Stima risorse totali ATLAS primavera 2008: Tier-1:18.1MSI2k CPU,9.8 PB disco,7.7 PB nastro Tier-2:17.5MSI2k CPU,7.7 PB disco

Bologna 6/3/2007Gianpaolo Carlino - Stato dei Tier2 di ATLAS28 Richieste 2007 modificate