1 ALICE IL CALCOLO DI ALICE IN ITALIA Bologna, 6 marzo 2007 M. Masera

Presentazione sul tema: "1 ALICE IL CALCOLO DI ALICE IN ITALIA Bologna, 6 marzo 2007 M. Masera"— Transcript della presentazione:

1 1 ALICE IL CALCOLO DI ALICE IN ITALIA Bologna, 6 marzo 2007 M. Masera masera@to.infn.it

2 M. MaseraRelazione sul calcolo2 Framework: situazione attuale di AliRoot e del calcolo distribuito Evoluzione prevista nel 2007 Physics data challenge Quantificazione delle risorse: che cosa ALICE si aspetta dall’INFN Risorse di calcolo: prospettive a breve e medio termine Sommario

3 M. MaseraRelazione sul calcolo3 AliRoot / 1 AliRoot ha 8 anni di vita Framework unico per simulazione e ricostruzione basato su ROOT Utlizzato per i Technical Design Report dei rivelatori e per il Physics Performance Report Integrato con il DAQ, il DCS e l’ HLT Piattaforme: Linux (SLC3 & SLC4 A32/64, Opteron), Solaris e MacOS Simulazione FLUKA: interfaccia validata, ma non ancor in produzione G4: validazione dell’interfaccia avviata Geometria, servizi e strutture come da struzione Ricostruzione Efficienza e PID ai livelli previsti dal TDR o meglio per PbPb (dn/dy ch ≤8000) e pp I parametri di ricostruzione sono presi in gran parte dal “Conditions Data Base” Procedure di “Quality Assurance” messe ap unto per diversi rivelatori --> in completamento In preparazione: mappa misurata del campo magnetico Evoluzione del codice: ancora piuttosto rapida Ottimizzazione per performance e occupazione di memoria Clean-up del codice: coding conventions e effective C++

4 M. MaseraRelazione sul calcolo4 Ricostruzione / 1 Ottima efficienza di tracciamento nel barrel già a basso p T. Bassa frazione di fake Risoluzione in pT: dell’ordine di qualche % fino a 100 GeV/c p T (GeV/c)

5 M. MaseraRelazione sul calcolo5 Ricostruzione / 2 p-p Ricostruzione del vertice: Ottima già in p-p, con efficienza Di ricostruzione del primario ~1 quando le condizioni di trigger sono soddisfatte. Vertici secondari per heavy flavour e V 0 PID combinato bayesiano nel barrel con ITS, TPC, TOF, TRD, HMPID

6 M. MaseraRelazione sul calcolo6 AliRoot / 2 Analisi Tool sviluppati nell’ambito dei Physics Working Groups Framework comune basato su Tselector (per utilizzare Proof) (Ri)definizione degli AOD in corso Calibrazione e allineamento Framework per l’offline: pronto Framework per l’online: in sviluppo/test Algoritmi per l’allineamento e la calibrazione online: in corso di sviluppo Dati Valutazione finale in corso per la dimensione dei dati (con gradi di incertezza diversi): RAW ESD AOD Validazione dei meccanismi di codifica/decodifica dei dati raw effettuata al 90% Documentazione Esiste una documentazione per AliRoot nel suo complesso La documentazione dettagliata del software a livello di singolo detector è ancora carente La documentazione dei tool di grid: da consolidare Vengono organizzati dei tutorial a cadenza mensile

7 On-Off framework CAF WN lfnguid{se’s} lfnguid{se’s} lfnguid{se’s} lfnguid{se’s} lfnguid{se’s} ALICE File Catalogue Publish agent xrootd Castor cache CASTOR LDC DAQ Network GDC Condition files Data files Data file FTS SRMSRM SRMSRM T1’s OfflineOnline HLT DDL 240TB DCS Shuttle Publish in AliEn Monit. Calib. DAQ FXS DAQ Logbook DB Condition files HLT FXS DCS FXS Run info DCS DB

8 M. MaseraRelazione sul calcolo8 On-Off framework Shuttle Framework Core: fatto DAQ File Exchange Server & Logbook: validato HLT File Exchange Server: implementato DCS File Exchange Server: in sviluppo Pre-processamento (i.e. valutazione dei parametri) Preprocessori per TRD, TOF, PHOS, EMCAL, PMD, ITS/SPD & T0 implementati e pronti per la validazione Preprocessori per altri rivelatori implementati ma non ancora pronti per la validazione o ancora in corso di implementazione Framework di Data Acquisition per DCS e HLT: manca Interfaccia xrootd-CASTOR2: in corso di test

9 M. MaseraRelazione sul calcolo9 Visualizzazione Framework sviluppato in collaborazione con il team di ROOT La versione attuale risponde a molti requisiti richiesti Tool in rapido sviluppo attraverso l’interazione con gli utenti

10 M. MaseraRelazione sul calcolo10 Strategia di uso delle risorse I job sono assegnati laddove ci sono i dati Uso limitato del VOMS (Virtual Organization Management System) Vengono inviati alla grid Job Agents e non job “veri” Questo annulla l’impatto di inefficienze del middleware Le risorse sono condivise Non sono previste assegnazioni di risorse specifiche a gruppi Accounting di uso delle risorse da parte dei gruppi Gestione delle priorità: central Task Queue Accesso ai dati solo attraverso GRID

11 M. MaseraRelazione sul calcolo11 Calcolo distribuito AliEn Ambiente di produzione che consente l’accesso alla GRID Attualmente la stabilità dei servizi centrali è >90% Sistema in continuo sviluppo: 7 release fino ad ora Vengono organizzati tutorial periodici. Al momento 200 utenti registrati Interfacce con GRID diverse da LCG: Operativa a Bergen quella con NorduGrid (da espandere ad altri siti) Da implementare quella con OSG Servizi specifici di ALICE Installati centralmente al CERN e localmente sulle VO-box Monitoring centralizzato con MonaLisa Movimentazione di dati con FTS (File Transfer Service) Test di trasferimento di dati raw T0 -> T1 in permanenza da settembre 2006 Obiettivo: 300 MB/s sostenuti in uscita dal CERN. Ci sono ancora problemi di stabilità

12 M. MaseraRelazione sul calcolo12 Data Management Gli strumenti di Data Management non sono ancora sotto controllo ALICE richiede che i sistemi di gestione dei dati su disco o nastro supportino xrootd Ci sono test in corso di dCACHE, DPM e CASTOR2 (tutti SE di LCG) con supporto di xrootd Non sono stati installati in servizio operativo (= a parte i test) Storage Elements al di fuori del Cern L’accesso ai dati per l’analisi non è stato testato in una situazione realistica CASTOR2 sta ancora evolvendo

13 M. MaseraRelazione sul calcolo13 Evoluzione di AliRoot nel 2007 AliRoot: release “data ready” prevista per aprile. Sono stati definiti per ogni detector specifici task per raggiungere l’obiettivo. Concernono in generale calibrazione ed allineamento Definizione finale del framework per l’analisi Da aprile l’evoluzione del codice dovrà essere backward compatible Completamento di Shuttle (offline/online): aprile 2007

14 M. MaseraRelazione sul calcolo14 Data Challenge 2006

15 M. MaseraRelazione sul calcolo15 PDC 06 E’ stato il più lungo data challenge di ALICE Iniziato il 15 aprile in 46 siti - 6 T1s, 40 T2s Oltre 20 milioni di eventi,0.5PB di dati 1000 job in parallelo in media

16 M. MaseraRelazione sul calcolo16 I siti INFN: ~25%

17 M. MaseraRelazione sul calcolo17 I siti italiani Dal 1/1/07 a ieri

18 M. MaseraRelazione sul calcolo18 PDC06 support Grid operation Obiettivo: massima automatizzazione --> piccolo team di persone per la gestione della produzione Un esperto per nazione per la gestione delle VO-box e l’interazione con i siti 15 persone per PDC06 Istallazione nuovi siti - Patricia Mendez Lorenzo (CERN/ARDA) France - Artem Trunov (CCIN2P3), Jean-Michrl Barbet (Subatech) Spain - Patricia Mendez Lorenzo Italy - Stefano Bagnasco (INFN), Marisa Lusivetto (INFN) Germany - Kilian Schwarz (GSI), Jan Fiete Grosse Oetringhaus (Muenster) Russia, Greece - Mikalai Kutouski (JINR) Nordic Sites - Csaba Anderlik (NDGF) Romania - Claudiu Shiaua (NIHAM) India - Tapas Samanta (VECC) South Korea - Chang Choi (Sejong) USA - Latchezar Betev (CERN) Czech Republic - Dagmar Adamova (Prague) I rimanenti: Patricia Mendez Lorenzo

19 M. MaseraRelazione sul calcolo19 Infrastruttura di calcolo in Italia Tier-1: Dalla presentazione di Les Robertson all’ultimo OB di WLCG (29/01/2007): I tier-1 di Alice sono europei (Italia, Francia, Germania). Finora il ruolo italiano è stato notevole Experiment (apr- dec 2006) %CPU al CNAF ALICE21 ATLAS6 CMS4 LHCb15

20 M. MaseraRelazione sul calcolo20 year Time for physics (s) ppPbPb 20077×10 5 0 20084×10 6 2×10 5 20096×10 6 1×10 6 20101×10 7 2×10 6 Risorse: 2007-2010 Missing computing resources are a threat to ALICE physics goals We are trying to discuss with FAs and to find new resources But we will not cover the deficit We are reassessing the needs But this tends to push them up rather than down The deficit is so large that makes no sense to develop an alternative within the pledged resources The loss in scientific output would be too high If we could reduce the gap (10%-20%), it would make sense to develop a set of alternative scenarios If we cannot, then the investment by the FAs to build ALICE will be only partly exploited We will not record all data We will do less data analysis Impact on physics reach and timeliness of results F. Carminati WLCG meeting 22 gennaio 2007

21 M. MaseraRelazione sul calcolo21 Parametri base e loro evoluzione CPU STORAGE (MB)

22 M. MaseraRelazione sul calcolo22 PDC07: OBIETTIVI -Software e middleware: -Testare infrastruttura di calcolo in condizioni di produzione stabile -Testare la ricostruzione “data ready” dal formato raw con calibrazione e allineamento -Produzioni MC “gestite” dai PWG. -Sviluppi (che richiedono alta statistica): -Preparazione alla First Day Physics. Per i gruppi italiani: -algoritmi di vertexing -molteplicità nel barrel -PID (TOF e HMPID) -Sviluppo algoritmi di analisi, formato AOD a analysis classes, per l’Italia: -Heavy flavours (nel barrel e nel braccio a mu) -Jets -Flow

23 M. MaseraRelazione sul calcolo23 Contributo italiano atteso / 1 Storage complessivo da distribuire su T1 e T2: 500 TB Circa 50 TB, prevalentemente al T1 Esercizio: valutazione del contributo italiano al 25%

24 M. MaseraRelazione sul calcolo24 Contributo italiano atteso / 2 Questi event rates corrispondono ad un numero di job attivi concomitanti compresi tra 2500 e 3000 per la parte di simulazione e ricostruzione Questa è la performance media nel PDC in corso

25 M. MaseraRelazione sul calcolo25 Stime 2008 pp: 40% nominal PbPb: 10% nominal Per la simulazione (25% totale): 5000 KSI2K e 1300 TB Per i dati (25% totale): circa 240 TB per pp e 100 TB per PbPb e 480 KSI2K complessivi per ricostruzione e analisi Da verificare

26 M. MaseraRelazione sul calcolo26 Situazione contingente Le valutazioni precedenti eccedono le stime fatte oltre un anno fa (ed eravamo già consapevoli allora di essere in deficit rispetto alle aspettative dell’esperimento) Previsioni di Forti (sett. 2006) al T1: 2007: 330 ksi2k/ 154 TB 2008: 1320 ksi2k / 660 TB

27 27 BACKUP

28 M. MaseraRelazione sul calcolo28 File transfer