CSN1 - Roma 28 Gennaio 2002 Calcolo per CDF Stefano Belforte - INFN Trieste1 Sommario Novita da Settembre 2001 Critica dellesistente: Review CDF Central.

Slides:



Advertisements
Presentazioni simili
E835 & Hera-B Concezio Pisa, 21/12/2004. E835 (aka Jet-FNAL) timeline dell'esperimento –Presa dati conclusa nel Alcune analisi tuttora in corso.
Advertisements

Run I Distribuzione inclusive di Min Bias (Mult. Carica, Pt). Correlazioni dello stato finale ( -Mult) + mini-jet (soft hard physics). Campioni utilizzati:
U.Gasparini, Bologna 8/11/06 1 Canali di fisica di interesse… Discussione in seno alla comunita italiana di CMS a Bologna, Giovedi mattina 23 Novembre,
Esercizi sulle architetture
23/01/01Alberto Masoni – GR1 - Roma1 I MODELLI DI CENTRI REGIONALI POSIZIONE DI ALICE ITALIA CENTRO ITALIANO: CPU 450 KSI95, DISCO 400 TB (INSIEME TIER-1.
L. Perini CSN1 -Roma 23 Gen Centri Regionali per il calcolo di ATLAS in Italia Tier-1 e Tiers-N : funzioni, localizzazione, necessita di h/w, personale.
Computing: Attività 2010 Reprocessing e ri-simulazione dati Run7 Extra-production di dati MC alla Y(4S) 10 x cross section bb e cc, 2 x cross section u.
Progetto Speciale Prototipo Tier1 F. Ruggieri INFN – CNAF I Workshop CMS Italia del SW e Computing Roma 22 Novembre 2001.
Introduzione alle attivita Software e Computing di Atlas Napoli M. Biglietti – G. Carlino – F. Conventi - A. Doria – L. Merola - A. Migliaccio Software:
1 La farm di ATLAS-Napoli 1 Gb/s 7 nodi con 2 CPU PIII a 1 GH, RAM 512 MB, 2 schede di rete a 100 Mb/s. Server con 2 CPU PIII a 1 GH, RAM 1 GB, 2 schede.
Aspetti critici rete LAN e WAN per i Tier-2
Test del Monitoraggio del Tracker usando un Tier2 M.S. Mennea, G. Zito, N. De Filippis Università & INFN di Bari Riunione Consorzio – Torino 18 Novembre.
Riunione CRESCO Infrastruttura HPC Cresco Analisi Preliminare.
EVOLUZIONE DEL PC Legge di Moore: La potenza dei calcolatori raddoppia ogni 18 mesi Metà anni 80 (Personal Computer IBM AT) Architettura 16 bit interna,
Vincenzo Vagnoni per il gruppo di Bologna
Coinvolgimento attuale italiano nelle analisi di CMS Bologna 25 Novembre 2006 Roberto Tenchini.
Michele Michelotto INFN-Padova
LNL M.Biasotto, Bologna, 13 dicembre La farm di Legnaro Massimo Biasotto – INFN LNL.
Execution benchmarks Obiettivi Test dettagliati e ben caratterizzati Esecuzione di benchmark standard Test di applicazioni dell'esperimento ALICE 20 Novembre.
LNL M.Biasotto, Bologna, 18 ottobre La farm CMS di Padova - Legnaro Proposta di acquisto hardware 2° semestre 2001.
LNL M.Biasotto, Bologna, 19 marzo La farm CMS di Padova - Legnaro Proposta di acquisto hardware 1° semestre 2001.
LNL CMS M.Biasotto, Firenze, 22 maggio Hardware e tools di installazione Massimo Biasotto INFN – Lab. Naz. di Legnaro.
1 M. Biasotto – Legnaro, 22 Dicembre 2005 Prototipo Tier 2 di Legnaro-Padova INFN Legnaro.
CDF Meeting - Pisa 29 agosto 2003 Calcolo Stefano Belforte - INFN Trieste1 Stato e prospettive calcolo nazionale Cosa ce Cosa ci sara per il 2004 Cosa.
5 Feb 2002Stefano Belforte – INFN Trieste calcolo per CDF in Italia1 Calcolo per CDF in Italia Prime idee per lanalisi di CDF al CNAF Numeri utili e concetti.
Meeting: CDF - Referees 8 settembre 2003 Calcolo CDF Stefano Belforte - INFN Trieste1 Calcolo 2003/4: bottom lines 2003 abbiamo analizzato i dati ! Risorse.
Stefano Belforte INFN Trieste 1 necessita' CDF al Tier1 2 feb 2004 CDF stato e necessita Poco cambiato dal 18 Dicembre 2003.
Commissione Nazionale 1 Castel Gandolfo 11 Set Piano di Calcolo per CDF Run2a Stefano Belforte - INFN Trieste1 Organizzazione analisi per il Run.
Commissione Nazionale 1 11 Settembre 2000 Calcolo per CDF Stefano Belforte - INFN Trieste1 Calcolo per CDF-Italia per il Run 2 Nulla e incerto come il.
Stefano Belforte INFN Trieste 14 Sep 2004 CDF Referee's meeting 1 Calcolo per CDF 1)Rivediamo le richieste 2005 Le 4 slides che ho circolato a Luglio con.
Commissione Calcolo Napoli, 29 Giugno 1999 Strategie e necessita di CDF Stefano Belforte - INFN Pisa1 CDF nel Run II ( …) Cominciamo dalla.
15 Aprile 1999Stefano Belforte - INFN Pisa1 Piano per il Calcolo di CDF Meeting con Referees di Gr. I 15 Aprile 1999.
13-may-031 Calcolo CDF Richiesta sblocco s.j. per Accelerare migrazione farm (analisi e MC) da FNAL al CNAF incluso piccolo status report ed uno sguardo.
Benigno Gobbo – INFN Trieste 1 CSNI 21 maggio 2001 Stato della farm di COMPASS-TS CSNI Roma, 21 maggio 2001 Benigno Gobbo INFN Trieste
Stato del computing Andrea Sciabà Riunione del consorzio INFN Firenze, 7 settembre 2001 Farm italiane Produzione Monte Carlo b/ Progetti di GRID.
7 ottobre 2002P. Checchia Padova Cons. di sezione1 Resoconto CSN1 Lecce settembre 2003 Cosiderazioni generali Bilancio 2004: 28 M€ (era 38.5 compreso l’anticipo.
INFN-BOLOGNA-T3 L. Rinaldi I siti Tier-3 nel modello di calcolo di Atlas Configurazione del sito INFN-BOLOGNA-T3 Attività di Analisi e Produzione Attività.
Dischi in RAID  Redundant Array of Independent Disk Configurazione che permette di combinare più dischi secondo obiettivi di performance e ridondanza.
Works in progress.  Semplificazione e maggiore efficienza della gestione  Risparmio (nel medio periodo)  Riallocazione delle risorse (hardware e timesheet)
Manutenzioni e Mezzi di Calcolo Paolo Morettini – INFN Genova Valerio Vercesi – INFN Pavia CSN1 - Catania Settembre 2002.
CCR 14-15/03/2006 Status Report Gruppo Storage CCR.
L. Perini Riunione CSN1, Frascati Il Calcolo di CDF: Relazione dei referees Fabrizio Gagliardi, Laura Perini e Valerio Vercesi.
L. Perini Riunione CSN1, Catania Il Calcolo di CDF: Relazione dei referees Laura Perini e Valerio Vercesi.
COMPASS Gruppo 1 P.Bagnaia, P. Cenci, S. Zucchelli Roma, Maggio COMPASS : STATO ESPERIMENTO  COMPASS sta analizzando i dati 2002 e preparando il.
1 CSN1 - Lecce 22/09/2003 Babar Relazione e proposte finanziarie Referee: M. de Palma, P. Lubrano, C. Luci, L. Perini,A. Staiano.
LNL CMS M.Biasotto, Roma, 22 novembre I Tier2 in CMS Italia Massimo Biasotto - LNL.
Calcolo LHC - F. Ferroni, P. Lubrano, M. SozziCSN1 - Catania Calcolo LHC 2003 (F. Ferroni, P. Lubrano, M. Sozzi)
Condor standard. Sistema Batch. Tool di installazione D. Bortolotti,P.Mazzanti,F.Semeria Workshop Calcolo Paestum 9-12 Giugno 2003.
CSN Maggio 2005 P. Capiluppi Il Computing Model (LHC) nella realta’ italiana u I Computing models degli esperimenti LHC gia’ presentati a Gennaio.
Stefano Giagu Università di Roma “La Sapienza” INFN Roma1 e FNAL To B or not to B? CSN1 – 4 Febbraio 2003 LNF Prospettive nella fisica degli Heavy Flavor.
Attività d’analisi dei gruppi CDF di UD e TS Massimo Casarsa Sez. INFN di Trieste Trieste, 8 Febbraio 2005 ► Attività del Gruppo di Udine: M.P. Giordani,
CMS a Trieste Roma, 05/04/2005 GDR. 2 Cronologia : Matura interesse per LHC in Sezione/Gruppo 1 a Trieste Giro d’orizzonte degli esperimenti.
Istituto Nazionale di Fisica Nucleare La Biodola, Isola d’Elba, 6-9 maggio 2002 AFS: Status Report WS CCR R.Gomezel Workshop sulle problematiche.
Cosa cambia per CDF  S.Belforte mantiene per ora 20% (1 day/week) su CDF: il necessario per una attivita’ di coordinamento e transizione verso un nuovo.
Stato del calcolo in BaBar e richieste per il 2004, F. Galeazzi, Giugno 2003 Calcolo in BaBar Stato e richieste al CSN1 per il 2004 presentato da F. Galeazzi.
1 Calcolo e software G. Bagliesi 23/3/01 Riassunto riunione calcolo Bologna 19/3/01 B/tau : futuri miniworkshop.
CDF Relazione dei Referee G. Bruni, P. Giubellino, L. Lista, P. Morettini, L. Moroni, V. Vercesi CSN1 – Maggio 2006.
La Farm di Alice a Torino Workshop sulle problematiche di calcolo e reti Isola d’Elba 6-9 maggio 2002 Mario Sitta (Università del Piemonte Orientale e.
CDF Collider Detector at Fermilab > 500 Fisici 57 Istituzioni 12 Paesi 6 Istituzioni Italiane Bologna, L.N.F., Padova, Pisa, Roma1, Trieste-Udine Staff:
CDF I referee Roma, 16 Maggio Tevatron OK Fisica Stanno pubblicando –Bene Nostre principali preoccupazioni su B s -mixing –Sulla base dei loro.
CDF Calcolo Another brick in the wall Paolo Morettini CSN1 Lecce Valerio Vercesi Settembre 2003.
Roberto Covati – Roberto Alfieri INFN di Parma. Incontri di lavoro CCR dicembre Sommario VmWare Server (in produzione dal 2004) VmWare ESX.
19 Ottobre 2012ATLAS Milano1 Stato delle risorse locali di calcolo L. Carminati, L. Perini, D. Rebatto, L. Vaccarossa.
1 ALICE I ITER2 DI ALICE IN ITALIA Bologna, 6 marzo 2007 M. Masera
ATLAS NAPOLI Software & Computing e il Tier-2 Gianpaolo Carlino INFN Napoli Il gruppo ATLAS di Napoli Le attività Software & Computing Il prototipo Tier-2.
20-21/03/2006Workshop sullo storage - CNAF Storage nei Servizi Calcolo delle sezioni INFN Alessandro Brunengo.
The INFN Tier-1: progetto di ampliamento Cristina Vistoli – INFN CNAF Referee Meeting Sep
Il calcolo per l’esperimento GERDA Luciano Pandola INFN, Laboratori del Gran Sasso Riunione della CSN2, LNF Frascati, 29 Novembre 2011.
Esigenze di Rete degli Esperimenti LHC e di Gr1 G. Carlino – INFN Napoli CCR – Roma 8 Settembre 2014.
Transcript della presentazione:

CSN1 - Roma 28 Gennaio 2002 Calcolo per CDF Stefano Belforte - INFN Trieste1 Sommario Novita da Settembre 2001 Critica dellesistente: Review CDF Central Analysis Facility Stima dei bisogni: Phyics Analysis Computing Needs Assessment Piano per il futuro: new CAF: linux Farm(lets) Impegno degli italiani Stato dellanalisi Lavori in corso Triggers Stima dati per il 2002 Richieste per il calcolo Piano temporale Descrizione hardware Stima del costo

CSN1 - Roma 28 Gennaio 2002 Calcolo per CDF Stefano Belforte - INFN Trieste2 CDF Central Analysis Facility nel 2001 Progetto 1997: pochi SMP di medie dimensioni, pool di dischi Fiber Channel (20~30TB), tape drives SCSI locali Situazione 2001: una SMP SGI 64-CPU, ~20TB disco (6 per fisica) Estate 2001: acquistata una SUN 24-CPU, unaltra in programma: esaurisce piano originale (e budget!) Unaltra ? Comitato di review : NO Risultato: Restituita la Sun, raddoppiata la SGI, CPU I fondi della seconda Sun disponibili per il 2002 Review ha anche long term charge: consigli per il futuro 3 mesi di lavoro, 3 reports, draft di un nuovo sistema

CSN1 - Roma 28 Gennaio 2002 Calcolo per CDF Stefano Belforte - INFN Trieste3 CDF Central Analysis Facility nel : pochi SMP + Fiber Channel Disk + SCSI tapes Silicon Graphics O x 350 MHz Principale nodo di sviluppo/analisi Linux 8 x 700MHz per code building/distribution Linux 4 x 800 MHz per uso generale 6TB disco FC per aree dati statiche (a Dicembre) Circa 2TB disco per staging da nastro Robot con nastri Sony AIT-2 Farm di ricostruzione: ~200 nodi linux, SGI per I/O, quache TB disco Disco utenti Home+spool globali ( MB) scratch su SIGI (5GB) tipico eseguibile: 200MBytes Sun Enterprise 24 x 750MHz da Agosto 2001 Ne compriamo un altra ?

CSN1 - Roma 28 Gennaio 2002 Calcolo per CDF Stefano Belforte - INFN Trieste4 CAF Review Benchmarking di tutti gli step di analisi su diverse piattaforme Confronto con stime del 1997 (bisogni Run 2 = Run 1 x 20) e con la performance del codice del Run 1 (FORTRAN+YBOS) Documentazione (pubblica): www-cdf.fnal.gov/upgrades/computing/projects/central/ Findings: bisogni sottovalutati I/O peggiorato 100x (oggetti vs. array) Analisi peggiorata 10x (non ancora capito) I computer previsti non bastano nemmeno per lestate 1 passo di analisi su 1 dataset per 200 users: 8 settimane

CSN1 - Roma 28 Gennaio 2002 Calcolo per CDF Stefano Belforte - INFN Trieste5 Bisogni di Calcolo per lAnalisi Run 2a (2fb -1 ): ~100 Data Sets ~ 5nb ~10Mevents ~1TB (100KB/ev) Goals: Skim: Primary DataSet 2 ndary (Users) Data Set : lavoro organizzato, un job per physics group 1 refresh /mese per data set Analisi degli users sui 2 ndary D.S. : resource limited 200 users aggressivi 1 pass per data set in pochi giorni Raccomandazioni: Miglior struttura dati, multibranch I/O CPU: O(100) 1GHz CPU, scalabile a O(1000) Disk cache dellordine di 70TB

CSN1 - Roma 28 Gennaio 2002 Calcolo per CDF Stefano Belforte - INFN Trieste6 La nuova CAF: 10xCPU con 1/4x$ Analysis Farm di commodity PCs O(100) farmlets con accesso batch, una per Data Set Un file server O(1TB) e O(10) nodi di lavoro (dual PC) Collaborazione FNAL-Universita (NOVITA!) Prototipo ora (14 nodi), 50 dual P3-1.5GHz ad Aprile, stage 2 entro autunno, piano per stage 3 entro Natale La farmlet e un nodo di rete: Sviluppo codice/link/debug a casa + remote submission + output spedito indietro. disco = cache, accesso nastri via rete Path verso GRID (rje, networked data caching… UK test in corso) Interesse da UK, Spagna, Korea, US, Italia

CSN1 - Roma 28 Gennaio 2002 Calcolo per CDF Stefano Belforte - INFN Trieste7 La nuova CAF: 10xCPU con 1/4x$ Analysis Farm di commodity PCs Dual CPU per il processing (max Mips/$) OK Home made NAS (max GB/$) R&D problemi: NFS load, RAID controller (3Ware Escalade) fallback: Fiber Channel (almost 2x $) Strutturata in farmlets con accesso (solo) batch, una per Data Set Un file server e O(10) nodi di lavoro, un job per CPU PAD = circa 100 Data Sets, 1~2TB each (2fb -1 x 100KB) O(100) farmlets 2002: 300KB/event, 0.5fb^-1 = circa ½ TB combinare piu data sets in un file server, priorita Prototipo entro Gennaio (14 nodi) 50 dual P3-1GHz entro Aprile stage 2 entro autunno, piano per stage 3 entro Natale Sviluppo codice/link/debug a casa + remote submission + output spedito indietro Path verso GRID (rje, networked data caching… UK test in corso) gia ordinati

CSN1 - Roma 28 Gennaio 2002 Calcolo per CDF Stefano Belforte - INFN Trieste8 Piano di lavoro Italiano 50Mb/s Analisi dei 2 ndary data set a FNAL, storage locale di dati, MC, e data set derivati (3 rdiary ), copia ntuple finali in Italia via rete (50Mb/s) Eccellente accesso al batch dallItalia Sistema di priorita nelle risorse (code da condividere) Impegno italiano nel sistema batch Interesse in tutte le sezioni 6 persone finora 1 FTE a FNAL nei prossimi 3~4 mesi Vogliamo imparare ad usare bene questa struttura

CSN1 - Roma 28 Gennaio 2002 Calcolo per CDF Stefano Belforte - INFN Trieste9 CDF GRID (2004 ?) Ormai una chiara direzione dellesperimento Run2a ritarda – transizione trasparente al Run2b – modello di calcolo che possa portarti allera di LHC 500Mb/sec farmlets in Italia integrate con Fnal (500Mb/sec) accordo con CNAF per condivisioneTier1 prima riunione: 5 febbraio Partenza con tools non-Globus (gia in uso a D0) 3mesi di test UK-FNAL in corso: funziona Aprile: incontro a Glasgow UK,Spagna,Italia Test in Italia quando finiamo col batch In corso contatti con altri paesi Nuovo territorio. Possibilita di utilizzare tools GRID prima di LHC. Aperti a unione degli sforzi e/o nuove partecipazioni

CSN1 - Roma 28 Gennaio 2002 Calcolo per CDF Stefano Belforte - INFN Trieste10 Analisi in Italia B Physics Lead on hadronic B decays Exploits italian upgrades (SVT, L00, ISL, TOF…) contribute to x s. Lead on & Lavoro in corso su vari canali B B D K Bs Ds+X b p Minimum Bias High mult. trigger con TOF High Pt Focus su analisi ereditate dal Run1, interesse comune per ottimizzazione ricostruzione jets: W/Z+H 4 jets (2bjets) ppbar h+2bjets W+jets Accoppiamenti top t 6 jets Z 2bjets MC optimisation (e.g. Wbbar) Kt clustering Exotics H Totale responsabilita italiana iniziando dai triggers B hadr: SVT a Livello 2, SVT+COT a livello 3 (no SVX rec.) Multijet trigger (+ Btag a livello 2 (Soft lepton) e 3 (SVT) )

CSN1 - Roma 28 Gennaio 2002 Calcolo per CDF Stefano Belforte - INFN Trieste11 Selezioni a Livello 3 basate su SVT Tracce di SVT complementate con la COT per diventare 3d

CSN1 - Roma 28 Gennaio 2002 Calcolo per CDF Stefano Belforte - INFN Trieste12 Multijet + b-tag trigger

CSN1 - Roma 28 Gennaio 2002 Calcolo per CDF Stefano Belforte - INFN Trieste13 Charm hadron per la prima volta a CDF ~ 77 D 0 events in 17nb-1 (SVT test runs in Ottobre) D 0 K D K 150,000 D 0 K in 50nb -1 B.R. D ± K > D 0 K, ma minor produzione Pt cuts in SVT meno efficienti per decadimento 3-corpi Test-bench per Ds

CSN1 - Roma 28 Gennaio 2002 Calcolo per CDF Stefano Belforte - INFN Trieste14 I primi 100 pb -1 Luminosita in lenta crescita (estate 100nb -1, fine anno 300nb -1 ) Trigger Table ad hoc da usare fino allestate Base per selezione campioni dati per le conferenze Enfasi su fisica del B e calibrazioni I nostri triggers D0 trigger sample (D K ): 20 nb B High-mass sample (B ) 20 nb Inclusive B hadronic sample: 160 nb MinBias + HighMultiplicity 20+6 nb Multijet (H/h + top) nb Z bbar 10 nb I nostridati (2 ndary +3 tiary +MC) 6~8 TB per lestate

CSN1 - Roma 28 Gennaio 2002 Calcolo per CDF Stefano Belforte - INFN Trieste15 Dettaglio Dati 2002 Cosa serve su disco a FNAL per 100pb -1 10nb x 100pb -1 x 300KB = 300GB + campioni derivati, MC, ntuple, diverse selezioni: x 2 Fisica del B Tutto il B ed il D K. 20% dellinclusivo per il fondo 60nb 18 Gb/(pb-1) = 1.8 Tb +... O(4TB) Bs Ds+X ? Seleziona da studiare sui 160nb inclusivi, O(1TB) Multijet trigger Selezione in parte in overlap per Higgs e top adronico 20nb 600GB + … O(1.5TB) Altri studi fuori dalla mainstream di CDF Minbias 400GB Esotici Z bbar, QCD studies (risoluzione jet, radiazione…) Totale 6~8 TB di dati

CSN1 - Roma 28 Gennaio 2002 Calcolo per CDF Stefano Belforte - INFN Trieste16 I tempi Gennaio: sblocco fondi Febbraio/Marzo: acquisto prime farmlets Maggio/Giugno: sistema in uso Giugno: status report (ev. richieste addizionali) Settembre: rivisitazione piano globale del 1997 basata sullesperienza di lavoro. Definizione bisogni di hardware italiano per il Run2a. Rivisitazione splitting FNAL/Italia. Goal: stare entro lenvelope di sett (1 M$+0.5KEu) Fine anno: avere in ordine quanto necessario per 1fb -1 Da rivedere alla luce della luminosita del Tevatron 2003: sperimentazione struttura integrata USA-Italia

CSN1 - Roma 28 Gennaio 2002 Calcolo per CDF Stefano Belforte - INFN Trieste17 Il sistema iniziale 4 farmlets Una per ogni main trigger/data sets: B pipi D Kpi top 6j multijet+btag In seconda approssimazione, ognuna condivisa con altre analisi piu piccole Z bb, di-jet resolution, Bs mixing, min-bias Sistema abbastanza complesso per esercizio significativo Possibile sottrarne una per tests Abbastanza poche per poterle gestire da noi

CSN1 - Roma 28 Gennaio 2002 Calcolo per CDF Stefano Belforte - INFN Trieste18 Configurazione e Costi Disk server (R&D in corso) : Dual P3, 1GB RAM, RAID controller 3ware Escalade, 16 dischi IDE x 100GB, Gibabit Ethernet 9K$ = 10KEuro 10 Worker nodes (si compra il piu veloce PC approvato): Dual ??, 1GB RAM, FastEthernet 1.5K$ luno Rack, cavi, switch ….. Totale 20K Euro (1Euro = 0.9$) Totale per 4 sistemi: 80K Euro Se R&D file server fallisce, costo disco 2x