Meeting: CDF - Referees 8 settembre 2003 Calcolo CDF Stefano Belforte - INFN Trieste1 Calcolo 2003/4: bottom lines 2003 abbiamo analizzato i dati ! Risorse.

Slides:



Advertisements
Presentazioni simili
Qual è per una piccola/media impresa emiliano/romagnola il costo complessivo REALE del sistema informatico nel caso in cui si sia scelto di basarsi su.
Advertisements

E835 & Hera-B Concezio Pisa, 21/12/2004. E835 (aka Jet-FNAL) timeline dell'esperimento –Presa dati conclusa nel Alcune analisi tuttora in corso.
Run I Distribuzione inclusive di Min Bias (Mult. Carica, Pt). Correlazioni dello stato finale ( -Mult) + mini-jet (soft hard physics). Campioni utilizzati:
U.Gasparini, Bologna 8/11/06 1 Canali di fisica di interesse… Discussione in seno alla comunita italiana di CMS a Bologna, Giovedi mattina 23 Novembre,
23/01/01Alberto Masoni – GR1 - Roma1 I MODELLI DI CENTRI REGIONALI POSIZIONE DI ALICE ITALIA CENTRO ITALIANO: CPU 450 KSI95, DISCO 400 TB (INSIEME TIER-1.
L. Perini CSN1 -Roma 23 Gen Centri Regionali per il calcolo di ATLAS in Italia Tier-1 e Tiers-N : funzioni, localizzazione, necessita di h/w, personale.
CSN1 - Roma 28 Gennaio 2002 Calcolo per CDF Stefano Belforte - INFN Trieste1 Sommario Novita da Settembre 2001 Critica dellesistente: Review CDF Central.
Progetto Speciale Prototipo Tier1 F. Ruggieri INFN – CNAF I Workshop CMS Italia del SW e Computing Roma 22 Novembre 2001.
Introduzione alle attivita Software e Computing di Atlas Napoli M. Biglietti – G. Carlino – F. Conventi - A. Doria – L. Merola - A. Migliaccio Software:
1 La farm di ATLAS-Napoli 1 Gb/s 7 nodi con 2 CPU PIII a 1 GH, RAM 512 MB, 2 schede di rete a 100 Mb/s. Server con 2 CPU PIII a 1 GH, RAM 1 GB, 2 schede.
Aspetti critici rete LAN e WAN per i Tier-2
Test del Monitoraggio del Tracker usando un Tier2 M.S. Mennea, G. Zito, N. De Filippis Università & INFN di Bari Riunione Consorzio – Torino 18 Novembre.
La facility nazionale Egrid: stato dell'arte Egrid-Team Trieste, 9 ottobre 2004.
Vincenzo Vagnoni per il gruppo di Bologna
Michele Michelotto INFN-Padova
LNL M.Biasotto, Bologna, 19 marzo La farm CMS di Padova - Legnaro Proposta di acquisto hardware 1° semestre 2001.
LNL CMS M.Biasotto, Firenze, 22 maggio Hardware e tools di installazione Massimo Biasotto INFN – Lab. Naz. di Legnaro.
1 M. Biasotto – Legnaro, 22 Dicembre 2005 Prototipo Tier 2 di Legnaro-Padova INFN Legnaro.
CDF Meeting - Pisa 29 agosto 2003 Calcolo Stefano Belforte - INFN Trieste1 Stato e prospettive calcolo nazionale Cosa ce Cosa ci sara per il 2004 Cosa.
5 Feb 2002Stefano Belforte – INFN Trieste calcolo per CDF in Italia1 Calcolo per CDF in Italia Prime idee per lanalisi di CDF al CNAF Numeri utili e concetti.
Stefano Belforte INFN Trieste 1 necessita' CDF al Tier1 2 feb 2004 CDF stato e necessita Poco cambiato dal 18 Dicembre 2003.
Commissione Nazionale 1 Castel Gandolfo 11 Set Piano di Calcolo per CDF Run2a Stefano Belforte - INFN Trieste1 Organizzazione analisi per il Run.
Commissione Nazionale 1 11 Settembre 2000 Calcolo per CDF Stefano Belforte - INFN Trieste1 Calcolo per CDF-Italia per il Run 2 Nulla e incerto come il.
Stefano Belforte INFN Trieste 14 Sep 2004 CDF Referee's meeting 1 Calcolo per CDF 1)Rivediamo le richieste 2005 Le 4 slides che ho circolato a Luglio con.
Commissione Calcolo Napoli, 29 Giugno 1999 Strategie e necessita di CDF Stefano Belforte - INFN Pisa1 CDF nel Run II ( …) Cominciamo dalla.
15 Aprile 1999Stefano Belforte - INFN Pisa1 Piano per il Calcolo di CDF Meeting con Referees di Gr. I 15 Aprile 1999.
Analisi e tesi a Pisa Fabrizio Palla. Tesi e analisi a PisaFabrizio Palla INFN-Pisa La situazione tesi TESI di LaureaTESI di Laurea (finite nel 2003)
13-may-031 Calcolo CDF Richiesta sblocco s.j. per Accelerare migrazione farm (analisi e MC) da FNAL al CNAF incluso piccolo status report ed uno sguardo.
Alessia Tricomi Università & INFN Catania
* * Data Challenge 04 Stato dei centri di produzione in Italia.
7 ottobre 2002P. Checchia Padova Cons. di sezione1 Resoconto CSN1 Lecce settembre 2003 Cosiderazioni generali Bilancio 2004: 28 M€ (era 38.5 compreso l’anticipo.
Works in progress.  Semplificazione e maggiore efficienza della gestione  Risparmio (nel medio periodo)  Riallocazione delle risorse (hardware e timesheet)
L. Perini Riunione CSN1, Frascati Il Calcolo di CDF: Relazione dei referees Fabrizio Gagliardi, Laura Perini e Valerio Vercesi.
L. Perini Riunione CSN1, Catania Il Calcolo di CDF: Relazione dei referees Laura Perini e Valerio Vercesi.
24 settembre 2003Stefano Belforte - INFN Trieste1 Calcolo per CDF-2 Revisione annuale 2003 Evoluzione piano di calcolo CDF ( 10min ) Stato e Piano CDF-italy.
6 Febbraio 2006CSN1 - Roma1 MEG : relazione dei referees P. Cenci R. Contri P. Morettini M. Sozzi.
News da LHC… *** Discussion title: CMS Commissioning Notes from 09:00 meeting Current fill (1182) has now been in stable beams for >12 hours. Delivered.
1 CSN1 - Lecce 22/09/2003 Babar Relazione e proposte finanziarie Referee: M. de Palma, P. Lubrano, C. Luci, L. Perini,A. Staiano.
LNL CMS M.Biasotto, Roma, 22 novembre I Tier2 in CMS Italia Massimo Biasotto - LNL.
Calcolo LHC - F. Ferroni, P. Lubrano, M. SozziCSN1 - Catania Calcolo LHC 2003 (F. Ferroni, P. Lubrano, M. Sozzi)
CSN Maggio 2005 P. Capiluppi Il Computing Model (LHC) nella realta’ italiana u I Computing models degli esperimenti LHC gia’ presentati a Gennaio.
Perugia - 12 novembre 2002 M. Morandin - INFN Padova Budget calcolo Babar 2003 e contributo INFN.
CSN1-Assisi L.Perini1 BaBar Calcolo L. Perini per i referees: L.Perini,A.Staiano…
Attività d’analisi dei gruppi CDF di UD e TS Massimo Casarsa Sez. INFN di Trieste Trieste, 8 Febbraio 2005 ► Attività del Gruppo di Udine: M.P. Giordani,
CMS a Trieste Roma, 05/04/2005 GDR. 2 Cronologia : Matura interesse per LHC in Sezione/Gruppo 1 a Trieste Giro d’orizzonte degli esperimenti.
CSN1 20 Settembre 2004 P. Morettini 1 Manutenzione mezzi di calcolo Uff… Manutenzioni Novità del mercato e consigli per gli acquisti.
Cosa cambia per CDF  S.Belforte mantiene per ora 20% (1 day/week) su CDF: il necessario per una attivita’ di coordinamento e transizione verso un nuovo.
Stato del calcolo in BaBar e richieste per il 2004, F. Galeazzi, Giugno 2003 Calcolo in BaBar Stato e richieste al CSN1 per il 2004 presentato da F. Galeazzi.
1 Calcolo e software G. Bagliesi 23/3/01 Riassunto riunione calcolo Bologna 19/3/01 B/tau : futuri miniworkshop.
CDF Relazione dei Referee G. Bruni, P. Giubellino, L. Lista, P. Morettini, L. Moroni, V. Vercesi CSN1 – Maggio 2006.
CDF 2005 Sett P.Giubellino, F.Lacava, P.Morettini, L. Moroni, V.Vercesi.  2005: presa dati e analisi;  Commissioning preshower;  Completamento.
CSN M. Diemoz CMS – RRB24 SOLDI INVESTITI BENE...
CDF I referee Roma, 16 Maggio Tevatron OK Fisica Stanno pubblicando –Bene Nostre principali preoccupazioni su B s -mixing –Sulla base dei loro.
CDF Calcolo Another brick in the wall Paolo Morettini CSN1 Lecce Valerio Vercesi Settembre 2003.
Analisi top M.I. Besana, T. Lari, V. Lombardo, C. Troncon.
D. Martello Dip. Fisica - Lecce Sintesi piani esperimenti CSN2 CNAF 7-marzo-2007.
Domenico Elia1Riunione PRIN STOA-LHC / Bologna Attività per ALICE: sommario e prospettive Domenico Elia Riunione PRIN STOA-LHC Bologna, 18 Giugno.
1 referee-BaBar CSN I, LNF giugno 2007 RELAZIONE DEI REFEREE DI BaBar M.De Palma, C.Luci, C.Troncon, B.Gobbo(calcolo) 26 giugno 2007.
Claudio Grandi Comunicazioni Claudio Grandi INFN Bologna.
Firewall Next Steps Stefano Zani (INFN CNAF) CCR Roma, 14 Settembre 2015 Credit: Stephen Sauer 1.
Referaggio sigla CALCOLO D. Bonacorsi, G. Carlino, P. Morettini CCR – Roma 9 Settembre 2014.
ATLAS e CMS Relazione dei referees A. Cardini, M. Grassi, G. Passaleva, A. Passeri, V.Vagnoni.
1 referee-BaBar CSN I, Roma Gennaio 2008 RELAZIONE DEI REFEREE DI BaBar e SuperB M.De Palma, C.Luci, C.Troncon, B.Gobbo(calcolo),D. Pedrini
1 ALICE I ITER2 DI ALICE IN ITALIA Bologna, 6 marzo 2007 M. Masera
The INFN Tier-1: progetto di ampliamento Cristina Vistoli – INFN CNAF Referee Meeting Sep
Silvia Arezzini 2 luglio 2014 Consiglio di Sezione per Preventivi.
ATLAS Italia – Sestri Levante, 15 Giugno 2010 G. Carlino – Richieste Run Efficiency = time for physics / total time LHC Efficiency = time with colliding.
Gruppo Server Commissione Calcolo e Reti 15 Marzo 2006.
Esigenze di Rete degli Esperimenti LHC e di Gr1 G. Carlino – INFN Napoli CCR – Roma 8 Settembre 2014.
From 8 to 80 boxes. From FBSNG to Condor CPU Satura !
Transcript della presentazione:

Meeting: CDF - Referees 8 settembre 2003 Calcolo CDF Stefano Belforte - INFN Trieste1 Calcolo 2003/4: bottom lines 2003 abbiamo analizzato i dati ! Risorse riservate a FNAL ci hanno salvati MC: fatto tanto, ma ne dovremo fare molto di piu CNAF: espansione maggio non ce ancora ma e stata importante per lavoro W plug, dati e MC 2004 b-physics e diventata item centrale tre anni fa dicevamo: pianifichiamo per High-Pt. Per il B ? qualche Santo ci salvera I dati aumentano, I bisogni aumentano (molto + di L) Il budget di FNAL continua ad essere insufficiente, malgrado O(1M$/year) per analisi MC scacciato da FNAL Canada + ? + ognun per se

8 settembre 2003Stefano Belforte - INFN Trieste2 Il quadro di riferimento Dove siamo Dove andiamo Come ? Perche ?

Meeting: CDF - Referees 8 settembre 2003 Calcolo CDF Stefano Belforte - INFN Trieste3 Un esercizio di saggezza popolare: protasi Luminosita ristagna Upgrade silicio non si fa Higgs sta sfumando Bs yields << aspettative (2fb-1 non bastano) 4/4 silicon layers nel trigger poco efficiente (geometry cracks, dead ladders) Comunque L sale, DAQ dead time cresce (gia al 5% che e max tollerabile) e bisogna prescalare e/o alzare le soglie (ancora meno B)

Meeting: CDF - Referees 8 settembre 2003 Calcolo CDF Stefano Belforte - INFN Trieste4 Un esercizio di saggezza popolare: apodosi Evviva il B, Evviva SVT Niente shutdown lunghi, prendiamo dati, abbassiamo le soglie, aumentiamo i rates, spremiamoci lingegno, rimbocchiamoci le maniche !!! SVT: 4/5, faster timing, RoadWarrior, AM upgrade Sono tutti progetti italiani 3-track trigger, SDPS, CSL upgrade, Pulsar CLS review: comitato include un italiano (Punzi) Pulsar forward e/mu in SVT: idea italiana review trigger table: hadronic B effic. 1% 2~3~? % A cura del gruppo del B italiano CDF ha ancora potenzialita inutilizzate !!

Meeting: CDF - Referees 8 settembre 2003 Calcolo CDF Stefano Belforte - INFN Trieste5 Mi consenta… (un tocco di orgoglio) Non sottovalutiamo limpatto di SVT Tutti i piani erano basati su estrapolazioni Run1 Non avevamo idea di come affrontare la fisica del beauty Non pensavamo nemmeno di poter fare fisica del charm Sotto sotto molti non credevano che SVT avrebbe funzionato Il successo di SVT e stato travolgente CDF e un attore di primo piano nel panorama del B I gruppi di analisi di B e c sono affollati, dinamici, esuberanti Sullonda della competenza sul trigger, dellentusiamo ed orgoglio, e con TANTA fatica, siamo riusciti ad avere una posizione di leadership anche sulla analisi E non dimentichiamo lalto Pt: Z bbar t 6jet W plug : tutti canali nostri

Meeting: CDF - Referees 8 settembre 2003 Calcolo CDF Stefano Belforte - INFN Trieste6 Sociologia: CDF = collaborazione competitiva A CDF i talk a conferenza e le posizioni di responsabilita non si assegnano col manuale Cencelli: Chiunque lavora su quello che vuole, come puo e gli pare Ognun per se e vinca il migliore Le presentazioni ai meeting di analisi sono libere e le fa il lavoratore, non il capo Chi fa bene, e premiato con lodi, visibilita ed altro lavoro da fare Fermilab e lontano, ha un clima orrendo, si lavora e basta I ns. Giovani fanno tanta fatica Non guadagnano soldi o posti Devono almeno avere la soddisfazione di fare fisica Che e il motivo per il quale fanno CDF in primo luogo Chiediamo alla CSN di metterli in condizione di competere e vincere le difficli sfide dellanalisi

8 settembre 2003Stefano Belforte - INFN Trieste7 I bisogni Quanto ci serve Perche ?

Meeting: CDF - Referees 8 settembre 2003 Calcolo CDF Stefano Belforte - INFN Trieste8 Perche i dati da analizzare dipendono poco da L (DPS: Dynamic PreScaling) 1. Luminosity changes by a factor 3 in a 16 hour run 4.5 E E31 3. Rate to tape stays in [50,70] Hz at all times Level 1 Level 2 Level 3 2. Triggers at Level 1 are automatically prescaled

Meeting: CDF - Referees 8 settembre 2003 Calcolo CDF Stefano Belforte - INFN Trieste9 CSL (i.e. tape logger) upgrade 20MByte/s (now) 40 (2005) 60 (2006) Lupgrade che ha unimpatto immediato su calcolo Eventi al secondo su nastro e quello che conta per lanalisi Ora 80Hz: 1/3 = low Pt stream: 80% puro, 50% da B e tutti quei B persi per il prescalo.. e a CDF serve fattore 2~4 per competer con B- factories e fare Bs mixing Autunno: 120Hz (compressione software raw data) 2005: 240Hz Studio dettagliato di come dividere la b/w e ridefinire trigger table in corso CDF Computing Plan (i.e. budget req. to FNAL) mostra che i bisogni non diminuiscono, >= 2M$/anno high-Pt comunque e quella del Run2a maggior appetito per campioni di calibrazione (Jets)

Meeting: CDF - Referees 8 settembre 2003 Calcolo CDF Stefano Belforte - INFN Trieste10 FNAL Plan 2002 Plan non includeva la componente che non scala con L 2003 Plan Review 2002 baseline in base a conferenze invernali Add componente che scala con run time (Beauty e Charm) Fare a Fermilab solo il minimo del minimo: FCC solo per produzione ed analisi. No MC Reprocessing: 20% degli eventi (30% in Run1) Analisi (50% del budget): sostegno a high-Pt come prima (5nb=1TB/1day x 200 user), sostegno a B per quello che si puo: 15 user / 25 day Cio nonostante la spesa rimane >= 2M$/y guidance FNAL fa la sua parte ! Ma non basta Annno fiscaleFY01FY02FY03FY04FY05FY06 M$ chiesti M$ avuti1 (+1 )2+11.4

Meeting: CDF - Referees 8 settembre 2003 Calcolo CDF Stefano Belforte - INFN Trieste11 CDF Policy MC deve essere fatto fuori, 2 componenti MC organizzato: MOU,MOF… (e.g. Canada 10^6 ev/day) MC user level: ognun per se sviluppo e test su piccola scala di MC che poi si fanno centrali, toy MCs, MC di canali specifici, MC che aiutano (apparentemente) solo una analisi di interesse di poche persone Reprocessing, se serve piu della frazione indicata: deve essere fatto fuori MOU, MOF, GRID… per ora solo pie speranze Sviluppare tools per rendere questo possibile la cdf-grid Presto (2005 ?) parte di LA GRID

Meeting: CDF - Referees 8 settembre 2003 Calcolo CDF Stefano Belforte - INFN Trieste12 B physics computing by G.Punzi Italians authors of many crucial B analyses Mainly hadronic decays, CP violation Computing needs Data analysis & MC (CAF ->ntuples->home) Calibration (CAF) Data will stay as it is, only grow Increased BW in CDF, specifically for B physics Compressed event size x2 Calibration a real issue Trigger efficiency, TOF and dEdx change vs time Need huge samples, through all the datataking period Italian are first in doing complex measurements using TOF and dEdx, and in calibrating them on data (e.g. 0.5 TB of D* reference sample currently)

Meeting: CDF - Referees 8 settembre 2003 Calcolo CDF Stefano Belforte - INFN Trieste13 B group computing needs: MC by G.Punzi Efficiency of hadronic triggers ~1% Do some preselection, but cannot improve much (~x2) CPU time: 6s/ev for Pythia evts, 0.5s/ev Bgenerator on 2.5 GHz MC generated&used by Italians (on CAF+Glasgow): B->hh 50M BGEN+fullsim, runbyrun (parametrize for physics results) (CAF) LambdaB->ph 2.5M BGEN+fullsim (CAF) bbar->X Pythia 10M (CAF/Glasgow) Charm 3M Bgen 5M Pythia B->D*X channels: 12M / 6M simulati D*->D0pi 3 modes 100M/50M simulati Bs-> mixing (3 modes) 6M bgen (segnale) = 63M (fondo+sistematica) simulati B+->phiK+ 2M Bgen J/psi K 6M J/psi phi 2M Bs->phi phi 2M phiK* 4M Total 260MBgen+15M pythia = 2.2*10^8s= 2500 CPU days Need at least 10x next year (more date, more precision)

Meeting: CDF - Referees 8 settembre 2003 Calcolo CDF Stefano Belforte - INFN Trieste14 B group computing needs: MC by G.Punzi 2004: Data x3-x7 ->more quantitative -> go to physics papers ->more channel-specific MC Also, plan HUGE generic bb MC to understand backgrounds, other side tagging, validate Bgenerator Efficiency <0.3% Need Pythia events-> 10^9 s=10^5 CPU days (1K CPU x 3m) Expect to do within CDF, but still need pilot productions ! and likley will need to add to Toronto CDF policy: move MC out of CAF, precious for data We need it for our analyses anyway ! CAF designed for 15 B-users,spinning through every 25 days Will need CPU at home to make the MC we need, whether standalone, or in coordination with the CDF effort Will need CPU and disk at home to supplement limited data analysis capacity on FNALs CAF

Meeting: CDF - Referees 8 settembre 2003 Calcolo CDF Stefano Belforte - INFN Trieste15 Il nostro piano (non e cambiato !) Lanalisi si regge su 3 gambe: 1)Produzione campioni skimmati/ntuple a partire dai DST 0(10-100TB): FNAL 2)MC ed analisi ripetute di campioni ridotti O(1TB): CNAF 3)Sviluppo codice (edit, compile, link, run, debug) ed analisi interattiva Paw/Root O(100GB) : desktop e/o clusters di sezione (o desktop cicciuto a FNAL) desktops da dotazioni rinnovati ogni 5 anni, in media hanno 2.5 anni di eta (3 anni standard di obsolescenza), cpu/disco su desktop inefficiente per gruppi grossi con rapido turnover piccoli clusters fondamentali (per ora) Alternative: General INFN-wide login facility ? Dove ? Quando ? Interactive grid: the last frontier (ci siamo !!)

8 settembre 2003Stefano Belforte - INFN Trieste16 Le farms: the plan 2004: lanno del CNAF Non compriamo altro a FNAL Rendiamo CNAF ~ quota INFN a FNAL Vediamo come va Scelta coraggiosa: a tuttoggi la farm CNAF sono 5 duals, 1TB, 3 utenti, ruolo molto marginale

Meeting: CDF - Referees 8 settembre 2003 Calcolo CDF Stefano Belforte - INFN Trieste17 Sinopsi delle nostre CAF (Fnal e Bologna) nero=certo rosso=richieste da approvare FNALCNAF CpuDiskCpudisk dualsGHzTBDuals GHzTB 2003 ( FNAL owned ) ( INFN owned ) total ( FNAL owned ) ( INFN owned ) total~500~3000> (FNAL owned ) ( INFN owned ) ??? 2005 (total)>800>4000> at CNAF = attivo da autunno, 2004 = da ~estate FNAL total = FNAL owned + INFN owned + UK+Japan+Germany+… 2004 al CNAF = se richiesta nei moduli (290KE) e approvata interamente

Meeting: CDF - Referees 8 settembre 2003 Calcolo CDF Stefano Belforte - INFN Trieste18 CAF a Fermilab File servers INFN pieni al 70%, aggiornamento quotidiano su Uso delle CPU non di facile documentazione (avuti problemi col monitor), da una ispezione ~quotidiano (sb) la nostra quota e occupata circa la meta del tempo. Limportanza della coda riservata non e stata tanto nella media (non e una produzione MC long distance) quanto nel permettere lo spunto di picco necessario per i blessings

Meeting: CDF - Referees 8 settembre 2003 Calcolo CDF Stefano Belforte - INFN Trieste19 Prospettive CNAF Nessun problema (per qualche anno) di spazio/power/cooling Fnal minaccia di farci pagare opearation costs Fnal vuole ritirare le ns. macchine dopo 3 anni Accesso diretto agli USA a 2.5Gbit/sec Ancora piu attraente per CSN1: Cpu non-usata per CDF MC (da ora) contributo a CDF che possiamo monetizzare a differenza di CPU non-usate a FNAL che va persa Fbsng Condor (Igor Sfiligoi e Bolognas Condor team) possibile accesso via Condor/Grid a tutto INFN CPU non usate a chi ne ha bisogno Macchine non usate: CDF LHC in 1 giorno Investimento al CNAF sono soldi sicuri per INFN Con un po di fatica anche disco puo essere reso dinamico

8 settembre 2003Stefano Belforte - INFN Trieste20 Le farms Dal punto di vista di chi fa analisi Abbastanza disco per tenere i dati Abbastanza CPU per analizzare quei dati Abbastanza CPU per fare MC

Meeting: CDF - Referees 8 settembre 2003 Calcolo CDF Stefano Belforte - INFN Trieste21 Richieste farm CNAF 2004 Richieste: 290KEuro 23 TB = 115 keuro a 5kE/TB 70 duals = 175 kEuro a 2.5kE/dual Rationals – DISK Arrivare ad almeno 30 TB ( dettagli nelle prossime slides ) 10 TB high pt 15 TB tertiary data set B Speriamo di gestirne una buona parte come cache dinamica 5TB Users space (200GB x 25 users) N.b. 100GB/user = standard FNAL Rationals – CPU A fine duals x2.2GHz = 211GHz Equivalenti a GHz 2004 arrivare a GHz = 700GHz 300 per analisi per MC ( dettagli nelle prossime slides )

Meeting: CDF - Referees 8 settembre 2003 Calcolo CDF Stefano Belforte - INFN Trieste22 Dettagli 1: 15TB per B Dai primi 100pb^1: 7TB di DST nel canale B inclusivo SKIM ! Esempio: una analisi su Bs (Donatella Lucchesi) Bs Ds pi phi pi pi seleziona ~2% del totale Bs D0pi seleziona ~2% B0 Dpi K pi pi seleziona ~9% Totale circa 1TB da importare in Italia 100pb^-1 400, DAQ rate x2: ~8TB solo per questa analisi Almeno un altro canale di Bs verra aggiunto Altro esempio: B 3body (Massimo Casarsa) selezione accetta ~5% del totale 1% solo per il canale esclusivo B kkk ~3TB aggiuntivi B pipi (Diego Tonelli, Simone Donati) Pochi dati, Tanta calibrazione (particle ID) Piu il MC, le ntuple, un po di campioni di calibrazione…

Meeting: CDF - Referees 8 settembre 2003 Calcolo CDF Stefano Belforte - INFN Trieste23 Dettagli 2: 10TB per high-Pt Dai primi 150pb^-1 (tutto quello che ce con SVX finora) Z bbar (Tommaso Dorigo) 3Mevents finora Da una settimana, nuovo trigger: 20 45nb Altri 250pb^-1 con nuovo trigger = altri 10M events DST+ntuple ~ 300KB/event 4TB Finora 0.5TB di MC generato (1.8Mevents) Serve almeno x3 MC Totale ~6TB Top 6jet (Ambra Gresele) 1.2TB/100pb^-1 ~4TB W plug (Antonio Sidoti) 0.8TB usati attualmente su CNAF Totale per 400pb^-1 ~ 2.5TB Siamo gia a 12.5, poi, jet calibrations, top mass…, H bb..

Meeting: CDF - Referees 8 settembre 2003 Calcolo CDF Stefano Belforte - INFN Trieste24 Dettagli 3: 700GHz E una speranza Se 3.5 troppo costoso (vogliamo comprare subito!) si compra 3GHz e totale e 631GHz invece di 700 Analisi: Good old rule: 1GHz/100GB (1 10Hz) 30TB 300GHz Monte Carlo Bgen: 25K CPU-days, Pythia 100K (?) CPU-days 50K 2.5GHz = 120K GHz-day 400GHz x 1year (300 days) = 120K GHz-day Siamo nel right ball park N.B. 400GHz sono 16Hz di eventi con Pythia ~ 1M/day Efficienza non e 100%, ci sono bisogni di picco, … tutto sommato chiediamo quasi poco

8 settembre 2003Stefano Belforte - INFN Trieste25 Le farms Dal punto di vista di chi compra Quanto costano i 30TB + 700GHz ? Quando vanno fatti gli ordini ? Cosa si compra ? Si compra da Trieste o da CNAF ?

Meeting: CDF - Referees 8 settembre 2003 Calcolo CDF Stefano Belforte - INFN Trieste26 HW farm CNAF 2004 Difficile definire con esattezza GHz e TB Quale sara il clock + conveniente ? (ho usato 3.5GHz) Quanto costera il disco ? ora ho comprato a 4.2kE./TB = rock bottom - raid sw – sistemi non testati – perf. ignote - 1) Moores law costo scende 2) hw migliore costo sale (hw raid, cpu migliore, maggior memory cache, dual/triple Gbit, problema difficile: b/w disco cpu = bottleneck, dimensioni file server aumentano piu cpus piu veloci lo accedono server deve dare maggior banda su rete). Teniamo 5kE/TB e speriamo che Moore vinca e si possa comprare anche > 23 TB (30 e.g.)

Meeting: CDF - Referees 8 settembre 2003 Calcolo CDF Stefano Belforte - INFN Trieste27 Nota su disco Visita al Tier1 il 3 settembre 2003, lunga discussione con Felice Rosso, Stefano Zani, Piergiorgio Ricci e Federico Ruggieri CDF ora usa 1GB da NAS4 (NAOS): non va, non si sa perche Accesso da 1 worker node: 50 Mbit/sec, da 2 nodi 100Mbit/sec, da 3 nodi: 100Mbit/sec (Belforte). Ripetute iterazioni di Bonnie (e.g.) sul NAS in locale danno risultati oscillanti tra 50 e 1 Mbyte/sec (Zani) Tecnico bravo NAOS si e licenziato Gara CNAF vinta da Oxyria (ex NAOS), brr.. CDF ha appena comprato 7TB da Oxyria (come gara), sigh INFN potrebbe annullare gara Oxyria Unica cosa che funziona bene: Procom (ma.. $$$$$) Non ce una soluzione raccomandata Raid arrays Virgo a Cascina promettenti, ma 5KE/TB Test a CNAF questa settimana

Meeting: CDF - Referees 8 settembre 2003 Calcolo CDF Stefano Belforte - INFN Trieste28 Maledette gare CNAF 2003: gara autorizzata a Febbraio, offerte ad Aprile, contratto ancora da firmare Si installa quello che era sul mercato 6 mesi prima (se va bene) Trieste 2003: 80KE (36 duals) sbloccati a Maggio, disponibili a TS a fine Giugno, autorizzati in economia GE 27 luglio, lettera alle ditte 12 agosto (!), ordine GE 25 settembre (speriamo) Stiamo lontani da gare CNAF ! Fondi a Trieste Goal = 2 acquisti in economia Febbraio per aver subito risorse per la primavera (conferenze estive = appuntamento + importante) Luglio per comprare meglio evitare autunno (Pacciani dixit), dare a Ditte > 10gg per offerte s.j. solo se con sblocco a Febbraio/Marzo OK con amministrazione Trieste e Direttore CNAF Utile (necessario?) acquistare materiale (disco e.g.) Tier1

8 settembre 2003Stefano Belforte - INFN Trieste29 Linterattivo: Dopo aver fatto le ntuple sulle farms bisogna fare i plots per Physical Review Le sezioni I desktop a FNAL

Meeting: CDF - Referees 8 settembre 2003 Calcolo CDF Stefano Belforte - INFN Trieste30 La terza gamba: clusters nelle sezioni Richieste in linea con filosofia comune, globlamente di importo in linea con le aspettative, dettagli da discutere coi responsabili locali delle singole sezioni: totale 62 KEuro BO: 0 OK per ora LNF: 5 KE progetto FBSNG Condor(+Proof) (Igor Sfiligoi) 2 server (mini-CAF) per sviluppo sw (scratch/reboot…) PD: 7 KE rafforzamento CPU per analisi locale 2 server + rack + switch per collegare a macchina esistente 4x700 Compaq del 2001 fornisce solo 2.8 GHz PI: 27 KE vedi slide ad hoc RM: 20.5 KE potenziamento per interattivo ed analisi Un nuovo dual a FNAL per interattivo (3.5K) 1 server + 2TB a Roma (4+13K) UD: 1 kE poco disco TS: 1.5 kE sostituzione 1 PC a FNAL 2 acquistati nel 1999 (P2 400MHz), uno si e rotto a Luglio

Meeting: CDF - Referees 8 settembre 2003 Calcolo CDF Stefano Belforte - INFN Trieste31 Pisa (la richiesta piu grossa) (descritta in dettaglio da F.Scuri in mail del 31/7) Cluster attuale acquistato nel 2001, spendendo poco Ci sono state fin dallinizio difficolta hw (schede rotte, macchine che non andavano), ritardi nellintervento del venditore e difficolta notevoli col supporto sistemistico finalmente risolte Adesso sono in funzione 5 duals (workers) + server con 400GB di disco, altri 300GB recuperabili spostando dischi (serve chassis) in cluster FastEthernet Goal 2004 (~20 persone attive) +1TB (<2totali) 8 kE 4 duals (9 totali) 10 kE Backup utente 3.5 kE Rimborso kE (riparazioni) Sostituzione 2PC 3.5 kE (a FNAL, P3 del 2000 in w2k)

Meeting: CDF - Referees 8 settembre 2003 Calcolo CDF Stefano Belforte - INFN Trieste32 Quadro complessivo hw nelle sezioni Volevo fare il quadro di quanto e stato finanziato per i clusters nelle sezioni dal 2000 ad oggi, ma mi e mancato il tempo di fare larcheologia necessaria. Se ci tenete, lo faccio per la fine della settimana Forse lo hanno gia fatto i referees ?

Meeting: CDF - Referees 8 settembre 2003 Calcolo CDF Stefano Belforte - INFN Trieste33 Interattivo a FNAL (i duals da tavolo) La situazione e sempre la solita Pool interattivo usando nodi CAF, sperabilmente in beta test da Novembre/Dicembre, noi non siamo coinvolti. Se va Spostiamo li i dischi FC (2TB) da fcdfsgi2 Spostiamo li ~10 nodi CAF piu vecchi (2x2GHz) Long term solution: Interactive Grid basata su Proof (vedi dopo), ancora lontana Desktop a FNAL: ottimo accesso a dati (ntuple e.g.) su CAF servers e/o fcdfsgi2 via rootd, utili anche da Italia Dual CPU desktop = miglior GHz/$ rispetto a due desktop Stima dellanno scorso: 10 sistemi come tetto, ancora valida Al momento ce ne sono 4 installati Si chiede di portarli a 5 (1 richiesto da Roma)

Meeting: CDF - Referees 8 settembre 2003 Calcolo CDF Stefano Belforte - INFN Trieste34 Situazione desktops FNAL (svecchiamo ?) Vedi : Eta media nel 2004: 2.7 anni Anno di acquisto TOTdi cui duals Bologna112 LNF22 Padova41162 Pisa Roma Udine112 Trieste22 TOTALE

8 settembre 2003Stefano Belforte - INFN Trieste35 Il software Ci diamo tanto da fare per far funzionare le farms aumentarne lefficienza avere voce in capitolo in cosa fa FNAL entrare in Grid

Meeting: CDF - Referees 8 settembre 2003 Calcolo CDF Stefano Belforte - INFN Trieste36 Attivita software farms 2003 Users monitor (Lazzizzera/Amerio – Trento) Monitoraggio operazione batch system ICAF e CAF-mailer (Sfiligoi – LNF) Gestione disco locale e report jobs sulla CAF Condor (Sfiligoi – LNF + Mazzanti/Semeria - Bologna) Transizione batch system FBSNG Condor SAM development (Roberto Rossin – Padova) Agevolazione transizione DFC SAM CAF at CNAF (Belforte - Trieste + Sidoti – Pisa) Installazione, gestione, supporto utenti SAM test and tune (Belforte/Casarsa – Trieste) Installazione in Italia, configurazione, test, documentazione I/O monitor (Armando Fella – Pisa) Monitor I/O nella CAF: wait for tape/cache, MC o Ana etc.

Meeting: CDF - Referees 8 settembre 2003 Calcolo CDF Stefano Belforte - INFN Trieste37 Software I FNAL: Abbiamo investito molto in passato sul monitor CAF (creazione TS/BO), ma non siamo riusciti a rimanerne on top (carenza umana), ci riproviamo per la CAF a Bologna Interactive Grid (Condor+SAM+CAF+Proof): Igor Sfiligoi Ottimo progetto, grandi speranze, grande visibilita e ricaduta. Prototipo fine 2003, se OK collaborazione con INFN-Grid ? CNAF/Italia: come Maggio + bbftp (24Mbit/sec fnal ts) Siamo indietro (lavorato su SVT). Serve: aggiornare CAF software provare altre configurazioni di SAM (gridFtp, muliple stagers, 2 levels of local cache) installare SAM al CNAF spazio disco utenti al CNAF (icaf)

Meeting: CDF - Referees 8 settembre 2003 Calcolo CDF Stefano Belforte - INFN Trieste38 Software II CNAF: serve anche supporto utenti creazione code, help desk, odds & ends Dovremmo farcela con: Art. 15 al CNAF (da chiedere) per supporto utenti Belforte/Casarsa: sviluppo SAM Belforte/Sidoti (+ borsista Pisa, speriamo) SAM at CNAF Belforte/Sfiligoi : aggiornamento CAF al CNAF Sfiligoi : icaf al CNAF In numeri: 2.6FTE (+ possibile contributo da Bologna) GUI per monitor HV upgrade silicio (Semeria) cancellata ? Art. 15 = 1 FTE Belforte = 0.4 FTE Casarsa = 0.2 FTE Sidoti = 0.1 FTE Sfiligoi = 0.4 FTE Borsista = 0.5 FTE + almeno altre 2 persone hanno dichiarato di voler aiutare

8 settembre 2003Stefano Belforte - INFN Trieste39 Conclusione Il piano finanziario Ennesima versione aggiornata fino al 2004

Meeting: CDF - Referees 8 settembre 2003 Calcolo CDF Stefano Belforte - INFN Trieste40 The Plan (as presented 24 Jun 02 in CSN1) evolving… and evolving… Only analysis farm. No MC. No interactive. CNAF needs in are not covered here But 40% contingency next years. Will cover up to 3.5 fb-1 with money indicated last year for 2 Future CNAF farm may cost 2x to deal with 5x the data. 2004: expand farm at CNAF but not FNAL No resource duplication. Staying well within initial estimate and CSN1 agreement: 1Meuro until 2004 Discuss 2005-… in 2004 (Jun or Sep) 866 ?

8 settembre 2003Stefano Belforte - INFN Trieste41 SPARE SLIDES Nulla di nuovo dopo questa