17-18 Dicembre 2014 Second Belle II italian collaboration meeting – Dicembre 2014 Networking e calcolo di Belle II a Napoli - Recas Silvio Pardi INFN-Napoli
17-18 Dicembre 2014 Second Belle II italian collaboration meeting – Dicembre 2014 La rete LHCONE Il LHCONE è essenzialmente una rete L3 privata per i Tier 2 che utilizza circuiti designati per il traffico LHC. Il servizio è realizzato come un insieme interconnesso di reti private localizzate chiamate istanze Virtual Routing e Forwarding (VRF). Tutte le NREN offrono il servizio VRF per i suoi siti di LHC I VRFs sono collegati tra loro e annunciano tutti i loro siti a vicenda LHCONE VRF è ora un servizio di produzione e la sua gestione viene fatto dal LHCONE Operations WG - contattare Edoardo Martelli di aderire alla lista - 2
17-18 Dicembre 2014 Second Belle II italian collaboration meeting – Dicembre 2014 ` ` ` The LHCONE VRF Service Site 1 Site 2 Site 3 VRF provider 1 Sites announce addresses of systems or subnets devoted to LHC systems routes between all of the announced addresses announces site provided addresses (“routes”) to other VRF providers accepts route announcements from other VRF providers and makes them available to the sites Site 4 Site 5 Site 6 VRF provider 2 Site 7 Site 8 Site 9 VRF provider 3 announces routes accepts routes announces routes accepts routes announces routes accepts routes Links suitable for LHC traffic R&E Internet provider (e.g. ESNet)
17-18 Dicembre 2014 Second Belle II italian collaboration meeting – Dicembre 2014 La rete LHCONE Concetto LHCONE basa sulla separazione tra il traffico ad alto impatto di LHC, e il traffico non LHC: Evitare l'impatto negativo sul traffico di ricerca Abilita spostamento dei dati LHC ad alte prestazioni LHCONE Servizi: Virtual Private Network (operativa) PerfSONAR: il monitoraggio delle infrastrutture (operativa) P2P: dedicata, larghezza di banda garantita, point-to-point link - (sviluppo) 4
17-18 Dicembre 2014 Second Belle II italian collaboration meeting – Dicembre 2014 Networking – Belle II & LHCONE E’ stato accettato il traffico Belle-2 nella rete LHCONE. Discussione in atto su come connettere ad LHCONE i siti di Belle II. Praticamente tutti i siti Italiani coinvolti in BELLE II sono in LHCONE o stanno per entrare
17-18 Dicembre 2014 Second Belle II italian collaboration meeting – Dicembre
7
Belle II computing model fino al III anno
17-18 Dicembre 2014 Second Belle II italian collaboration meeting – Dicembre 2014 Belle II Computing Model dal IV anno 9
17-18 Dicembre 2014 Second Belle II italian collaboration meeting – Dicembre 2014 Raw Data Distribution 10 Data transfer KEK to Europe: --> via PNNL: KEK to PNNL and PNNL to Europe to cut the latency KEK to Europe into two parts -- at least as long as data transfer KEK to Europe via USA takes place.
17-18 Dicembre 2014 Second Belle II italian collaboration meeting – Dicembre 2014 SCENARIO 1 11
17-18 Dicembre 2014 Second Belle II italian collaboration meeting – Dicembre 2014 SCENARIO 2 12
17-18 Dicembre 2014 Second Belle II italian collaboration meeting – Dicembre 2014 Velocità programmata della rete: fino a 40Gbps Potenza di calcolo: 128 server, 8192 core, cluster HPC di 20 nodi con GPU per complessivi ulteriori 800 core Capacità di memorizzazione: 3552 TB su disco e 2500 TB su nastro (Tape library) Datacenter di Bari Velocità programmata della rete: fino a 40Gbps Potenza di calcolo: 132 server, 4956 core core pre-esistenti (Datacenter SCoPE) Capacità di memorizzazione: 4957 TB TB pre-esistenti (Datacenter SCoPE) Datacenter di Napoli Datacenter di Catania Velocità programmata della rete: fino a 40Gbps Potenza di calcolo: 54 server, 2562 core core pre-esistenti Capacità di memorizzazione: 1000 TB TB pre-esistenti Datacenter di Cosenza Velocità programmatadella rete: fino a 40Gbps Potenza di calcolo: 90 server, 3500 core Capacità di memorizzazione: 900 TB Infrastruttura ReCaS “core”; 11 PB su disco, 2.5 PB su nastro
17-18 Dicembre 2014 Second Belle II italian collaboration meeting – Dicembre 2014 Data Center SCOPE L’Infrastruttura ReCaS Napoli
17-18 Dicembre 2014 Second Belle II italian collaboration meeting – Dicembre 2014 Obiettivi di progetto Potenza elaborativa (kHepSpec) Storage (Pbyte) Unina60,8 INFN-NA40,6 Velocità programmata della rete: fino a 40Gbps Potenza di calcolo: 132 server, 4628 core core pre-esistenti (Datacenter SCoPE) Capacità di memorizzazione: 4957 TB 300 TB pre-esistenti (Datacenter SCoPE) L’Infrastruttura ReCaS Napoli Tutte le risorse di ReCaS Napoli ( e degli altri siti) possono essere utilizzate in best-effort da Belle II utilizzando il fair-share come modello di condivisione. Ci sono delle risorse dedicate per Belle II (vedi slide successiva) Gia inserita in LHCONE
17-18 Dicembre 2014 Second Belle II italian collaboration meeting – Dicembre 2014 Risorse Dedicate per Belle II ReCaS: Belle II rack 22rack 23 tipocoreramTBHepSpectipocoreramTBHepSpec 1CMC RITTAL1 2rear: pannello 36 LC duplex mm OM42 3rear: pannello passa permute3 4rear: Pannello 24 porte RJ45 (MNG)4 5rear: pannello passa permute5 6rear: Pannello 24 porte RJ45 (MNG)6 7front: juniper EX port (MNG)7front: CISCO SG port (MNG) 8rear: juniper EX port (Backup) DELL PE R DELL PE R DELL MD 3600f DELL MD DELL MD DELL MD DELL PE R DELL MD Supermicro As-2042g DELL MD Supermicro As-2042g DELL PE R720xd Supermicro As-2042g DELL PE R720xd Supermicro As-2042g DELL PE R720xd Supermicro As-2042g DELL PE R720xd Supermicro As-2042g DELL PE R720xd DELL PE R210 II DELL PE R210 II DELL PE R720xd DELL PE R210 II DELL PE R210 II DELL PE R720xd DELL PE R210 II DELL PE R210 II DELL PE R720xd DELL PE R210 II DELL PE R210 II totale: totale: ReCaS R05 (Belle II) R06 (Belle II) tipocoreramTBHepSpectipocoreramTBHepSpec 1CMC RITTAL1 2rear: patch panel ottico (24 bussole LC quad MULT)2 3rear: passacavi3 4rear: patch panel rame 24 porte front: CISCO SG (48p) man. Rack DELL R620 (DB DPM) in gara Regione Campania Supermicro As-2042g in gara Regione Campania Supermicro As-2042g in gara Regione Campania Supermicro As-2042g in gara Regione Campania Supermicro As-2042g in gara Regione Campania Supermicro As-2042g in gara Regione Campania Supermicro As-2042g in gara Regione Campania DELL PE R620 (esist.) DELL PE R620 (esist.) in gara Regione Campania DELL MD 3600f in gara Regione Campania DELL MD in gara Regione Campania DELL MD in gara Regione Campania DELL MD in gara Regione Campania DELL MD in gara Regione Campania DELL MD in gara Regione Campania DELL MD in gara Regione Campania DELL MD DELL MD (predisposte 2U) totale: totale: Core Dedicati con protocollo Grid e Cloud 578 TB Disco Dedicati con protocollo DPM Altri 960 Core Dedicati in prossima acquisizione Data Center Fisica 1g01 Data Center SCoPE
17-18 Dicembre 2014 Second Belle II italian collaboration meeting – Dicembre 2014 Impatto della messa in esercizio delle risorse di ReCaS 4 th MC Campaign Contributo dell’infrastruttura di Napoli nell’ultima campagna di produzione MC.
17-18 Dicembre 2014 Second Belle II italian collaboration meeting – Dicembre 2014 Attività In corso: Calcolo delle esigenze di rete per il prossimi anni Setup delle farm Monitoring con PerfSonar dei siti Cosa si potrebbe fare: Partecipare alla definizione dei tools di sviluppo Framework DIRAC Testing dei File Catalog 18