1 GM, CCR, Roma 2 marzo 2010 Gruppo Netarch Riunione CCR Roma 2 marzo 2010 Relazione Gruppo NetArch

2 GM, CCR, Roma 2 marzo 2010 Accesso a Garr-X per i T2 italiani Switch di aggregazione per un T2 Apparati valutati Conclusioni

3 GM, CCR, Roma 2 marzo 2010 Accesso a Garr-x per i T2 italiani

GM, CCR – Roma 2 marzo Modello di connessione T0-T1-T2 Modello iniziale di accesso T0-T1-T2 a la “Monarch”, gerarchico T0 T1s T2s T1s T2s Tendenza “a matrice” del modello attuale di accesso T1-T2 Evoluzione dei requisiti

GM, CCR – Roma 2 marzo Previsioni attuali di banda per ogni sede di T2 Banda Garantita di accesso (Gbit/s) Range di utilizzo tra caso massimo continuativo e caso straordinario ContinuativoStraordinarioContinuativoStraordinarioContinuativoStraordinarioContinuativoStraordinario CNAF 10,211,915,517,320,723,222,224,6 Catania 1,51,91,82,65,36,65,66,7 LNL 1,92,3 3,62,84,54,26,8 Milano 0,71,41,02,31,43,71,43,6 Napoli 0,71,41,02,31,33,61,43,6 Pisa 0,81,61,32,71,53,32,55,1 Roma1 1,42,22,33,72,85,13,76,3 Torino 0,81,21,01,91,42,91,72,9 Bari 0,91,31,42,31,83,22,33,5 Frascati 0,61,20,71,40,92,31,02,2

GM, CCR – Roma 2 marzo Banda Garantita di accesso (Gbit/s) ai siti internazionali Caso Straordinario Tipo CollegamentoSiti collegati Tra siti INFN e Siti Internazionali CNAF-Siti Internazionali8,411,517,116,7 Altri Siti INFN - Siti Internazionali 5,57,78,112,1 Tra siti INFN e CNAFCNAF- Siti INFN6,310,113,216,0

GM, CCR – Roma 2 marzo GARR-X Garr sta realizzando la nuova struttura ottica della rete per la ricerca italiana Interagendo con GARR stiamo chiedendo una infrastruttura che ben si adatti alle nostre esigenze Il modello gerarchico ben si prestava ad una soluzione di rete ottica a stella con i T2 italiani ai vertici della stella e il nostro T1 al centro. Ma abbiamo visto che questo modello non risponde ai requisiti degli esperimenti oltre a presentare problemi di affidabilità. Un accesso di tipo IP in tecnologia ethernet tra i T2 e i T1 rappresenta una soluzione piu flessibile e piu efficiente in quanto permette una connettività a “matrice” tra i nodi internazionali di analisi (T2) e vari centri T1 degli esperimenti. Va comunque privilegiato l’accesso al T1 di riferimento (CNAF) dedicando delle lambda (10 Gbps) al traffico LHC tra i pop relativi ai T2 e il pop di Bologna.

GM, CCR – Roma 2 marzo Connessione T2-Garr-X: modello fisico T2 Main Switch T2 Router Router Sez/lab LAN Sez/lab IP Garr IP Garr - Backup Tier1 Router POP-X Sede T2 Ethernet l 10 Gbps dedicata

GM, CCR – Roma 2 marzo POP-X Connessione T2-Garr-X: modello logico Tier1 Router T2 Main Switch T2 Router IP Garr IP Garr - Backup VLAN 1 VLAN 2 VLAN 3 VLAN1 per collegamento dei T2 al Tier1 del CNAF VLAN2 per accesso IP general purpose primario in modo da garantire l’accessibilità da e verso i T1 e T2 internazionali VLAN3 per accesso IP general purpose di backup

GM, CCR – Roma 2 marzo Connessione T1 – Garr-X Tier1 Router POP-X 3 X 10 Gbps T0 – T1 (10 Gbps  100 Gbps) T1 – T1 (10 Gbps) T1 – T2 (1 x 10 Gbps  n x 10 Gbps)

GM, CCR – Roma 2 marzo Requisiti Edge Router –Protocolli “standard” di routing + Border Gateway Protocol (BGP) –Routing engine a wire speed –Numero porte a 10 Gbps: >= 2 –Possibilità di accesso a link a 1 Gbps –Tabella di routing O(1000) –Nel caso di link in ridondanza: Ethernet OAM (802.1ag)

GM, CCR – Roma 2 marzo Switch di Aggregazione per i T2

GM, CCR – Roma 2 marzo Layout aggregazione T2 Server Disk Array Server SANSAN Disk Array 1 Gbps links boxes n-cores o Blade center Switch Concentratore 10 Gbps link > 200 Gbps Ethernet backbone ~ TB 8 Gbps FC links N*Gbps trunck 10 Gbps X-Pop / Centro Stella Lab.

GM, CCR – Roma 2 marzo Requisiti Switch aggregazione –Banda passante Gbps –Numero porte a 10 Gbps : –Per la funzione di aggregazione è sufficiente L2. Se disponibile L3 (vedi requisiti edge router) lo switch puo fare anche da edge router per il T2. –Se possibile no blocking o con oversubscription basso (e.g. 2:1) –Investimento per il futuro se con FCoE –Due modelli possibilil di aggregazione Flat –Tutte le connessioni vanno allo switch centrale. Linee a 10 Gbps e 1 Gbps A due livelli –Concentratori di rack raccolgono piu link a 1 Gbps e hanno uplink a 10 verso l’aggregatore centrale Misto

GM, CCR – Roma 2 marzo Apparati di Aggregazione e Accesso a Garr-x 15 I T2 sono inseriti nell’infrastruttura IT della sede che ospita il centro. Gli apparati necessari a garantire al T2 l’accesso a Garr-x dipendono dal modo in cui i T2 sono stati integrati nella LAN della sede e quindi variano caso per caso. In generale abbiamo due possibilità: POP-X a) T2 e router di sede separati T2 Aggr. Switch LAN Sez/lab Router Sez/Lab POP-X b) Router integrato tra T2 e sede T2 Aggr. Switch T2 Router Router Sez/Lab LAN Sez/lab

GM, CCR – Roma 2 marzo Apparati di accesso a Garr-x per i T2 (II) Inoltre il main switch del T2 può fare da router per il T2 stesso, quindi nel caso a) possiamo avere concentrato in un solo apparato sia lo switch che il router POP-X T2 Aggr. Swtich + Router Router Sez/Lab LAN Sez/lab

GM, CCR – Roma 2 marzo Apparati Valutati

GM, CCR – Roma 2 marzo MarcaModelloPorte 10 Gbps AggregazioneRouter per Garr-X FCoENote CISCO4900M24Si No 45XX4-44Si No Nexus SiNoSi JUNIPERMX804-6NoSiNo EX250024SiNo EX????48 >48 stack Si Si in roadmap Apparato nn ancora annunciato. Stack a 512 Gbps ExtremeX65024 >24 stack Si NoStack a max 512 Gbps HP84XX48SiNo L3 senza BGP SiNo L3 senza BGP Allied TelesynX90816Si No

GM, CCR – Roma 2 marzo Proposte dei siti T2 SedeT2RouterAggregazione CataniaAlice4507 TorinoAliceSezione, da scegliere HP8412 MilanoAtlasX650 RomaAtlas/CMS4900M (?)X650 NapoliAtlasX650 BariAlice/CMSHP5412 PisaCMSF10 E1200 o router dedicato F10 E1200 LNLAlice/CMS4900M (?)X650

GM, CCR – Roma 2 marzo Conclusioni (I) Per sfruttare appieno la nuova infrastruttura GARR-X e rispondere nel modo piu efficiente ai requisiti degli esperimenti abbiamo proposto –accesso IP ethernet ai pop-x –Lamda dedicata a 10 Gbps tra i pop dei T2 i il pop del T1 –Adeguata banda di accesso all’IP internazionale (GEANT) Sono stati individuati alcuni apparati per il networking dei T2 di alte prestazioni e costi contenuti per: –Aggregazione dei nodi (worker node e servers) dei T2 Apparati compatti a 1 o 2U con max 50 porte 10 Gbps non blocking. Stack ( Gbps) e quindi possibilità di accesso a piu porte, ma oversubscription. In alcuni casi ottimo L3 per funzionalità di full routing Range di prezzo interessantissimo se confrontato con gli apparati modulari Necessità di configurazione della rete a due livelli con switch di rack –Edge router di accesso a 10 Gbps a GARR-X Requisiti di routing non particolarmente sofisticati, senza servizi ausiliari (firewall, nat, ecc. ) Tabella di routing piccola Apparati compatti o modulari di switching con funzionalità di full L3 Range di prezzo interessante se confrontato agli apparati di classe enterrpise che assicurano le caratteristiche richieste, ma che mettono a disposizione anche un insieme di servizi e funzionalità che non servono nelle nostre applicazioni.

GM, CCR – Roma 2 marzo Conclusioni (II) Le sedi ospitanti i T2 hanno presentato il proprio progetto di aggregazione e accesso a GARR-X e, quando necessario, di integrazione nella LAN della sede. La richiesta relativa di fondi è già stata presentata a settembre 2009 e verrà verificata in questa riunione della CCR.

GM, CCR – Roma 2 marzo SPARE

GM, CCR – Roma 2 marzo I T2 di Atlas Milano Roma Napoli Aggregazione T2 con Embedded router Garr-x n x 1 Gbps / 1 x 10 Gbps LAN Sez. I T2 di Atlas avranno un aggregatore (Extreme X650) che funge anche da router verso Garr-X. Un link dedicato alla LAN della sezione assicura la connettività con i servizi della sezione. 1 Gbps Roma ospita anche il T2 di CMS che utilizza questo architettura per accedere a Garr-x Extreme X650 Garr-x 1 Gbps

GM, CCR – Roma 2 marzo T2 di Alice: Torino Router di Sezione Garr-x 10 Gbps LAN Sez. Torino non sarà connesso immediatamente a 10 Gbps Nel breve periodo sarà potenziato il collegamento a Garr con 2 link a 1 Gbps Quando disponibile Garr-X, Il T2 di Torino utilizzerà un nuovo router di sezione Lo switch di aggregazione per il T2 è basato su HP Gbps T2 1 Gbps

GM, CCR – Roma 2 marzo T2 di Alice: Catania Aggregazione e Router (Cisco 4507) Garr-x 10 Gbps LAN Sez. Il T2 di Catania utilizza il router di GRIDCT per accedere a Garr-x a 10 Gbps 10 Gbps T2 Router Sezione (CISCO 6509) Garr-x 1 Gbps 10 Gbps

GM, CCR – Roma 2 marzo T2 di CMS/Alice: Bari Aggregatore T2 con Embedded router Garr-x 10 Gbps LAN INFN Dipartim. Il T2 di Bari usa un aggregatore basato su HP5412 che funzionerà anche come router verso Garr-X T2 Router Sezione/Dip Garr-x 1 Gbps HP5412

GM, CCR – Roma 2 marzo T2 di CMS: Pisa Centro Stella T2/GDC con Embedded router Garr-x 10 Gbps LAN Sez. Il T2 di Pisa usa come aggregatore un Force10 E1200i. Dovrebbe usare lo stesso apparato anche per il routing verso Garr-x. T2 Router Sezione Garr-x 1 Gbps Opzione: router dedicato

GM, CCR – Roma 2 marzo T2 di CMS/Alice: LNL-Pd Router di Laboratorio Garr-x 2 x 10 Gbps LAN Lab. Legnaro ha una dark fiber di circa 15 km che lo connette al pop-x. Garr metterà a disposizione due link a 10 Gbps dove far passare il traffico T2 e quello del laboratorio. I due link vanno configurati in modo tale che uno sia backup dell’altro in caso di guasti. Per garantire questa configurazione il router deve essere unico e servire sia il T2 che la LAN del laboratorio. 10 Gbps T2-LNL N x 1 Gbps L’aggregazione del T2-LNL verrà fatta con Extreme X650; adesso è su HP 5400 T2-Pd Router di Sezione Garr-x n x 1 Gbps