G. Bracco Incontro MM/UTICT - Portici 12 Febbraio 2014 Incontro ENEA/UTICT e MM Portici 12 Febbraio 2014 ENEAGRID e Cluster CRESCO per il calcolo scientifico in ENEA G.Bracco ENEA Centro Ricerche Frascati V. Enrico Fermi 45, Frascati (ROMA) S.Migliori,A.Quintiliani,S.Podda,R.Guadagni,F.Ambrosino,F.Beone, M.Caporicci,P.D'Angelo,A.Funel,G.Ponti,F.Palombi,G.Furini,A.Mariano, G.Mencuccini,P.Ornelli,A.Perozziello,S.Pierattini,P.De Michele,D.Abate,F.Poggi, D.Giammattei,M.DeRosa,S.Pecoraro,F.Simoni,S.Giusepponi, G.Guarnieri,C.Sciò,A.Italiano, A.Colavincenzo

G. Bracco Incontro MM/UTICT - Portici 12 Febbraio 2014 Contenuto ENEAGRID – L'architettura,l'utenza e le applicazioni – Le interfacce utente e i laboratori virtuali – I cluster CRESCO L'utenza I nuovi progetti PON – TEDAT, LAMRECOR Le nuove infrastrutture 2013/2014 – CRESCO3 – CRESCO4

G. Bracco Incontro MM/UTICT - Portici 12 Febbraio 2014 ENE Componenti strutturali “maturi” per garanzia di affidabilità e semplicità di gestione, interfacce Web sviluppate/customizzate per una ambiente utente amichevole: – Autenticazione Kerberos 5 – File systems: AFS/OpenAFS file system geografico GPFS: file system parallelo anche WAN – Gestore delle risorse: LSF Multicluster – Interfacce grafiche Web per l'utente: NX/FARO Jobrama: Stato dei job & Accounting – Sistema di monitoring: Zabbix – Gestione Web utenze e progetti: WARC Architettura di ENEAGRID

G. Bracco Incontro MM/UTICT - Portici 12 Febbraio 2014 ENE Le risorse di calcolo offerte all'utenza sono attualmente i sistemi Linux x86_64 (i cluster CRESCO ~ 9000 cores) e sistemi speciali dedicati ( ad es. GPU). Storage AFS e GPFS. Le risorse sono distribuite su 6 centri. ENEAGRID: risorse di calcolo e storage

G. Bracco Incontro MM/UTICT - Portici 12 Febbraio 2014 FARO - Fast Access to Remote Objects Accesso WEB a dati,applicazioni, macchine virtuali realizzato con una integrazione di NX e applicazioni java

G. Bracco Incontro MM/UTICT - Portici 12 Febbraio 2014 FARO e Laboratori Virtuali Portali tematici che integrano l'accesso ai dati e alle applicazioni specifici del settore

G. Bracco Incontro MM/UTICT - Portici 12 Febbraio 2014 Laboratori Virtuali

G. Bracco Incontro MM/UTICT - Portici 12 Febbraio 2014 Laboratori Virtuali

G. Bracco Incontro MM/UTICT - Portici 12 Febbraio 2014 Total displacement (m m) Pos t Processo r Total displacement (m m) Total displacement (m m) Pos t Processo r Pos t Processo r FARO: la visualizzazione 3D Rendering 3D Remoto

G. Bracco Incontro MM/UTICT - Portici 12 Febbraio 2014 ENE ~200 utenti che sottomettono job seriali o a parallelismo contenuto e ~50 utenti che sottomettono job HPC altamente paralleli. Gli ambiti applicativi a cui afferiscono i principali utenti sono: – fluidodinamica della combustione – chimica computazionale – simulazioni climatiche – analisi della diffusione degli inquinanti nell'atmosfera – tecnologie nucleari – fluidodinamica per l'aerospazio – fisica della fusione nucleare – bioinformatica – sistemi complessi – …. L'utenza e le applicazioni

G. Bracco Incontro MM/UTICT - Portici 12 Febbraio 2014 ENE Utilizzo CRESCO 2012 : ~2200 year*core z Ripartizione per Aree Applicative

G. Bracco Incontro MM/UTICT - Portici 12 Febbraio 2014 ENE Utilizzo CRESCO 2012 : ~2200 year*core Ripartizione per Applicazioni

G. Bracco Incontro MM/UTICT - Portici 12 Febbraio 2014 ENE Utilizzo CRESCO 2012 : ~2200 year*core Ripartizione per Unità Tecniche ENEA

G. Bracco Incontro MM/UTICT - Portici 12 Febbraio 2014 ENE Utilizzo CRESCO 2012 : ~2200 year*core Utenze esterne ad ENEA collaborazioni & progetti: 648 year*core (29.4%)

G. Bracco Incontro MM/UTICT - Portici 12 Febbraio 2014 ENE Tempo macchina 2013 x le Unità Tecniche CoreYear% UTTMAT UTICT UTRINN UTTEI UTFUS UTMEA UTFISST UTFISSM METR UTVALAMB UTTRI UTAGRI UTTP Totale

G. Bracco Incontro MM/UTICT - Portici 12 Febbraio 2014 ENE I cluster CRESCO pre 2013 I cluster CRESCO x86_64 in produzione realizzati nell'ambito di PON (Portici,Brindisi) o con risorse interne negli anni (Casaccia,Frascati) >Portici CRESCO1(672 cores 4U) CRESCO2(2720 blades)‏ IB CISCO 70xx, DDR Intel Clovertown,Tigerton,Nehalem,Westmere >Casaccia CRESCOC (192 cores, twin 1U)‏ IB Qlogic Silverstorm DDR, AMD 2427 Istanbul >Frascati CRESCOF (480 cores twin square 2U, GPFS)‏ IB Qlogic QDR, AMD 6172 Magnycours >Brindisi CRESCOB (80 cores, 4 U, GPFS)‏ GEthernet, Intel Tigerton CRESCO1 parte in dismissione e riuso per i servizi ICT di base

G. Bracco Incontro MM/UTICT - Portici 12 Febbraio 2014 PON PON/1 Ricerca Industriale DDR MIUR 01/Ric 18/1/2010 – - Tecnologie Italiane per applicazioni avanzate nei Beni Culturali (~300 k€) – LAMRECOR - Logistica avanzata per la Mobilità di persone e merci (~550 k€) PON/3 Infrastrutture DDR MIUR 254/Ric 18/5/2011 – TEDAT - Centro di eccellenza per le Tecnologie e la diagnostica avanzata nel settore dei trasporti (2200 k€)

G. Bracco Incontro MM/UTICT - Portici 12 Febbraio 2014 ENE CRESCO3 Con risorse dai progetti LAMRECOR è stato acquisito su Portici un cluster AMD basato su macchine Twin Square SuperMicro & Acer 2 Rack (modello wide) in sala CED CRESCO + Rack di rete 84 nodi 2016 cores in produzione nel Infiniband QDR QLogic (96 porte) Test HPL: 75 % efficienza; compilatori con supporto Interlagos (Open64 flag specifiche, Intel 12 specifiche flag librerie ACML) Storage: DDN S2A9900 espanso ora a 600 TB

G. Bracco Incontro MM/UTICT - Portici 12 Febbraio 2014 ENE AMD Iterlagos GHz, RAM 64 GB, 24 cores, 84 nodi, 2016 cores, 20 TFlops CRESCO3

G. Bracco Incontro MM/UTICT - Portici 12 Febbraio 2014 ENE CRESCO4 Le risorse del progetto TEDAT sono le più rilevanti e hanno permesso di acquisire il cluster CRESCO4, 100 Tflops – 5 Rack di nodi di calcolo per un totale di 304 nodi (4864 cores Intel) 1 rack di servizio per switch IB – Processore Intel E5-2670, 2.6 GHz, 8 cores – 64 GB RAM/nodo 4 GB RAM/Core – Nodi di tipo Fat Twin (Chassis 4U con 8 nodi) – Storage: DDN S2A9900 ~600 TB condiviso con CRESCO3 – Infiniband QDR QLogic/Intel (432 porte) – Nuova sala CED; UPS, nuove batterie – Sistema di condizionamento con free-cooling

G. Bracco Incontro MM/UTICT - Portici 12 Febbraio 2014 Rete infiniband CRESCO3/CRESCO4 4xDDR 20 Gbps 4xQDR 40 Gbps

G. Bracco Incontro MM/UTICT - Portici 12 Febbraio 2014 ENE Locali CRESCO e CRESCO4 CED CRESCO dal 2008 CED nuovo CRESCO4

G. Bracco Incontro MM/UTICT - Portici 12 Febbraio 2014 ENE CED CRESCO

G. Bracco Incontro MM/UTICT - Portici 12 Febbraio 2014 ENE CED CRESCO : in primo piano CRESCO2

G. Bracco Incontro MM/UTICT - Portici 12 Febbraio 2014 ENE Locale CRESCO4 primavera 2013

G. Bracco Incontro MM/UTICT - Portici 12 Febbraio 2014 ENE Progetto dell'installazione

G. Bracco Incontro MM/UTICT - Portici 12 Febbraio 2014 ENE CRESCO4 collaudato ottobre 2013

G. Bracco Incontro MM/UTICT - Portici 12 Febbraio 2014 ENE CRESCO4