Riunione CRESCO Infrastruttura HPC Cresco Analisi Preliminare.

Slides:



Advertisements
Presentazioni simili
un'infrastruttura al servizio della ricerca e delle imprese
Advertisements

CRESCO – Kick-off meeting LA II – 23 maggio 2006 CRESCO–workshop SPIII– ENEA 06Luglio 2007 ITALIAN NATIONAL AGENCY FOR NEW TECNOLOGY,
INFO Sevizio Centralizzato Informatica e Reti Frascati, Infrastrutture e Servizi per il Calcolo Scientifico 1 Modalità di utilizzo dei server.
Unità D1 Architetture di rete.
Gestione Input Output A. Ferrari.
Il Consolidamento di Servizi Virtual Server 2005 PierGiorgio Malusardi Evangelist - IT Professional Microsoft.
Il Sistema Operativo.
1 Come si avvia un computer... Dove è contenuto il SO ? Come si attiva?
DAL MICROPROCESSORE AI SISTEMI EMBEDDED Informatica per lAutomazione II (Informatica B o II) Anno accademico 2008/2009 Prof. Giuseppe Mastronardi Ing.
Esercizi sulle architetture
Il Software: Obiettivi Programmare direttamente la macchina hardware è molto difficile: lutente dovrebbe conoscere lorganizzazione fisica del computer.
Architettura Three Tier
Aspetti critici rete LAN e WAN per i Tier-2
WP 2.4 al Cnaf Cnaf 13/11/00 P.M Hardware: - 12 PC Rack mountable IBM XSeries 330 (1U) 2 processori Pentium III 800 Mhz, FSB 133 Mhz 512 MB Mem Ecc, Controller.
Remote file access sulla grid e metodi di interconnesione di rete M. Donatelli, A.Ghiselli e G.Mirabelli Infn-Grid network 24 maggio 2001.
1 Riunione del 29 Marzo 2007 IL PROGETTO SCoPE Prof. Guido Russo I lavori Le apparecchiature Il portale.
Test del Monitoraggio del Tracker usando un Tier2 M.S. Mennea, G. Zito, N. De Filippis Università & INFN di Bari Riunione Consorzio – Torino 18 Novembre.
CRESCO – Kick-off meeting LA II – 23 maggio 2006 CRESCO–Infrastruttura HPC– ENEA 03 aprile Il Progetto.
ENEA GRID è un sistema integrato capace di rispondere ai seguenti obbiettivi: mettere a disposizione un sistema di produzione capace di offrire i servizi.
Analisi Computazionale Fluido-Struttura sulla Griglia ENEA
Sistemi Operativi Distribuiti: indice
Software di base Il sistema operativo è un insieme di programmi che opera sul livello macchina e offre funzionalità di alto livello Es.organizzazione dei.
Supercalcolo al CILEA: risorse e opportunità CAPI /11/2005 Dr. Claudio Arlandini, PhD HPC System Administrator.
3. Architettura Vengono descritte le principali componenti hardware di un calcolatore.
@2000 R. Bisiani1 R. Bisiani2 Dischi u Piatti multipli coperti da materiale magnetizzabile.
UNIVERSITA’ STUDI DI ROMA “FORO ITALICO”
Michele Michelotto INFN-Padova
Execution benchmarks Obiettivi Test dettagliati e ben caratterizzati Esecuzione di benchmark standard Test di applicazioni dell'esperimento ALICE 20 Novembre.
Case study Maiora srl.
GIADA O N L I N E.
Il Calcolatore Elettronico
U N INFRASTRUTTURA DI SUPPORTO PER SERVIZI DI FILE HOSTING Matteo Corvaro Matricola Corso di Reti di Calcolatori LS – Prof. A. Corradi A.A.
INFO Sevizio Centralizzato Informatica e Reti Modalità di utilizzo dei server di calcolo del C.E.D. di Frascati.
Architettura di storage ad alta affidabilita e bilanciamento di carico per volumi centrali e di esperimento A.Brunengo, M.Corosu INFN Sezione di Genova.
G. Bracco – Seminario INTEL a CRESCO- Portici, 18 Settembre 2014 Seminario INTEL a CRESCO Portici 18 Settembre 2014 Cluster CRESCO ed ENEAGRID G.Bracco.
Il supercalcolo fai-da-te
Dischi in RAID  Redundant Array of Independent Disk Configurazione che permette di combinare più dischi secondo obiettivi di performance e ridondanza.
1 Collaboration Server “La collaborazione verso il successo” Che cosa è un Collaboration Server? A cosa mi può servire?
76 INFRASTRUTTURA DI RETE A SUPPORTO DELLE FACILITY HPC DI CRESCO4 Sito Brindisi Sito Portici Il progetto TEDAT insiste principilamente su due siti ENEA:
Riunione gruppo storage – Roma 05/05/2005 Test di affidabilita’ e performance a Genova Alessandro Brunengo.
G. Bracco – LAB-TOUR Casaccia 18 Giugno 2014 LAB-TOUR 2014 Casaccia 18 giugno 2014 UTICT-HPC : Calcolo scientifico ad alte prestazioni IN ENEA G.Bracco.
Corso di Laurea in Biotecnologie corso di Informatica Paolo Mereghetti DISCo – Dipartimento di Informatica, Sistemistica e Comunicazione.
G. Bracco - Inaugurazione CRESCO4 - Portici, 12 Marzo 2014 Inaugurazione CRESCO4 Portici 12 Marzo 2014 CRESCO4 & ENEAGRID per TEDAT e per il calcolo scientifico.
Tecnologie Informatiche ed Elettroniche per le Produzioni Animali (corso TIE) CORSO LAUREA MAGISTRALE IN SCIENZE E TECNOLOGIE DELLE PRODUZIONI ANIMALI.
1 Alcuni esempi di dispositivi Disco rigido, RAID, video.
Sistemi operativi di rete Ing. A. Stile – Ing. L. Marchesano – 1/18.
UNIVERSITÀ DI BERGAMO FACOLTÀ DI INGEGNERIA UNIVERSITÀ DI BERGAMO FACOLTÀ DI INGEGNERIA UNIVERSITÀ DI BERGAMO FACOLTÀ DI INGEGNERIA Dispositivi per il.
OAPa-CED1 Il servizio di elaborazione dati presso l’INAF-OAPa Candia, R. ( Morale, F. (
Workshop CCR Otranto - giugno 2006 Gruppo storage CCR Status Report Alessandro Brunengo.
Alessandro Tirel - Sezione di Trieste Storage Area Network Riunione gruppo Storage Padova, 5 ottobre 2005.
La Farm di Alice a Torino Workshop sulle problematiche di calcolo e reti Isola d’Elba 6-9 maggio 2002 Mario Sitta (Università del Piemonte Orientale e.
Riunione CCR 21/12/2005 Gruppo Storage Relazione sulla analisi di infrastrutture Fibre Channel e presentazione attivita’ per il 2006 Alessandro Brunengo.
SEMINARI CAMO 2003 LA SIMULAZIONE NUMERICA COMPIE 50 ANNI
Test di preparazione all’esame E.C.D.L. CONCETTI DI BASE DEL PC.
Servizio Calcolo Alessandro Brunengo. Indice Attivita’ del servizio calcolo Infrastruttura (sala CED, rete) Servizi centrali Supporto al calcolo scientifico.
Il modello di Von Neumann
Il computer RAM: Unità di misura MByte e GByte MHz Processore: Unità di misura Singolo o multiprocessore 32/64 bit velocità GHz Mouse tastiera video stampante.
Dischi magnetici e scheduling del braccio del disco Pag. 216 – 224.
CNAF 6 Novembre Layout del testbed  wn a OS SL5.0 8 GB RAM kernel xen_3.1.0 SMP  wn a OS SL5.0 8 GB RAM kernel.
Roberto Covati – Roberto Alfieri INFN di Parma. Incontri di lavoro CCR dicembre Sommario VmWare Server (in produzione dal 2004) VmWare ESX.
FESR Consorzio COMETA - Progetto PI2S2 Il Tier-2 di ALICE a Catania Roberto Barbera Università di Catania e INFN Visita Referee.
HARDWARE (2). MEMORIE Due classi di memoria MEMORIA CENTRALE –media capacità - ottima velocità MEMORIA DI MASSA elevata capacità - bassa velocità.
Concetti informatici di base. Concetti informatici di base Il computer o elaboratore è una apparecchiatura costituita da un insieme di dispositivi di.
Martedi 8 novembre 2005 Consorzio COMETA “Progetto PI2S2” UNIONE EUROPEA Accesso all’infrastruttura Grid del Consorzio COMETA Grid Open Day alla Facoltà.
Test di storage a 10 Gbps proposta. Storage server a 10Gbps Si vuole vedere quali prestazioni si possano ottenere da server connessi a 10 GE –capacita’
20-21/03/2006Workshop sullo storage - CNAF Storage nei Servizi Calcolo delle sezioni INFN Alessandro Brunengo.
Silvia Arezzini 2 luglio 2014 Consiglio di Sezione per Preventivi.
CCR - Roma 15 marzo 2007 Gruppo storage CCR Report sulle attivita’ Alessandro Brunengo.
Alessandro Tirel - Sezione di Trieste Storage servers & TCP Tuning Proposta di studio delle problematiche connesse alla fornitura di servizi di storage.
1 Le macchine di questo pool fanno parte di una lan privata (la 125 illustrata a pag.2), di cui t2cmcondor è il gateway. Sono presenti 3 macchine su rete.
Transcript della presentazione:

Riunione CRESCO Infrastruttura HPC Cresco Analisi Preliminare

Riunione CRESCO Caratteristiche codici CRESCO Codici seriali ( UNIX) Codici paralleli fortemente accoppiati Codici paralleli debolmente accoppiati Più codici paralleli fortemente accoppiati che interagiscono fra loro ( es. accoppiamento fluido struttura) Codici particolari con funzioni molto spinte su alcuni algoritmi ( es. analisi immagini, genomica) Data base grandi dimensione Codici seriali ( windows) …….

Riunione CRESCO Accesso ai file di input ed output –frequenza –flusso per accesso Dimensione della memoria RAM –visibile direttamente dal singolo nodo –totale su tutti i nodi Data base grandi dimensione File grandi dimensioni (maggiori 20GB) ….. Caratteristiche dei dati dei codici CRESCO

Riunione CRESCO Infrastruttura HPC Cresco sistema di supercalcolo HPC sistema di storage ad alte prestazioni sistema software –software di sistema –software di gestione –middleware ENEA-GRID –software di monitoring –ambienti per lo sviluppo applicativi ad alto parallelismo –software applicativo rete di interconnessione –alta banda e bassa latenza –alta banda –interconnessioni di servizio rete di interconnessione alla rete locale sistema di backup sistema di sicurezza sistema di alimentazione e di continuità adeguamento sistema condizionamento

Riunione CRESCO Sistema di supercalcolo HPC (1) struttura in funzione dei codici Codici seriali ( UNIX, Windows) Sezione 1 ( dimensionamento preliminare) Codici seriali che necessitano di memoria RAM maggiore di 4 GByte –Una sezione con almeno 512 core organizzata ad uno o più nodi ad immagine unica di ciascuno di tipo SMP con almeno 16 Core per nodo. –doppia interconnessi in fibra per il calcolo con una rete di almeno 1 Gbit/s; –una memoria ram di almeno 2 GBit/s per core; –due dischi almeno da 73GByte; –predisposizione connessione InfiniBand Sezione GRID Codici seriali che necessitano di memoria RAM minore di 2 GByte Su GRID si trovano alcune macchine che soddisfano le condizioni della Sezione 1 ( AIX, SGI, LinuxSGI)

Riunione CRESCO Sistema di supercalcolo HPC (2) struttura in funzione dei codici Codici paralleli fortemente accoppiati Sezione 2 ( dimensionamento preliminare) –Una sezione con almeno 2048 core organizzata con nodi ad immagine unica di ciascuno di tipo SMP con almeno 8 Core per nodo, con configurazione 2 socket quad-core –doppia connessione Gbit ( per ogni 8 core ) –doppia connessione Infiniband 4X ( per ogni 8 core ) ( reti proprietarie per immagini uniche SMP maggiori di 16 core) –1 GByte per core –Un disco da 73GB SAS (per 8 core) Sezione GRID Su GRID si trovano alcune macchine che soddisfano le condizioni della Sezione 2 ( AIX, LinuxSGI, LinuxCRAY) per parallelismo fino ad un massimo di 192 proc.

Riunione CRESCO Sistema di supercalcolo HPC (4) struttura in funzione dei codici Codici paralleli debolmente accoppiati Sezione 1 + Sezione 2 –Una sistema toale con almeno 2560 core –doppia connessione Gbit ( per ogni 8/16 core) –1 GByte per core –Un disco da 73GB SAS (per 8 core) Sezione GRID Per codici fortemente disaccoppiati si possono sperimentare anche casi con circa 3000 core.

Riunione CRESCO Sistema di supercalcolo HPC (3) struttura in funzione dei codici Più codici paralleli fortemente accoppiati che interagiscono fra loro ( es. accoppiamento fluido struttura) Soluzioni possibili: –Partizionando la Sezione 2 (2 codici fortemente accoppiati) –Sezione 1 ( codice poco scalabile) Sezione 2 (codice scalabile) –Sezione GRID codici su più site

Riunione CRESCO Sistema di supercalcolo HPC (4) struttura in funzione dei codici Codici particolari con funzioni molto spinte su alcuni algoritmi ( es. analisi immagini, genomica) Piccola sezione integrata CELLBE ( 8 CPU) Data base grandi dimensione Storage ad alte performance

Riunione CRESCO Sistema di supercalcolo HPC (4) struttura in funzione dei codici Codici particolari con funzioni molto spinte su alcuni algoritmi ( es. analisi immagini, genomica) Piccola sezione integrata CELLBE ( 8 CPU) Data base grandi dimensione Dischi ad alte performance Codici seriali ( windows) 4-5 nodi 4 core 64 bit 16 GByte RAM insieme a nodi di servizio ( Fuori gara)

Riunione CRESCO Sistema di supercalcolo HPC (5) Dischi ad alte prestazioni Caratteristiche Funzionali Il sistema dischi che ha come riferimento una capacità di circa 100 TByte nominali dovrà avere al minimo le seguenti caratteristiche: –Capacità nominale minima 120 TByte –Capacita con in configurazione RAID6 96 TByte ( ovvero con due dischi di parità) –Prestazioni di picco minime 3 GByte/s –Prestazioni sostenute minime, con File system GPFS, 2GByte/s –Interfaccie minime: (preliminare) n. 8 FC4 supporto nativo InfiniteBand (IB) IB e FC4 devono poter essere inteconnesse allo stesso controller –Caratteristiche di merito Velocità di scrittura e lettura uguali; Verifica della parità in scrittura e lettura ( questo è estremamente significativo per avere unaffidabilità nelle fasi di lettura) Livello di degrado delle prestazioni nella fase di ricostruzione del dato

Riunione CRESCO Configurazione fisica di massima Sala Calcolo Portici Ingresso Sezione 1 (4-5 Rack) Sezione 2 (4-5 Rack) Rete e servizi ( 3 Rack) Dischi (1 Rack) Backup (1 Rack) Condizionamento 4 x 50 K watt + 1 predisposizione Rete HPC Rete HPC Rete LAN