Sistema EmMa Farm su GRID ENEA Introduzione all'utilizzo del sistema EmMa/Farm su GRID Enea Gino Briganti – ENEA Andrea Cappelletti – ENEA Pietro Marri.

Slides:

Advertisements

Presentazioni simili

DIPARTIMENTO DI ELETTRONICA E INFORMAZIONE Lab 1: Marzo 2013 Marco D. Santambrogio – Gianluca Durelli -

Advertisements

INFO Sevizio Centralizzato Informatica e Reti Frascati, Infrastrutture e Servizi per il Calcolo Scientifico 1 Modalità di utilizzo dei server.

CREAZIONE UTENTE SU ORACLE1 Pagina delle risorse: crea utente oracle ( Password:… Dora in poi, in questi lucidi,

Il Sistema Operativo Il Sistema Operativo fa parte del software di base; e` costituito da un insieme di programmi che interagiscono e cooperano per: gestire.

Ogni PC, per iniziare a lavorare, ha bisogno di un sistema operativo. Infatti questo è il primo programma che viene eseguito e che permette all'utente.

File System Cos’è un File System File e Directory

Introduzione a Linux Dr. Giovanni Stracquadnio

Dr. Giovanni Stracquadanio

T. PIGNATELLI Coordinamento Progtto MINNI, Marzo, 2010 Sviluppo GAINS_Italy – Stato di avanzamento.

Sandro Finardi, Mihaela Mircea, Gaia Righini con la collaborazione di

Run di supporto alla procedura di deroga NO 2 G. Calori, G. Briganti, A. Cappelletti, P. Radice, L. Mauri, M. Costa Plenaria MINNI, Bologna 24 Marzo 2011.

MINNI GRID ENEA EmMa/Farm su GRID: avanzamento dei lavori per la Convenzione e prestazioni del sistema Andrea Cappelletti – ENEA Pisa Gino Briganti – ENEA.

Corso Linux Base 2. Uso del Sistema. © Corso Linux Base - Uso del Sistema Logging In (1) Una volta partito il sistema lutente esegue la procedura.

Installazione pacchetti sotto Linux. Linux: Installare le applicazioni Adesso che abbiamo configurato Linux vogliamo imparare a installare qualche programma.

Uso di openafs Come usare il tool openafs per accedere e gestire i propri files sotto AFS.

Test del Monitoraggio del Tracker usando un Tier2 M.S. Mennea, G. Zito, N. De Filippis Università & INFN di Bari Riunione Consorzio – Torino 18 Novembre.

Analisi ed ottimizzazione di strumenti Software per l'utilizzo di IDL sulla GRID ENEA S.PI.1.2 Strumenti per la grafica Marta Chinnici Portici, 11 Dicembre.

CRESCO – Kick-off meeting LA II – 23 maggio 2006 CRESCO–Infrastruttura HPC– ENEA 03 aprile Il Progetto.

Linguaggi di programmazione

SOFTWARE I componenti fisici del calcolatore (unità centrale e periferiche) costituiscono il cosiddetto Hardware (alla lettera, ferramenta). La struttura.

Sistemi Operativi - Introduzione 1 Il sistema operativo UNIX Dettagli e comandi avanzati Niccolò Battezzati Politecnico di Torino Dip. Automatica e Informatica.

Sistemi Operativi - Introduzione 1 Il sistema operativo UNIX La shell Niccolò Battezzati Politecnico di Torino Dip. Automatica e Informatica.

LNL M.Biasotto, Bologna, 13 dicembre Installazione automatica Massimo Biasotto – INFN LNL.

Execution benchmarks Obiettivi Test dettagliati e ben caratterizzati Esecuzione di benchmark standard Test di applicazioni dell'esperimento ALICE 20 Novembre.

5 Feb 2002Stefano Belforte – INFN Trieste calcolo per CDF in Italia1 Calcolo per CDF in Italia Prime idee per lanalisi di CDF al CNAF Numeri utili e concetti.

INTRODUZIONE A MATLAB.

INTRODUZIONE l sistema operativo è il primo software che lutente utilizza quando accende il computer; 1)Viene caricato nella memoria RAM con loperazione.

STRUMENTI PER LA VALIDAZIONE DEGLI OUTPUT DI FARM G. Briganti, A. Cappelletti, M. DIsidoro, M. Mircea Bologna 23-24/marzo/2011.

Modulo 1 - Hardware u.d. 3 (syllabus – 1.3.5)

MetodoEvolus Evolvere nella continuità. Certificazione Windows 7 logo Nuova procedura di setup Certificazione SQL 2008 R1 Consolle di produzione.

Office 365 per professionisti e piccole imprese

PROGRAMMARE IN C Un ambiente di sviluppo `e un software che serve per scrivere ed eseguire programmi. Generalmente integra almeno 3 funzionalita’: Editor:

Sottoprogramma Un blocco di istruzioni, come ad esempio lanello di ritardo, può costituire un sottoprogramma (subroutine) a sé stante, richiamabile dal.

INFO Sevizio Centralizzato Informatica e Reti Modalità di utilizzo dei server di calcolo del C.E.D. di Frascati.

Introduzione all'uso del PC

1 Lucidi delle esercitazioni di Sistemi di Elaborazione in Rete Università degli Studi della Calabria Corso di Laurea in Ingegneria Gestionale A.A. 2003/2004.

DIPARTIMENTO DI ELETTRONICA E INFORMAZIONE Script 1 Marco D. Santambrogio – Ver. aggiornata al 2 Dicembre 2013.

MS-DOS è il sistema operativo, Come praticamente tutti i sistemi operativi per i computer del periodo, l'MS- DOS era un sistema operativo mono utente.

Ant Che cos’è Come si utilizza Funzionalità principali

DOCUMENTAZIONE BACKOFFICE. DETTAGLIO SOFTWARE BACKOFFICE.

Operazione immissione persona Vogliamo implementare il seguente progetto: Immissione persona Anno N. Nome Cognome Errore:.... Controllo e Immissione Errore.

COME FARE UN PROJECT WORK

LNL GM, CNAF, 18 ottobre INFN-Farm Management Toolkit 1.Fabric Management per DataGrid e INFNGrid 2.Definizione dei requisiti degli esperimenti.

SQL*PLUS Worksheet Permette di:

CNAF 18/11/2004 Federica Fanzago INFN Padova a/grape... BAT... BATMAN...o? M.Corvo, F.Fanzago, N.Smirnov (INFN Padova) + tutte le persone che fanno i test.

Operazione immissione persona Vogliamo implementare il seguente progetto: Immissione persona Anno N. Nome Cognome Errore:.... Controllo e Immissione Errore.

Software per la valutazione dell’inquinamento elettromagnetico Giurato Marta A.A. 2012/2013.

Operazione immissione persona Vogliamo implementare il seguente progetto: Immissione persona Anno N. Nome Cognome Errore:.... Controllo e Immissione Errore.

INTERFACCE Schede elettroniche che permettono al calcolatore di comunicare con le periferiche, che possono essere progettate e costruite in modo molto.

Unix (Linux-Mac OS) Alcuni comandi. cd change working directory cd [DIRECTORY] cd entra nella directory specificata. Se non è fornita alcuna directory.

Calcolo LHC - F. Ferroni, P. Lubrano, M. SozziCSN1 - Catania Calcolo LHC 2003 (F. Ferroni, P. Lubrano, M. Sozzi)

Sicurezza II, A.A. 2011/2012 OpenID Speaker: André Panisson, PhD student Università degli Studi di Torino, Computer Science Department Corso Svizzera,

Condor standard. Sistema Batch. Tool di installazione D. Bortolotti,P.Mazzanti,F.Semeria Workshop Calcolo Paestum 9-12 Giugno 2003.

Matrici di trasferimento per GAINS-Italia Analisi delle risposte alle variazioni delle emissioni Giuseppe Calori – ARIANET Gino Briganti – ENEA Andrea.

Basi di Unix: introduzione Kernel il fulcro del sistema. Comunica con l’hardware (processore, memoria, disco fisso) Shell interfaccia tra l’utente e il.

1 Input/Output. 2 Livelli del sottosistema di I/O Hardware Gestori delle interruzioni Driver dei dispositivi Software di sistema indipendente dal dispositivo.

Corso di Laboratorio primo modulo Introduzione all'uso di un sistema operativo. Introduzione all'uso della shell (bash). Java – –Introduzione – –Tipi di.

LA FILOSOFIA DEL SAS Concepito per essere facilmente accessibile.

LNL CMS M.Biasotto, Bologna, 28 maggio Upgrade farm a RH-7.3  Due anni fa la farm era stata installata usando una versione customizzata di ANIS.

FESR Trinacria Grid Virtual Laboratory Rosanna Catania Rita Ricceri INFN Catania 25 Luglio 2006 Grid Monitoring: GridICE – bacct - lsload.

CONVENZIONI AIA sezioni – TIM Tariffe agevolate fisso e mobile e opzioni extra Codice fiscale.

Utilizzo della VO di theophys per il calcolo lattice QCD G. Andronico M. Serra L. Giusti S. Petrarca B. Taglienti.

FESR Trinacria Grid Virtual Laboratory PROGETTO “MAMMO” Sviluppo e ottimizzazione di algoritmi adattativi, specificatamente di Artificial.

IV Corso di formazione INFN per amministratori di siti GRID Tutorial di amministrazione DGAS Giuseppe Patania.

JOB MONITORING Donvito Giacinto INFN-Bari. OUTLINE ● Use-case ● Informazioni utilizzate e metodologie di raccolta per il job monitoring ● Informazioni.

Checkpoint e restore di job LSF Workshop Congiunto INFN CCR e GRID Acireale, Maggio 2010 INFN - Sezione di Trieste - C. Strizzolo - L. Strizzolo.

Offline Report Finale Grid! I Corso di formazione INFN su aspetti pratici dell'integrazione di applicazioni in GRID Domenico D’Urso Roberto.

La gestione della rete e dei server. Lista delle attività  Organizzare la rete  Configurare i servizi di base  Creare gli utenti e i gruppi  Condividere.

Transcript della presentazione:

Sistema EmMa Farm su GRID ENEA Introduzione all'utilizzo del sistema EmMa/Farm su GRID Enea Gino Briganti – ENEA Andrea Cappelletti – ENEA Pietro Marri - ENEA Progetto MINNI Riunione plenaria 4-5 marzo 2010

Introduzione Obiettivi Illustrare sinteticamente il filesystem e gli scripts EmMa/Farm su GRID Dare uno schema per la preparazione di un nuovo caso Fornire info su spazi e tempi cpu

Filesystem Qualsiasi nome

Filesystem La disposizione delle directory è rigida NOTA BENE: La data nel netcdf deve corrispondere alla dir “anno” farm/inp IT diffemi_IT0_ bin

Gli scripts  Gli scripts sono nidificati, chiamano a loro volta altri scripts che però, per motivi particolari, possono essere lanciati anche individualmente  hanno più opzioni  sono predisposti per sottomettere dei jobs alle code della GRID ma possono essere utilizzati anche per esegure i calcoli in interattivo  Hanno un piccolo help in linea

EmMa  paths setting (indica la root)  pulizia..../script_emma/emma.grid.bash clean [zone] [year]  preprocessing..../script_emma/emma.grid.bash preproc [zone] [year]  modulazione temporale.../script_emma/emma.grid.bash decad [zone] [year] [decads]  copia dei files su AFS (eventuale).../script_emma/emma.copy.bash [zone] [year] [decads]

Farm  paths setting e creazione dell'albero in farm/out tree.bash [zone] [year] [root dir]  creazione dei file di inizializzazione farm.NxN.loop_ini_files.bash [zone] [year] [decads] (N=4,20)  lancio sotto LSF su base mensile farm.bsub.bash [zone] [year] [months]  copia su AFS (eventuale) copy.bash [year] [julian start] [julian end] [from dir] [to dir ]

Nesting  Calcolo delle B.C. dal un caso 20x20 farm.4x4.BC.bsub.bash [zones] [years] [months]  Concatenazione dei file BC creati in modo che contengano record dalle ore 00 alle 24 farm.4x4.BC.concatenate.bash [zones] [year]  Creazione delle I.C. dal caso 20x20 farm.4x4.IC.bash [zones] [year]

Nuovo caso Creare un nuovo ramo /afs/enea.it/project/ minnifarm Copiare l'intero albero meteoTEST2005 farm/inpTEST2005 meteoIT02005 farm/inpIT02005 /PFS/por/cappelle/ test

Documentation In /PFS/por/cappelle mihaela soft farm meteo emi bound inp out IT0 CI0 1 mese In..../soft/soft_ARIANET/script_[emma,farm] ci sono dei readme files ove sono spiegate più in dettaglio l'uso degli scripts In /afs/enea.it/project/minnifarm/readme ci sono i log files degli updates eseguiti

Scenari di Riferimento XXX=IT0,NI0,SI0,SA0,SC0,CI0 YYYY=1999,2005 EMISSIO NI /PFS/por/cappelle/minnifarm/farm/inp/XXX/YYYY CONCEN TRAZIONI DEPOSI ZIONI /PFS/por/briganti/minnifarm/farm/out/XXX/2005 /afs/enea.it/project/minnifarm/farm/out/XXX/1999

ATM SS=25,50 PPP=PM10,NOx,SO2,NH3,VOC RRR=LAZ,LOM YYYY=2005 (emis) ZZZZ=2005 (meteo) EMISSION I /PFS/por/cappelle/minnifarm/ATM/inp/SS/PPP/RRR/ YYYY CONCEN TRAZIONI DEPOSI ZIONI /PFS/por/briganti/minnifarm/ATM/farm/out/YYYY/ZZ ZZ/SS/PPP/RRR

SPAZIO & TEMPO CPU Simulazioni di 1 mese Spazio GB CPU time h IT0 Italy 20x CI0 Centro Italia 4x