Sistema EmMa Farm su GRID ENEA Introduzione all'utilizzo del sistema EmMa/Farm su GRID Enea Gino Briganti – ENEA Andrea Cappelletti – ENEA Pietro Marri.

Presentazione sul tema: "Sistema EmMa Farm su GRID ENEA Introduzione all'utilizzo del sistema EmMa/Farm su GRID Enea Gino Briganti – ENEA Andrea Cappelletti – ENEA Pietro Marri."— Transcript della presentazione:

1 Sistema EmMa Farm su GRID ENEA Introduzione all'utilizzo del sistema EmMa/Farm su GRID Enea Gino Briganti – ENEA Andrea Cappelletti – ENEA Pietro Marri - ENEA Progetto MINNI Riunione plenaria 4-5 marzo 2010

2 Introduzione Obiettivi Illustrare sinteticamente il filesystem e gli scripts EmMa/Farm su GRID Dare uno schema per la preparazione di un nuovo caso Fornire info su spazi e tempi cpu

3 Filesystem Qualsiasi nome

4 Filesystem La disposizione delle directory è rigida NOTA BENE: La data nel netcdf deve corrispondere alla dir “anno” farm/inp IT0 2005 2005010 2005002 diffemi_IT0_2005002.bin

5 Gli scripts  Gli scripts sono nidificati, chiamano a loro volta altri scripts che però, per motivi particolari, possono essere lanciati anche individualmente  hanno più opzioni  sono predisposti per sottomettere dei jobs alle code della GRID ma possono essere utilizzati anche per esegure i calcoli in interattivo  Hanno un piccolo help in linea

6 EmMa  paths setting (indica la root)  pulizia..../script_emma/emma.grid.bash clean [zone] [year]  preprocessing..../script_emma/emma.grid.bash preproc [zone] [year]  modulazione temporale.../script_emma/emma.grid.bash decad [zone] [year] [decads]  copia dei files su AFS (eventuale).../script_emma/emma.copy.bash [zone] [year] [decads]

7 Farm  paths setting e creazione dell'albero in farm/out tree.bash [zone] [year] [root dir]  creazione dei file di inizializzazione farm.NxN.loop_ini_files.bash [zone] [year] [decads] (N=4,20)  lancio sotto LSF su base mensile farm.bsub.bash [zone] [year] [months]  copia su AFS (eventuale) copy.bash [year] [julian start] [julian end] [from dir] [to dir ]

8 Nesting  Calcolo delle B.C. dal un caso 20x20 farm.4x4.BC.bsub.bash [zones] [years] [months]  Concatenazione dei file BC creati in modo che contengano record dalle ore 00 alle 24 farm.4x4.BC.concatenate.bash [zones] [year]  Creazione delle I.C. dal caso 20x20 farm.4x4.IC.bash [zones] [year]

9 Nuovo caso Creare un nuovo ramo /afs/enea.it/project/ minnifarm Copiare l'intero albero meteoTEST2005 farm/inpTEST2005 meteoIT02005 farm/inpIT02005 /PFS/por/cappelle/ test

10 Documentation In /PFS/por/cappelle mihaela soft farm meteo emi bound inp out IT0 CI0 1 mese In..../soft/soft_ARIANET/script_[emma,farm] ci sono dei readme files ove sono spiegate più in dettaglio l'uso degli scripts In /afs/enea.it/project/minnifarm/readme ci sono i log files degli updates eseguiti

11 Scenari di Riferimento XXX=IT0,NI0,SI0,SA0,SC0,CI0 YYYY=1999,2005 EMISSIO NI /PFS/por/cappelle/minnifarm/farm/inp/XXX/YYYY CONCEN TRAZIONI DEPOSI ZIONI /PFS/por/briganti/minnifarm/farm/out/XXX/2005 /afs/enea.it/project/minnifarm/farm/out/XXX/1999

12 ATM SS=25,50 PPP=PM10,NOx,SO2,NH3,VOC RRR=LAZ,LOM YYYY=2005 (emis) ZZZZ=2005 (meteo) EMISSION I /PFS/por/cappelle/minnifarm/ATM/inp/SS/PPP/RRR/ YYYY CONCEN TRAZIONI DEPOSI ZIONI /PFS/por/briganti/minnifarm/ATM/farm/out/YYYY/ZZ ZZ/SS/PPP/RRR

13 SPAZIO & TEMPO CPU Simulazioni di 1 mese Spazio GB CPU time h IT0 Italy 20x202516 CI0 Centro Italia 4x4 60100