EU-IndiaGrid - EUChinaGRID EUMEDGRID - ArchaeoGrid Federico Ruggieri & Alberto Masoni INFN-Grid Riunione Referee Bologna 25 Luglio 2008.

Presentazione sul tema: "EU-IndiaGrid - EUChinaGRID EUMEDGRID - ArchaeoGrid Federico Ruggieri & Alberto Masoni INFN-Grid Riunione Referee Bologna 25 Luglio 2008."— Transcript della presentazione:

1 EU-IndiaGrid - EUChinaGRID EUMEDGRID - ArchaeoGrid Federico Ruggieri & Alberto Masoni INFN-Grid Riunione Referee Bologna 25 Luglio 2008

2 EGEE and collaborating projects CNGrid Garuda

3 Obiettivi Generali Estensione di EGEE fuori Europa. Disseminazione della Tecnologia Grid gLite. Interoperabilità con Middleware di Grid di altre Regioni. Supporto a comunità applicative già presenti in EGEE: esperimenti LHC, BioMedici. Allargamento a nuove applicazioni e comunità: Scienza della Terra, Archeologia, Medicina, Genetica, Geofisica, Vulcanologia, Sismologia, ecc.

4 Specific Support Actions Project Start Date1 Jan 20061 Oct 20061 Jan 2006 Duration 27 Months (esteso al 31 Marzo 2008) 28 Months (esteso al 31 Gennaio 2009) 26 Months (esteso al 29 Febbraio 2008) EU contribution~ 1.3 M€~ 1.02 M€1.645 M€ Sedi INFN coinvolte Catania, CNAF, Roma3 Cagliari, Catania, Padova Catania, CNAF, Roma3, Firenze

5 Motivazioni delle richieste Coinvolgimento in EPIKH (in negoziazione). Continuazione delle attività avviate nei progetti con caratteristiche best-effort. Progetti di prolungamento (call a fine 2008). Progetto di Grid per Beni Culturali sottomesso nel 2007 al FIRB (MIUR) con la Cina (ha ottenuto una valutazione “Eccellente”). Nuova proposta A3-MedSDI alla Call FP7 su “Scientific Data Infrastructures” che scade l’11 Settembre. Spese di gestione delle attività che non sono rendicontabili o che eccedono il budget (principalmente dedicato al personale).

6 EPIKH Exchange Programme to advance e-Infrastructure Know-How - EPIKH L’interesse principale è nelle attività di formazione, outreach e disseminazione delle tecnologie Grid. Presentato alla call FP7-PEOPLE-IRSES-2008, scaduta il 28 Marzo 2008 ha superato la selezione ed è stato invitato alla negoziazione senza tagli sul budget (1.1 M€). Il progetto dura 48 mesi e prevede soltanto contributi per mobilità. Coordinatore è il Consorzio COMETA – Roberto Barbera. L’INFN partecipa con le sezioni di CT (96 pm) ed RM3 (36 pm).

7 Richieste economiche 2009 SedeProgettoMIMECONSINVTOT CAEUINDIA114318 PDEUINDIA0,533,5 CAEUINDIA - SJ120526 CTEUMED/EUCHINA/ARCHEOGRID5104423 FIEUMED/EUCHINA/ARCHEOGRID362314 RM3EUMED/EUCHINA/ARCHEOGRID102010 50

8 The EU-IndiaGrid Project Joining European and Indian grids for e-science Alberto Masoni EU-IndiaGrid Project Manager INFN Sezione di Cagliari Meeting Referee INFN-Grid Luglio2008

9 EU-IndiaGrid (RI-031834) is funded by the European Commission under the Research Infrastructure Programme www.euindiagrid.eu RUOLO INFN COORDINAMENTO PROGETTO COORDINAMENTO 2 WP: GRID INFRASTRUCTURE e APPLICATION PUNTI RILEVANTI –Guida di un progetto considerato strategico dal Ministero e dalla Commissione Europea per i rapporti con l’India –Supporto alle attività LCG nelle collaborazioni con i partners indiani L’INFN ha un MOU con il BARC su sviluppo di grid middleware L’INFN ha collaborazioni consolidate con i partners Indiani di ALICE e CMS sulle attivita’ di Computing La commissione EU e’ disponibile a contribuire ad un incremento del link intercontinentale in funzione di una collaborazione EU-India giustificata da questo progetto –Contributo finanziario per INFN: 278 K-EUR su circa 1 M-EUR totali

10 EU-IndiaGrid (RI-031834) is funded by the European Commission under the Research Infrastructure Programme www.euindiagrid.eu SEDI COINVOLTE Per il 2009 Verlato e Fantinel sono vincitori di concorso, i contratti dipendono dal rinnovo del progetto, I 4 borsisti MIUR indiani hanno un ulteriore anno di rinnovo CAGLIARI project management (Alberto Masoni) project office (Hikaru Ikeda 100% funded) project office & dissemination (Mischa Peeters 100% funded) attivita’ sulle application HEP (Daniele Mura +3 borsisti indiani su grid technologies) CATANIA dissemination and training (Anna Maria Muoio 100% funded dal progetto, + 2 persone al 50 dal GILDA team) PADOVA coordinamento WP Pilot grid infrastructure (Sergio Fantinel 100% funded) coordinamento WP applications (Marco Verlato 30%) Supporto project office e dissemination (Diana Cresti) + Simone Badoer 100% funded su grid infrastructure & applications + 1 borsista indiano su grid technologies

11 EU-IndiaGrid (RI-031834) is funded by the European Commission under the Research Infrastructure Programme www.euindiagrid.eu PRINCIPALI RISULTATI Supporto al progresso delle infrastrutture NETWORK –Ottobre 2006: link EU-India Geant 38 mb/s –Luglio 2008: link EU-India Geant 100 mb/s + link per LHC accessibile a EU-IndiaGrid 1 Gb/s EU-IndiaGrid INFRASTRUCTURE – > 700 core –Eccellente progresso nell’ utilizzo –Supporto alle applicazioni (incluso ALICE e CMS) DISSEMINATION Booklet on e-infrastructures across Europe and India (con prefazione di Mario Campolargo, Acting Director, Emerging Technologies & Infrastructures Information Society and Media Directorate-General) http://partners.euindiagrid.eu/docs/Booklet.pdf Support Letters Modifica nel Workprogramme: Nuova Call in Dicembre dedicata a cooperazione sulle grid tra Europa e Cina, India, Area del Mediterraneo, USA

12 EU-IndiaGrid (RI-031834) is funded by the European Commission under the Research Infrastructure Programme www.euindiagrid.eu Acknowledgments to Project Activity Letter from Principal Scientifical Adviser to Indian Government –To EU-IndiaGrid Project Manager –Copy to: Secretary, Department of Atomic Energy, Secretary, Department of Science and Technology, Secretary, Department of Information Technology Letter from Principal Scientifical Adviser to Indian Government –To Commissioner Reding, member of EC for IST Letter from Commissioner Reding –To Principal Scientifical Adviser to Indian Government Letter from Secretary, Department of Atomic Energy –To Commissioner Reding, member of EC for IST Letter from Commissioner Reding –Secretary, Department of Atomic Energy

13 EU-IndiaGrid (RI-031834) is funded by the European Commission under the Research Infrastructure Programme www.euindiagrid.eu Lettera del Commissario EU Viviane Reding a Anil Kakodkar, Secretary Department of Atomic Energy Siamo consci che EU-IndiaGrid non e’ sulla stesso piano di LHC ed EXPReS, ma essere citati, insieme a questi, dal Commissario EU all’ ICT, fra le unique facilities to share tra Europa e India fa comunque piacere

14 EU-IndiaGrid (RI-031834) is funded by the European Commission under the Research Infrastructure Programme www.euindiagrid.eu Attivita’ futura Proseguimento attivita’ fino a gennaio 2009 (estensione progetto, contract amendment firmato ) –consolidamento infrastruttura di grid, – supporto alle applicazioni, contributo alle attività ALICE e CMS in India allo start-up di LHC, – disseminazione Marzo 2009 Project Final Review

15 EU-IndiaGrid (RI-031834) is funded by the European Commission under the Research Infrastructure Programme www.euindiagrid.eu Richieste Aggiuntive Luglio 2008 Cari Referee, Confermo l’ estensione del progetto (il contract amendment è stato firmato dal Presidente dell’ INFN. La brochure richiesta dalla Commissione è stata realizzata e cosi’ pure il Workshop dedicato al progetto nell’ ambito di OGF23. E’ confermata anche la partecipazione a ICT-2008. http://www.bpldigital.magtank.com/http://www.bpldigital.magtank.com/) Sono stato contattato dagli editori della rivista e-strategies (http://www.bpldigital.magtank.com/) per un articolo dedicato al progetto sulla rivista prevista in distribuzione in occasione di ICT-2008. Si tratta di un’ occasione molto valida perché la rivista ha un impatto importante. Il costo e’ di 6.3 k-eur per editing e stampa. Il volume e’ di 80 pagine e prevede diversi feature articles in occasione di ICT-2008. L’ idea e’ di utilizzare il volume insieme con l’ opuscolo e-infrastructures across Europe and India appena realizzato come veicolo di disseminazione e supporto anche in vista del proposal per la fase 2 a dicembrehttp://www.bpldigital.magtank.com/ La richiesta e’ quindi di 6.5 k-EURO SUL CAPITOLO 130320 - PUBBLICAZIONI SCIENTIFICHE

16 EU-IndiaGrid (RI-031834) is funded by the European Commission under the Research Infrastructure Programme www.euindiagrid.eu Richieste 2009 Il progetto termina con la Review a fine marzo. I fondi richiesti sono legati a supportare l’ attivita’ del progetto per i primi tre mesi del 2009 (preparazione della Review e Review a Brussels) e l’ attività di preparazione del nuovo proposal. Per il nuovo progetto si chiede un S.J. o un accantonamento che consenta l’ attività qualora venisse approvato. Poiché la call è prevista per dicembre 2008 si puo’ pensare, in caso di approvazione, di avere la negoziazione in aprile e la partenza del progetto per maggio-giugno

17 EU-IndiaGrid (RI-031834) is funded by the European Commission under the Research Infrastructure Programme www.euindiagrid.eu CONTINUITA’ PER IL PROGETTO Come preannunciato al meeting di aprile è stata confermata la modifica del Workprogramme con una nuova call, a dicembre 2008, destinata a: – grid infrastructures cooperation between Europe and USA, China, India and the Mediterranean area Da ulteriori discussioni con i rappresentanti della Commissione è stato confermato che l’ obiettivo è dare continuità ai progetti EUChinaGRID, EU- IndiaGrid, EUMEDGRID

18 EU-IndiaGrid (RI-031834) is funded by the European Commission under the Research Infrastructure Programme www.euindiagrid.eu

19 EU-IndiaGrid (RI-031834) is funded by the European Commission under the Research Infrastructure Programme www.euindiagrid.eu

20 Infrastructure

21  21  EUChina VO utilization

22  22  JSDLJDL JSDL Pipeline-based gateway Pipeline for GLite to GOS Pipeline for GOS to GLite Different colors in pipeline stand for different stages performing concrete functions such as data stageIn and data stageOut SchedulerExternal Thread PoolSchedulerExternal Thread Pool gLite WMProxy Extended GOS Installation Full GOS Installation Extended LCG-CE JSDL: Job Submission Descriptor Language JDL: Job Descriptor Language

23 New Architecture for Interoperability Interoperable Information and Monitoring System GOS Node Super Gateway Inf. Index gLite WMS RB GOS MM Library Computing Resource Selection edg glite-UI CROWN Node Multi/Single MWare Brokers Portal or WS-Client CE WN JDL RSL ??DL RSL JSDL (x2) JSDL GT4 (Logical) Super Broker Components of Super Broker can stay on different machines Other MW’s Broker Other GRID Portal Unified Portal Other’s Node (Even) Multi Middleware Nodes Interoperable Data Mgmt System

24 Routing fra Europa e Cina ora passa su ORIENT RTT(ms) and number of hops as a function of time for the routes from CNIC (China) to ROMA3 (Italy)

25 gLite IPv6 compliance  Assessment of the IPv6 compliance of the gLite external components  Yes IPv6 compliant  No Non IPv6 compliant  Unknown Unknown compliance  Not applicable Non related to networking

26  ARGO-YBJ experiment data transfer and sharing Large data sets (250 TBytes/year) to be stored and shared by European and Chinese partners.  Deploy the applications on the pilot infrastructure Analysis of the data to study gamma ray bursts – MEDEA++ – Corsika ARGO applications

27 Rosetta Early/Late Stage Biological applications  Generate “never born protein” sequences database  Port protein structure prediction software on grid  Develop web tools for non grid trained users KWCWPFASHNDLKVQSQ WYVEPPDTIPPYNKYGTN FIKHCQYIAHMQGDTHFF NRVRMHQLWKIIVDCAY

28 Additional applications ported  School for Applications Integration Held in Beijing in October 2007 Joint effort of European and Chinese partners in applications selection and integration  Applications from different sci-tech fields EST analysis - Cancer genome project – Beijing Genomics Institute Molecular docking - Drug discovery – SIMM and Beihang University Cosmological parameter constraints – Astronomy – Peking University Molecules dynamics - Materials Science – Beihang University Fe abundances in galaxy – Astronomy – Chinese Academy of Sciences Structural damage prediction – Civil Enginnering – Beijing Institute of Technology

29 FP6−2004−Infrastructures−6-SSA-026024 The EUMEDGRID e-Infrastructure MA-GRID INFN -Roma3 INFN -Catania INFN - CNAF ULAKBIM CYNET IUCC GRNET Univ. of Tunis Un. of Malta ERI/EUN CERIST NGI IUGAZA HIAST JUNet So far, 25 EUMEDGRID sites have been deployed in 13 countries, giving a total of 1800 connected Servers and about 84 TBs of storage capacity

30 FP6−2004−Infrastructures−6-SSA-026024 Sites deployed VS Quarters

31 FP6−2004−Infrastructures−6-SSA-026024 High Policy Event in Brussels Jointly organised by EUMEDGRID, EUMEDCONNECT and GEANT2 Policy agenda for e-Infrastructures in the Mediterranean Countries More than 60 high level participants (Ministers, Politicians, EC Officers, Telecom Operators). High profile speakers (HRH Princess Sumaya of Jordan, Mr. Mashour Abudaka Minister, Palestine, Dr. Najib Abdul Wahed Deputy Minister of Higher Education for Scientific Research, Syria, etc.) and qualified participation of European Commission. Final panel expressed a strong support for the continuation of e-Infrastructures in the Mediterranean.

32 FP6−2004−Infrastructures−6-SSA-026024 “e-Infrastructures Across the Mediterranean” Booklet  Combined effort of EUMEDGRID, EUMEDCONNECT and GEANT2  Distributed in the folder of the Ministerial event in Cairo.  Available on the Web of EC in PDF format and, on request, to po@eumedgrid.eu (subject to limited availability). http://ec.europa.eu/information_society/activities/internationalrel/dialogue_coop/euromed/docs_euromed/e_infrastructures_across_the_mediterranean_2008.pdf e-Infrastructures across the Mediterranean

33 FP6−2004−Infrastructures−6-SSA-026024 EUROMED Ministerial Conference on the Information Society »Building an Enabling Environment for the EUROMED Information Society« Cairo 27 February 2008 http://www.euromedinfo.eu/site.168.news.en.3214.html

34 FP6−2004−Infrastructures−6-SSA-026024 Final Declaration ……………………………………………… 14. The Ministers stressed the fundamental need to ensure interconnection of research networks to support, inter alia, the creation of grid-enabled scientific e-Infrastructures able to make ICT Research and Development cooperation between Europe and the Mediterranean countries more efficient; ……….

35 FP6−2004−Infrastructures−6-SSA-026024 35 The ArchaeoGRID System a Laboratory of Past

36 FP6−2004−Infrastructures−6-SSA-026024 36 ArchaeoGRID Objectives  The structure of ArchaeoGRID Laboratory of the Past is set up for the following objectives: RECONSTRUCTION OF SOCIAL, ECOLOGICAL AND ECONOMICAL LANDSCAPE of crucial historical periods and for large geographical regions, using archaeological, geological, biological and ecological and any other useful and available data. SIMULATION WITH MODELS FROM THE THEORY OF COMPLEXITY of social, ecological and economical processes dynamics. VALIDATION of the simulated processes by reconstructed landscape in a holistic top to bottom approach NARRATION by the realization of a FINAL DIGITAL DOCUMENT with a DIGITAL LIBRARY

37 FP6−2004−Infrastructures−6-SSA-026024 37 Applications on EUMEDGRID: ArchaeoGIS  ArchaeoGIS (ArchaeoGIS Portal: Aerial and Satellite Images, Cartographic Base, Historical Maps, Written Sources, etc) Mapserver Making data accessible via Web Services. QGIS/GRASS GIS Web-Based Mapserver R-Statistics GMT Fully Integrated Open-Source ArchaeoGIS QGIS/GRASS GIS ArchaeoGIS Portal Adding the analytical tools for Statistical and Spatial Analysis DBMI PostgreSQL Oracle MySQL A dding DataBase access Fusion of Aerial/Satellite Data with Geophysical Maps

38 Conclusioni EUChinaGRID EUIndiaGrid ed EUMEDGRID hanno promosso l’uso di Grid nelle aree geografiche di interesse. I progetti EUChina ed EUMED hanno con successo passato la review finale il 6-7 Maggio 2008. EU-IndiaGRID è ancora in corso ed esteso fino a Gennnaio. La review finale avverrà nel Marzo 2009. Il Progetto EPIKH in corso di negoziazione richiederà uno sforzo importante su CT e RM3. Il progetto FIRB Italia-Cina se approvato porterà un ulteriore aumento dell’attività a CT, RM3 e FI. Si sta preparando una call “speciale” per support actions focalizzate su: Mediterraneo, Cina, India e US?. Uscirà agli inizi di Dicembre 2008. EUChinaGRID, EUIndiaGrid ed EUMEDGRID proporranno una continuazione.