TIER-2 E’ stato certificato in sequenza dal –CNAF –Alessandro De Salvo come ATLAS software manager in LCG –LCG group del CERN nella TestZone E’ costituito.

Slides:



Advertisements
Presentazioni simili
Introduzione al prototipo Grid-SCoPE
Advertisements

STATO DEL PROTOTIPO DI SCoPE E DELL’INTEGRAZIONE TRA I 4 PON
EGEE-II INFSO-RI Enabling Grids for E-sciencE EGEE and gLite are registered trademarks Sicurezza in EGEE Vincenzo Ciaschini Roma.
Amministrazione di una rete con Active Directory
Amministrazione di una rete con Active Directory
1 STATO DELLINTEGRAZIONE TRA I 4 PROGETTI AVVISO 1575/2004 Riunione del Comitato Tecnico sullInteroperabilità MUR, 20/12/2007 S.Pardi.
1 REALIZZAZIONE DELLINTEROPERABILITA FRA I PROGETTI DELLAVVISO 1575/2004 Riunione del Comitato Tecnico sullInteroperabilità MUR, 25/10/2007 L. Merola.
Test del Monitoraggio del Tracker usando un Tier2 M.S. Mennea, G. Zito, N. De Filippis Università & INFN di Bari Riunione Consorzio – Torino 18 Novembre.
La facility nazionale Egrid: stato dell'arte Egrid-Team Trieste, 9 ottobre 2004.
Gruppo Directory Services Rapporto dell'attivita' svolta - Marzo 2000.
1 Riunione Testbed - 17 gennaio Agenda - stato del testbed di INFN-GRID (L. Gaido) - le risorse del CNAF (A. Italiano) - report sullo stress test.
Il Tutorial INFN-GRID/EDG di Torino Testbed INFN-GRID.
LNL M.Biasotto, Bologna, 13 dicembre Installazione automatica Massimo Biasotto – INFN LNL.
Conclusioni M. Paganoni workshop CMS Italia, Napoli 13-14/2/07.
VIRTUALIZZAZIONE Docente: Marco Sechi Modulo 1.
Un problema importante
Configurazione di una rete Windows
ASP – Active Server Pages Introduzione Pagine Web Statiche & Dinamiche(ASP)
C. Aiftimiei 1, S. Andreozzi 2, S. Dal Pra 1, G. Donvito 3, S. Fantinel 4, E. Fattibene 2, G. Cuscela 3, G. P. Maggi 3, G. Misurelli 2, A. Pierro 3 1 INFN-Padova.
FESR Trinacria Grid Virtual Laboratory ADAT (Archivi Digitali Antico Testo) Salvatore Scifo TRIGRID Second TriGrid Checkpoint Meeting Catania,
FESR Consorzio COMETA Pier Paolo CORSO Giuseppe CASTGLIA Marco CIPOLLA Industry Day Catania, 30 Giugno 2011 Commercial applications.
CNAF 18/11/2004 Federica Fanzago INFN Padova a/grape... BAT... BATMAN...o? M.Corvo, F.Fanzago, N.Smirnov (INFN Padova) + tutte le persone che fanno i test.
AFS Working Group R.Gomezel CCRWS Verso la sfida di LHC Otranto (Lecce), 6-9 Giugno 2006.
Test Storage Resource Manager per SC4 Giacinto Donvito Vincenzo Spinoso.
Calcolo LHC - F. Ferroni, P. Lubrano, M. SozziCSN1 - Catania Calcolo LHC 2003 (F. Ferroni, P. Lubrano, M. Sozzi)
FESR Consorzio COMETA - Progetto PI2S2 CORSIKA Domenico Torresi Consorzio Cometa 1st First International Grid School for Industrial.
Condor standard. Sistema Batch. Tool di installazione D. Bortolotti,P.Mazzanti,F.Semeria Workshop Calcolo Paestum 9-12 Giugno 2003.
LNF Farm E. V. 9/8/2006. Hardware CE, LCFG, HLR, 3 WN: DL 360 1U; SE: DL 380 2U 5 WN: BL 25 P In totale 25 jobs general purpuse (coda Atlas) + una coda.
Attivita' Grid in BaBar Workshop sulle Problematiche di Calcolo e Reti nell'INFN Maggio 2004.
TW Asp - Active Server Pages Nicola Gessa. TW Nicola Gessa Introduzione n Con l’acronimo ASP (Active Server Pages) si identifica NON un linguaggio di.
Ancora sulla shell. Shell e comandi La shell e' un programma che interpreta i comandi dell'utente. I comandi possono essere dati da terminale, oppure.
Servizi Internet Claudia Raibulet
L’implementazione ed il deployment di una GRID luciano gaido (INFN- Sezione di Torino) Workshop sulle problematiche di calcolo e reti nell'INFN Isola d'Elba.
Istituto Nazionale di Fisica Nucleare La Biodola, Isola d’Elba, 6-9 maggio 2002 AFS: Status Report WS CCR R.Gomezel Workshop sulle problematiche.
Alessandro Tirel - Sezione di Trieste Storage Area Network Riunione gruppo Storage Padova, 5 ottobre 2005.
TIER 2 M.L. Ferrer Atlas Meeting March 19, LCG software Informazioni da parte di Laura Perini del 11 Febbraio Attendere 2 o 3 settimane un ulteriore.
Grid nelle sezioni: Milano Luca Vaccarossa INFN – Sezione di Milano Workshop sulle Problematiche di Calcolo e Reti nell'INFN.
Halina Bilokon ATLAS Software di fisica DC1 – DC2 DC1 aprile fine 2003 (versioni di software  3.x.x – 7.x.x)  Validation del Software  Aggiornamento.
CMS 1 M. Biasotto – Bologna 20/01/2005 Infrastruttura di calcolo per CMS-Italia M.Biasotto – INFN Legnaro e i gestori dei centri CMS Italia.
I testbed ed il loro uso 1 I testbed ed il loro uso L. Gaido, A.Ghiselli CSN1, Perugia novembre 2002.
Introduzione ai servizi Grid e relativa sicurezza Università di Catania – Fac. Di Ingegneria Emilio Mastriani– Consorzio COMETA
LNL CMS M.Biasotto, Bologna, 28 maggio Upgrade farm a RH-7.3  Due anni fa la farm era stata installata usando una versione customizzata di ANIS.
BOLOGNA Prin-STOA Report L. Rinaldi Bari – 12/11/2015.
Consorzio COMETA - Progetto PI2S2 UNIONE EUROPEA SAGE – Un sistema per l’accounting dello storage in gLite Fabio Scibilia Consorzio.
FESR Trinacria Grid Virtual Laboratory Esercitazione sulla Security Dario Russo INFN Catania Catania, 14 Marzo 2006.
Sito web di ATLAS Italia - La COMM. 1 ha chiesto (fine 2006) agli esperimenti di preparare una pagina WEB: - obiettivo: fornire una descrizione sintetica.
CCR - Frascati 29 settembre 2008 Gruppo storage CCR Status Report Alessandro Brunengo.
Università degli studi di Cagliari Facoltà di Ingegneria Dipartimento di Ingegneria Elettronica Gruppo di Elettromagnetismo Metodo di Progettazione Automatica.
Installazione: Kubuntu 8.04 corso linux 2008 RiminiLUG presenta Guida passo-passo all'installazione di Kubuntu questa guida vale anche per l'installazione.
Overview del middleware gLite Guido Cuscela INFN-Bari II Corso di formazione INFN su aspetti pratici dell'integrazione.
Worker node on demand: le soluzioni Andrea Chierici INFN-CNAF CCR 2009.
IV Corso di formazione INFN per amministratori di siti GRID Tutorial di amministrazione DGAS Giuseppe Patania.
R. Brunetti – INFN Torino WS. Sicurezza CNAF Bologna dicembre
Martedi 8 novembre 2005 Consorzio COMETA “Progetto PI2S2” UNIONE EUROPEA Accesso all’infrastruttura Grid del Consorzio COMETA Grid Open Day alla Facoltà.
19/4/2013 D. Menasce, M. Serra - Referaggio Progetti INFRA e WLCG 1.
TIER-2: Risorse e tabella di marcia M.L. Ferrer. 5/12/2005 M.L. Ferrer Referaggio TIER-2 LNF 2 Presenti Calcolo: Massimo Pistoni Claudio Soprano Dael.
Procedure per la richiesta di certificazione e per l'autenticazione alla VO Cometa Accesso all’infrastruttura del Consorzio COMETA in modalità GRID.
Attività Gruppo Virtualizzazione Andrea Chierici CNAF CCR
FESR Trinacria Grid Virtual Laboratory Porting su grid di *ROSETTA*, un metodo per la predizione di strutture proteiche Giuseppe La Rocca.
20-21/03/2006Workshop sullo storage - CNAF Storage nei Servizi Calcolo delle sezioni INFN Alessandro Brunengo.
JOB MONITORING Donvito Giacinto INFN-Bari. OUTLINE ● Use-case ● Informazioni utilizzate e metodologie di raccolta per il job monitoring ● Informazioni.
Gruppo Server Commissione Calcolo e Reti 15 Marzo 2006.
EGEE is a project funded by the European Union under contract IST Il pre-production service in EGEE e in INFN-GRID D. Cesini - INFN-CNAF IV.
Workload Management System (WMS) in gLite Guido Cuscela INFN - Bari II Corso di formazione INFN su aspetti pratici.
FESR Trinacria Grid Virtual Laboratory Workload Management System (WMS) Muoio Annamaria INFN - Catania Primo Workshop TriGrid VL Catania,
1 Le macchine di questo pool fanno parte di una lan privata (la 125 illustrata a pag.2), di cui t2cmcondor è il gateway. Sono presenti 3 macchine su rete.
CNAF. storage Siamo in una fase di tuning con lo storage, che al momento sembra essere un collo di bottiglia 1.~10 giorni fa vista saturazione GPFS.
La gestione della rete e dei server. Lista delle attività  Organizzare la rete  Configurare i servizi di base  Creare gli utenti e i gruppi  Condividere.
Esigenze di Rete degli Esperimenti LHC e di Gr1 G. Carlino – INFN Napoli CCR – Roma 8 Settembre 2014.
Procedura di certificazione di un sito
Transcript della presentazione:

TIER-2 E’ stato certificato in sequenza dal –CNAF –Alessandro De Salvo come ATLAS software manager in LCG –LCG group del CERN nella TestZone E’ costituito come detto precedentemente –1 CE atlasce.lnf.infn.it –1 SE atlasse.lnf.infn.it –3 WN atlascn001, 002, 003 –1 LCFGserver (attualmente su un PC in prestito, in attesa la macchina finale) E’ installata la UI (User interface) sulla vecchia lxcalc05 che rimane ancora in uso ad ATLAS per accordo con Massimo Pistoni. Sui nodi del TIER-2 esistono solo utenti atlas001,…,atlas050, cms001,….., ma solo per la vo (virtual organization) atlas e’ installato il software di esperimento

TIER-2 (2) Su lxcalc05 possono collegarsi tutti gli utenti. Un utente che accede alla griglia viene mappato su uno degli utenti interni dopo che e’ stata controllata la certificazione Lo spazio disco assegnato e’ –/flatfiles/SE00/”exp” 400 GB –/exp_software 50 GB /exp_software/atlas esiste soltanto Il resto dello spazio verra’ assegnato al momento dell’installazione della nuova macchina (atlaslcfg) e del nuovo disco che dupplica lo spazio attuale (richiesto dal pile-up) Lo spazio utente verra’ deciso insieme al calcolo (funzionamento del nuovo SAN e macchine dedicate al calcolo simili al TIER-2) Qualsiasi decisione ora e’ complessa se fuori dello schema di TIER-2

Organizzazione (1) Il sito e’ stato istallato da –Claudio Soprano (super esperto Linux) –Sabrina (fulltime instalation/management) –Meiwen (parttime utente) –Mario Reale (al momento dei problemi che richiedevano un esperto di LCG) I problemi sono stati moltissimi. Gli scripts di istallazione prevedono configurazioni di hardware limitate. I controllori dischi SCASI RAID non sono contemplati. Sono stati modificati con grande sforzo. Sabrina ha gestito la produzione di un paper che documenta il lavoro fatto. E’ stato gia’ utilizzato parzialmente dal gruppo di Cagliari che aveva un problema analogo. Verra’ pubblicizzato in modo che possa essere utilizzato dalla comunita’.

Organizzazione (2) C’e’ ancora molto da capire ma il sito puo’ essere utilizzato dal momento della certificazione da parte del CNAF Molti utenti esterni stanno usando il sito (solo in Italia eccetto per la certificazione LCG) Invito tutti a spendere un po di tempo a famigliarizzare con l’UI. Il tutorial che trovate in e’ buono per un primo approcciohttp://grid-it.cnaf.infn.it Usate la mailing-list per contributi, configurazione dei jobs, eca. Fornire esempi di jobs di ATLAS funzionanti che possano essere utilizzati da altri Prego di non contattare direttamente il Servizio di Calcolo per richieste relative all’uso del TIER-2. Contattate personalmente Sabrina o Meiwen

Organizzazione per l’esterno Attualmente tutte le certificazioni, mailing-list, entry nei databases, eca. portano il mio nome Sono anche il contatto per DC2 Nel futuro non lontano spero che questo ruolo venga ri-assegnato. Sabrina potrebbe gestirlo Il problema principale in questo momento e’ la mancanza d’informazione ( o troppa sulle mailing-list di LCG2) In Italia ci appogiamo al RB (Resource broker) del CNAF che assegna le risorse di un certo numero di siti Il DC2 sembra appoggiarsi ad un RB ad-hoc che distribuisce risorse ad un numero di siti diverso Ieri ho chiesto a Miguel Branco se siamo nella lista dei siti del RB-ATLAS e in caso contrario di inserirci! (fordward di mails ….)

RB al CNAF lxcalc05:~> grid-proxy-init -valid 36:00 Your identity: /C=IT/O=INFN/OU=PersonalCertificate/L=LNF/CN=MariaLorenzaFerrer/ =Maria.Lorenza.Fer Enter GRID pass phrase for this identity:*********** Creating proxy Done Your proxy is valid until: Thu May 20 20:59: lxcalc05:~> more jdl1 Executable = "/bin/echo"; Arguments = "Hello World"; StdOutput = "message.txt"; StdError = "stderror"; OutputSandbox = {"message.txt", "stderror"};

Esempio di parziale funzionamento lxcalc05:~> edg-job-list-match jdl1 Selected Virtual Organisation name (from UI conf file): atlas Connecting to host edt003.cnaf.infn.it, port 7772 **** Error: API_NATIVE_ERROR **** Error while calling the "NSClient::listJobMatch" native api ListMatchException: Problems querying the information service ibm140.cnaf.infn.it lxcalc05:~> edg-job-list-match -vo atlas jdl1 Selected Virtual Organisation name (from --vo option): atlas Connecting to host edt003.cnaf.infn.it, port 7772 **** Error: API_NATIVE_ERROR **** Error while calling the "NSClient::listJobMatch" native api ListMatchException: Problems querying the information service ibm140.cnaf.infn.it lxcalc05:~> edg-job-submit jdl1 Selected Virtual Organisation name (from UI conf file): atlas Connecting to host edt003.cnaf.infn.it, port 7772 Logging to host edt003.cnaf.infn.it, port 9002 ********************************************************************************************* JOB SUBMIT OUTCOME The job has been successfully submitted to the Network Server. Use edg-job-status command to check job current status. Your job identifier (edg_jobId) is: - *********************************************************************************************

Esempio fallito! lxcalc05:~> edg-job-status ************************************************************* BOOKKEEPING INFORMATION: Status info for the Job : Current Status: Aborted Status Reason: Cannot plan: BrokerHelper: Problems querying the information service ibm140.cnaf.infn.it reached on: Wed May 19 07:06: *************************************************************

Certificati Nella home directory dell’utente della griglia deve essere creata una directory.globus lxcalc05:~> pwd /afs/lnf.infn.it/user/f/ferrer lxcalc05:~> ls -la.globus total 33 drwxr-xr-x 2 ferrer kloe 2048 Apr 20 11:09. drwxr-xr-x 72 ferrer kloe May 18 15:06.. -rw-r--r-- 1 ferrer kloe 2414 Jan 27 17:35 usercert.pem -r ferrer kloe 1916 Jan 27 17:36 userkey.pem I files.pem vengono creati a partire dal file esportato dal browser da dove si ottiene la certificazione. Come detto precedentemente, l’utente si deve registrare anche nella VO atlas

DC-2 Da Dario il venerdi 14. La release dovrebbe essere disponibile lunedi di questa settimana (Alessandro Di Salvo e’ responsabile per installarlo nel TIER-2 sotto una utenza definita. Meiwen lo fa sull’area AFS) La produzione DC2 dovrebbe partire questa settimana ma nessuna comunicazione da Gilbert Poulard e’ arrivata C’e’ una grossa attivita’ di siti che vogliono entrare nella TestZone di LCG-2 (50 mails sulla mailing list al giorno! Riportando i problemi/successi dei test) Quando ci siamo iscritti alla mailing list (necessaria alla richiesta di inserimento) I tests indicavano 24 siti OK e 14 in errore! (13 Maggio). La situazione al 18 maggio e’ nella pagina Ho chiesto perche’ non appare ancora INFN-LNF e ….

Resources di un sito Richiesta dei parametri di un sito una volta identificato il nome del CE lxcalc05:~> ldapsearch -x -h atlasce.lnf.infn.it -p b "mds-vo-name=local,o=grid“ -> molte informazioni lxcalc05:~> ldapsearch -x -h atlasce.lnf.infn.it -p b "mds-vo-name=local,o=grid“| grep RunTime GlueHostApplicationSoftwareRunTimeEnvironment: VO-atlas-release GlueHostApplicationSoftwareRunTimeEnvironment: FRASCATI GlueHostApplicationSoftwareRunTimeEnvironment: LCG2 Un job che richiede che sia disponibile il software di ATLAS dovrebbe mettere nei Requirements VO-atlas-release (p.e.)