Grid nelle sezioni: Milano Luca Vaccarossa INFN – Sezione di Milano Workshop sulle Problematiche di Calcolo e Reti nell'INFN.

Slides:



Advertisements
Presentazioni simili
E835 & Hera-B Concezio Pisa, 21/12/2004. E835 (aka Jet-FNAL) timeline dell'esperimento –Presa dati conclusa nel Alcune analisi tuttora in corso.
Advertisements

NESSUS.
1 La farm di ATLAS-Napoli 1 Gb/s 7 nodi con 2 CPU PIII a 1 GH, RAM 512 MB, 2 schede di rete a 100 Mb/s. Server con 2 CPU PIII a 1 GH, RAM 1 GB, 2 schede.
Installazione pacchetti sotto Linux. Linux: Installare le applicazioni Adesso che abbiamo configurato Linux vogliamo imparare a installare qualche programma.
Grid a Perugia Modifiche ad INFN-GRID per permetterne il funzionamento con Worker Nodes su rete nascosta Truncellito Francesco Mariotti Mirko Leonello.
La facility nazionale Egrid: stato dell'arte Egrid-Team Trieste, 9 ottobre 2004.
Microsoft Windows Installazione, gestione ed utilizzo delle risorse Microsoft nella sezione INFN di BOLOGNA.
Linux Riunione Referenti-CCL 2-Luglio Utilizzo di Linux Principale (unica) piattaforma di calcolo per HEP Grid Supportato dalle maggiori industrie.
Gruppo Directory Services Rapporto dell'attivita' svolta - Marzo 2000.
Alessandro Italiano INFN - CNAF Grid.it 14 Febbraio 2003 Servizi Generali: RB, UI, RC Information System Alessandro Italiano Grid.it 16 febbraio 2003.
Michele Michelotto INFN-Padova
1 Riunione Testbed - 17 gennaio Agenda - stato del testbed di INFN-GRID (L. Gaido) - le risorse del CNAF (A. Italiano) - report sullo stress test.
Il Tutorial INFN-GRID/EDG di Torino Testbed INFN-GRID.
LNL M.Biasotto, Bologna, 13 dicembre Installazione automatica Massimo Biasotto – INFN LNL.
1 Il testbed di LCG Riunione Testbed – CNAF, 17 gennaio 2003 L. Gaido.
GridICE attività in corso e sviluppi futuri Gennaro Tortone Bologna, 4 marzo Technical Board INFNGRID
M.Biasotto, Padova, 18 gennaio Sviluppo futuro di LCFG per la Release 2 di Datagrid Massimo Biasotto - LNL.
LNL CMS M.Biasotto, Firenze, 22 maggio Hardware e tools di installazione Massimo Biasotto INFN – Lab. Naz. di Legnaro.
1 M. Biasotto – Legnaro, 22 Dicembre 2005 Prototipo Tier 2 di Legnaro-Padova INFN Legnaro.
E. Ferro / CNAF / 14 febbraio /13 GRID.it servizi di infrastruttura Enrico Ferro INFN-LNL.
La gestione automatica delle forniture telematiche
1 Installazione da rete Introduzione Configurazione del server NFS Cosa serve sul client Configurazione kickstart.
Installare Code::Blocks su macchine LINUX
L’applicazione integrata per la gestione proattiva delle reti IT
Alessia Tricomi Università & INFN Catania
Configurazione di una rete Windows
CCR 14-15/03/2006 Status Report Gruppo Storage CCR.
Extreme Cluster Administration Toolkit Alberto Crescente, INFN Sez. Padova.
Francesco M. Taurino 1 NESSUS IL Security Scanner.
Calcolo LHC - F. Ferroni, P. Lubrano, M. SozziCSN1 - Catania Calcolo LHC 2003 (F. Ferroni, P. Lubrano, M. Sozzi)
Competenze e attività gestite dai servizi di calcolo e reti. Paolo Mastroserio.
Condor standard. Sistema Batch. Tool di installazione D. Bortolotti,P.Mazzanti,F.Semeria Workshop Calcolo Paestum 9-12 Giugno 2003.
LNF Farm E. V. 9/8/2006. Hardware CE, LCFG, HLR, 3 WN: DL 360 1U; SE: DL 380 2U 5 WN: BL 25 P In totale 25 jobs general purpuse (coda Atlas) + una coda.
Attivita' Grid in BaBar Workshop sulle Problematiche di Calcolo e Reti nell'INFN Maggio 2004.
E, Ferro 09/05/2002 Datagrid WP4: Fabric Management Enrico Ferro - LNL.
CSN1 2 Febbraio 2004 P. Morettini 1 La nuova politica di RedHat La linea di prodotti RedHat Enterprise Linux L’accordo HEP Europe – RedHat Che fare ?
B IBLIO S ERVICE consultazione di articoli online Anna Riccioni Progetto per il corso di Reti di Calcolatori L-S Anno Accademico
Alex Marchetti Infrastruttura di supporto per l’accesso a un disco remoto Presentazione del progetto di: Reti di calcolatori L-S.
SnippetSearch Database di snippet bilanciato e replicato di Gianluigi Salvi Reti di calcolatori LS – Prof. A.Corradi.
Antivirus per mailserver: RAV Antivirus & altri Marco De Rossi – “Workshop sulle problematiche di calcolo e reti nell'INFN” 6-9 Maggio La Biodola.
Istituto Nazionale di Fisica Nucleare La Biodola, Isola d’Elba, 6-9 maggio 2002 AFS: Status Report WS CCR R.Gomezel Workshop sulle problematiche.
Gruppo Windows: passato, presente e futuro Gian Piero Siroli, Dip. di Fisica, Universita’ di Bologna e INFN III Workshop sulle problematiche di calcolo.
La Farm di Atlas a Roma 1 Outline Architettura della farm Architettura della farm Installazione Installazione Monitoring Monitoring Conclusioni Conclusioni.
Situazione RedHat R. Gomezel Workshop sulle Problematiche di Calcolo e Reti nell'INFN Maggio 2004 Sant' Elmo Beach Hotel, Castiadas (CA)
Report HEPiX Spring meeting 2002 Workshop sulle problematiche di calcolo e reti nell'INFN 6-9 Maggio 2002 La Biodola - Isola d'Elba Silvia Arezzini.
CMS 1 M. Biasotto – Bologna 20/01/2005 Infrastruttura di calcolo per CMS-Italia M.Biasotto – INFN Legnaro e i gestori dei centri CMS Italia.
La Farm di Alice a Torino Workshop sulle problematiche di calcolo e reti Isola d’Elba 6-9 maggio 2002 Mario Sitta (Università del Piemonte Orientale e.
I testbed ed il loro uso 1 I testbed ed il loro uso L. Gaido, A.Ghiselli CSN1, Perugia novembre 2002.
LNL CMS M.Biasotto, Bologna, 28 maggio Upgrade farm a RH-7.3  Due anni fa la farm era stata installata usando una versione customizzata di ANIS.
Attivita' tecniche Test effettuati su Fedora Directory Server: SSL/TLS Autenticazione con Backend PAM Autenticazione Ticket Kerberos Replica Master-Slave.
31 ottobre Security Assessment per Cassa Centrale Analisi delle modalità di deployment di server e di postazioni utente. Simulazione di consulente.
BOLOGNA Prin-STOA Report L. Rinaldi Bari – 12/11/2015.
Windows Deployment Services Ai LNF e’ stato realizzato il servizio WDS su Windows Ent 2008 R2. Il sistema e’ stato virtualizzato sul cluster Linux Xen.
Corso linux RiminiLUG presenta Rete a bassissimo budget per il piccolo ufficio architettura di rete LTSP in contesti professionali corso linux 2008.
Il Servizio Calcolo e Reti e le attività grid della Sezione INFN di Torino Luciano Gaido.
Roberto Covati – Roberto Alfieri INFN di Parma. Incontri di lavoro CCR dicembre Sommario VmWare Server (in produzione dal 2004) VmWare ESX.
Installazione Sistemi Operativi Windows tramite PXE INFN Bologna - Antonella Monducci.
Riunione PRIN STOA - Bologna - 18 Giugno 2014 Testbed del T2 distribuito Napoli-Roma Dr. Silvio Pardi INFN-Napoli Riunione PRIN STOA – Bologna 18 Giugno.
DA e controlli DAFNE Riccardo Gargana Frascati 13/12/ /12/13.
17 GennaioTier2 Milano G. Costa 1 17-Gennaio-2006.
Sistema di monitoraggio integrato Introduzione a cura di P. Mastroserio Servizio Calcolo & Reti Infn-Napoli P. Mastroserio Workshop CCR - INFN Grid Acireale.
IV Corso di formazione INFN per amministratori di siti GRID Tutorial di amministrazione DGAS Giuseppe Patania.
LNGS, Workshop CCR 2008, Giugno Sondaggio Utenti INFN Valeria Ardizzone INFN Catania Ombretta Pinazza CNAF.
E. Ferro, LNF Febbraio 2005 Release INFN-GRID, apt+kickstart server, yaim, quattor Enrico Ferro INFN - Padova.
20-21/03/2006Workshop sullo storage - CNAF Storage nei Servizi Calcolo delle sezioni INFN Alessandro Brunengo.
Alessandro Tirel - Sezione di Trieste Storage servers & TCP Tuning Proposta di studio delle problematiche connesse alla fornitura di servizi di storage.
1 Le macchine di questo pool fanno parte di una lan privata (la 125 illustrata a pag.2), di cui t2cmcondor è il gateway. Sono presenti 3 macchine su rete.
L.Perini Milano: 10 Gennaio Ex-ATLAS-Grid (Tier2 incluso) l Ruolo dei Tiers in ATLAS e grid l Le persone di Milano e le attività l Le infrastrutture.
La gestione della rete e dei server. Lista delle attività  Organizzare la rete  Configurare i servizi di base  Creare gli utenti e i gruppi  Condividere.
Workshop congiunto CCR & INFN-GRID. Tema: l’efficienza Sede: Hotel Cala di Lepre – Palau Date: maggio Comitato organizzatore: V. Ardizzone, D. Anzellotti,
Transcript della presentazione:

Grid nelle sezioni: Milano Luca Vaccarossa INFN – Sezione di Milano Workshop sulle Problematiche di Calcolo e Reti nell'INFN Maggio 2004 Sant' Elmo Beach Hotel, Castiadas (CA)

Introduzione Possibili aree di sovrapposizione, collaborazione sono gli strumenti e/o servizi di gestione (installazione, configurazione, ecc.) delle macchine di grid e di quelle di sezione.

Grid a Milano (persone) Personale assunto su fondi EU 1 FTE DataGrid 2 FTE DataTAG : gestione di tutto l’hw dei progetti Grid.

Breve storia di Grid a Milano Tutto iniziò con 10 biprocessori (Dell 1 GHz) per il testbed di EDG (Inizio 2002) Adesso gestione di n > 60 biprocessori (Intel 1 GHz – 2.8 GHz) e ~ 10 TB lordi di storage (NAS low cost). Ad esclusione dei server NAS di storage (e dei server LCFG), tutte le macchine sono state installate e vengono gestite con LCFG(ng)

Grid a Milano (risorse) Sito del TB di EDG Macchine di sviluppo/test per WP1 Qualche risorsa per i TB di EDT (WorldGrid, CMS-LCG0, ecc.) Tier2 di LCG (Atlas)

pagina web sito LCG Milano

Deployment di Grid Installazione/Gestione con LCFG(ng) Sistema Operativo : RH 7.3 (CERN) Molti pacchetti aggiuntivi (sul CE > 100 rpm su 700 rpm installati) Macchine dedicate

LCFGng: cos’è  Sistema per l'installazione e la gestione di farm adottato da Datagrid e' basato su LCFGng, un tool sviluppato all’Università di Edinburgo  Caratteristiche:  architettura client-server  installazione automatizzata (floppy/CDROM/PXE)  modulare: su ogni nodo agisce un insieme di agenti (componenti), ognuno dei quali attua la configurazione di un servizio  uno dei componenti effettua l'aggiunta/ upgrade/ downgrade/ rimozione dei pacchetti software su quel nodo(RPM-based)

Server LCFGng  Un server mantiene le configurazioni dei clients: o descritte mediante coppie nome-valore in files detti sorgenti o tali files sono compilati ottenendo i profili (files XML)  Ogni client e' descritto da 1 profilo (.xml)  I profili sono letti dai clients via HTTP  Normalmente oltre ad HTTP sul server sono attivi i servizi (ma potrebbero essere attivi su altre macchine): o DHCP (installazione) o TFTP (se si utilizza il boot PXE) o NFS (distribuzione packages RPM + prima installazione)

 Una volta cambiati i sorgenti, lanciando un opportuno comando dal server le modifiche sono propagate ai clients: o sono ricompilati i profili XML o viene inviata una notifica ai demoni in esecuzione sui clients (UDP) o ogni demone preleva (se necessario) il profilo via HTTP e lo salva in una cache locale (DBM) o il demone attiva solo i componenti la cui configurazione e' mutata o i componenti aggiornano la configurazione del nodo  Uno dei componenti (updaterpms) e' responsabile dell'installazione del software e ha un comportamento leggermente diverso: o e' eseguito solo al boot della macchina oppure via cron o sincronizza la lista di pacchetti indicata nel profilo del client con i pacchetti installati. NB: pacchetti installati manualmente non presenti nella lista sono rimossi! o ovviamente RPM based LCFGng: come funziona (2)

Ultimi sviluppi Scelta di inserire nuovi WN sotto rete privata Da LCFG a PBS in rete privata Tentativo di far coesistere servizi (es. DHCP, NFS, LCFG) su entrambe le reti Soluzione: inserire nel DNS della sezione i nodi in rete privata.

Installazione in sezione Installazione tramite kickstart “esteso” Script di post-installazione ~ 400 PC Linux gestiti (server, desktop, portatili) Release supportate : RH 7.3, 9.0, Fedora 1.0 Aggiornamenti + alcuni pacchetti extra (Condor, Cernlib, openafs, printmi, ecc.)

LCFG o Altro ? Al momento LCFG è indispensabile per installare/gestire macchine Grid Altre strade: KS + APT + LCFGcomponents (Napoli) A Milano vogliamo sperimentare qualcosa di analogo C’è futuro per LCFG ?

Due attività compatibili? GRID: Online 24x7, QoS, “roles & rules” (Report stato dei siti quotidiano, aggiornamento lista security contact settimanale) Sezione: C’è l’ “expertise” visione dei servizi di tipo locale