Benigno Gobbo – INFN Trieste 1 CSN 1 17 settembre 2002 Stato della Farm di Trieste CSN 1 17 settembre 2002 Benigno Gobbo INFN Sezione di Trieste

Slides:



Advertisements
Presentazioni simili
EGEE is a project funded by the European Union under contract IST Test di performance su dCache G.Donvito,V.Spinoso INFN Bari
Advertisements

E835 & Hera-B Concezio Pisa, 21/12/2004. E835 (aka Jet-FNAL) timeline dell'esperimento –Presa dati conclusa nel Alcune analisi tuttora in corso.
Run I Distribuzione inclusive di Min Bias (Mult. Carica, Pt). Correlazioni dello stato finale ( -Mult) + mini-jet (soft hard physics). Campioni utilizzati:
A.Fanfani - C.Grandi CMS Bologna 10 febbraio 2009 La nuova farm di CMS Bologna al CNAF Alessandra Fanfani Claudio Grandi.
Giuseppe Fabio Fortugno.
Introduzione alle attivita Software e Computing di Atlas Napoli M. Biglietti – G. Carlino – F. Conventi - A. Doria – L. Merola - A. Migliaccio Software:
1 La farm di ATLAS-Napoli 1 Gb/s 7 nodi con 2 CPU PIII a 1 GH, RAM 512 MB, 2 schede di rete a 100 Mb/s. Server con 2 CPU PIII a 1 GH, RAM 1 GB, 2 schede.
Aspetti critici rete LAN e WAN per i Tier-2
Francesca Del Corso, CCR - Gruppo Windows, Bologna 16/02/2006 SUS - WSUS per il Security Patch Management.
WP 2.4 al Cnaf Cnaf 13/11/00 P.M Hardware: - 12 PC Rack mountable IBM XSeries 330 (1U) 2 processori Pentium III 800 Mhz, FSB 133 Mhz 512 MB Mem Ecc, Controller.
Test del Monitoraggio del Tracker usando un Tier2 M.S. Mennea, G. Zito, N. De Filippis Università & INFN di Bari Riunione Consorzio – Torino 18 Novembre.
Riunione CRESCO Infrastruttura HPC Cresco Analisi Preliminare.
3. Architettura Vengono descritte le principali componenti hardware di un calcolatore.
EVOLUZIONE DEL PC Legge di Moore: La potenza dei calcolatori raddoppia ogni 18 mesi Metà anni 80 (Personal Computer IBM AT) Architettura 16 bit interna,
Vincenzo Vagnoni per il gruppo di Bologna
Linux Riunione Referenti-CCL 2-Luglio Utilizzo di Linux Principale (unica) piattaforma di calcolo per HEP Grid Supportato dalle maggiori industrie.
Gruppo Directory Services Rapporto dell'attivita' svolta - Marzo 2000.
Michele Michelotto INFN-Padova
LNL M.Biasotto, Bologna, 13 dicembre La farm di Legnaro Massimo Biasotto – INFN LNL.
LNL M.Biasotto, Bologna, 13 dicembre Installazione automatica Massimo Biasotto – INFN LNL.
Execution benchmarks Obiettivi Test dettagliati e ben caratterizzati Esecuzione di benchmark standard Test di applicazioni dell'esperimento ALICE 20 Novembre.
LNL M.Biasotto, Bologna, 18 ottobre La farm CMS di Padova - Legnaro Proposta di acquisto hardware 2° semestre 2001.
LNL M.Biasotto, Bologna, 19 marzo La farm CMS di Padova - Legnaro Proposta di acquisto hardware 1° semestre 2001.
LNL CMS M.Biasotto, Firenze, 22 maggio Hardware e tools di installazione Massimo Biasotto INFN – Lab. Naz. di Legnaro.
1 M. Biasotto – Legnaro, 22 Dicembre 2005 Prototipo Tier 2 di Legnaro-Padova INFN Legnaro.
E. Ferro / CNAF / 14 febbraio /13 GRID.it servizi di infrastruttura Enrico Ferro INFN-LNL.
5 Feb 2002Stefano Belforte – INFN Trieste calcolo per CDF in Italia1 Calcolo per CDF in Italia Prime idee per lanalisi di CDF al CNAF Numeri utili e concetti.
Commissione Calcolo Napoli, 29 Giugno 1999 Strategie e necessita di CDF Stefano Belforte - INFN Pisa1 CDF nel Run II ( …) Cominciamo dalla.
Case study Maiora srl.
GIADA O N L I N E.
Il Calcolatore Elettronico
Benigno Gobbo – INFN Trieste 1 CSNI 21 maggio 2001 Stato della farm di COMPASS-TS CSNI Roma, 21 maggio 2001 Benigno Gobbo INFN Trieste
Stefano Zani e Pierpaolo Ricci (INFN CNAF)
Architettura di storage ad alta affidabilita e bilanciamento di carico per volumi centrali e di esperimento A.Brunengo, M.Corosu INFN Sezione di Genova.
Stato del computing Andrea Sciabà Riunione del consorzio INFN Firenze, 7 settembre 2001 Farm italiane Produzione Monte Carlo b/ Progetti di GRID.
Configurazione di una rete Windows
INFN-BOLOGNA-T3 L. Rinaldi I siti Tier-3 nel modello di calcolo di Atlas Configurazione del sito INFN-BOLOGNA-T3 Attività di Analisi e Produzione Attività.
Dischi in RAID  Redundant Array of Independent Disk Configurazione che permette di combinare più dischi secondo obiettivi di performance e ridondanza.
Manutenzioni e Mezzi di Calcolo Paolo Morettini – INFN Genova Valerio Vercesi – INFN Pavia CSN1 - Catania Settembre 2002.
CCR 14-15/03/2006 Status Report Gruppo Storage CCR.
Riunione gruppo storage – Roma 05/05/2005 Test di affidabilita’ e performance a Genova Alessandro Brunengo.
Servizio Sistema Informativo - Area Gestione Sistemi e Sicurezza – LNF – Dael Maselli Area Gestione Sistemi e Sicurezza LNF Plenaria Servizio Sistema Informativo.
Servizio Sistema Informativo - Area Gestione Sistemi e Sicurezza – LNF – Dael Maselli Area Gestione Sistemi e Sicurezza LNF Plenaria Servizio Sistema Informativo.
LNL CMS M.Biasotto, Roma, 22 novembre I Tier2 in CMS Italia Massimo Biasotto - LNL.
Calcolo LHC - F. Ferroni, P. Lubrano, M. SozziCSN1 - Catania Calcolo LHC 2003 (F. Ferroni, P. Lubrano, M. Sozzi)
LNF Farm E. V. 9/8/2006. Hardware CE, LCFG, HLR, 3 WN: DL 360 1U; SE: DL 380 2U 5 WN: BL 25 P In totale 25 jobs general purpuse (coda Atlas) + una coda.
Attivita' Grid in BaBar Workshop sulle Problematiche di Calcolo e Reti nell'INFN Maggio 2004.
1 LHCb Computing Angelo Carbone, INFN-CNAF CSN1, 21/9/06 Aggiornamento richieste Tier Richiesta Tier-2 al CNAF Stato e risultati DC06.
Istituto Nazionale di Fisica Nucleare La Biodola, Isola d’Elba, 6-9 maggio 2002 AFS: Status Report WS CCR R.Gomezel Workshop sulle problematiche.
Alessandro Tirel - Sezione di Trieste Storage Area Network Riunione gruppo Storage Padova, 5 ottobre 2005.
Grid nelle sezioni: Milano Luca Vaccarossa INFN – Sezione di Milano Workshop sulle Problematiche di Calcolo e Reti nell'INFN.
La Farm di Atlas a Roma 1 Outline Architettura della farm Architettura della farm Installazione Installazione Monitoring Monitoring Conclusioni Conclusioni.
La Farm di Alice a Torino Workshop sulle problematiche di calcolo e reti Isola d’Elba 6-9 maggio 2002 Mario Sitta (Università del Piemonte Orientale e.
LNL CMS M.Biasotto, Bologna, 28 maggio Upgrade farm a RH-7.3  Due anni fa la farm era stata installata usando una versione customizzata di ANIS.
M.Biasotto, Bologna, 28 giugno 2004 M.Biasotto, Bologna, 28 giugno LNL CMS T2 Legnaro Stato attuale e richieste 2004/2005.
Benigno Gobbo – INFN Trieste 1 CSN1 13 ottobre 2003 Obsolescenza dei PC Riunione CSN1 Roma, 13 ottobre 2003 Benigno Gobbo INFN Sezione di Trieste
Nuovo Ambiente CS7402. Attività Principali Gli obiettivi principali della migrazione sono stati quelli di ottenere: –Un’infrastruttura di produzione (Mainframe.
Roberto Covati – Roberto Alfieri INFN di Parma. Incontri di lavoro CCR dicembre Sommario VmWare Server (in produzione dal 2004) VmWare ESX.
D. Martello Dip. Fisica - Lecce Sintesi piani esperimenti CSN2 CNAF 7-marzo-2007.
Referaggio CALCOLO Esperimenti non LHC G. Carlino, D. Lucchesi, V. Vagnoni CSN1 – Lecce 30 Settembre 2015.
Utilizzo della VO di theophys per il calcolo lattice QCD G. Andronico M. Serra L. Giusti S. Petrarca B. Taglienti.
Attività e servizi di calcolo a Roma Tor Vergata R. Kwatera, R. Lulli, R. Sparvoli Roma Tor Vergata.
1 ALICE I ITER2 DI ALICE IN ITALIA Bologna, 6 marzo 2007 M. Masera
Martedi 8 novembre 2005 Consorzio COMETA “Progetto PI2S2” UNIONE EUROPEA Accesso all’infrastruttura Grid del Consorzio COMETA Grid Open Day alla Facoltà.
Test di storage a 10 Gbps proposta. Storage server a 10Gbps Si vuole vedere quali prestazioni si possano ottenere da server connessi a 10 GE –capacita’
KLOE - Referee Paolo Checchia, Luca Lista, Ezio Menichetti, Pierluigi Paolucci con l’aiuto sostanziale di Luca dell’Agnello, Mauro Morandin CSN1.
ATLAS NAPOLI Software & Computing e il Tier-2 Gianpaolo Carlino INFN Napoli Il gruppo ATLAS di Napoli Le attività Software & Computing Il prototipo Tier-2.
20-21/03/2006Workshop sullo storage - CNAF Storage nei Servizi Calcolo delle sezioni INFN Alessandro Brunengo.
Il calcolo per l’esperimento GERDA Luciano Pandola INFN, Laboratori del Gran Sasso Riunione della CSN2, LNF Frascati, 29 Novembre 2011.
Esigenze di Rete degli Esperimenti LHC e di Gr1 G. Carlino – INFN Napoli CCR – Roma 8 Settembre 2014.
Transcript della presentazione:

Benigno Gobbo – INFN Trieste 1 CSN 1 17 settembre 2002 Stato della Farm di Trieste CSN 1 17 settembre 2002 Benigno Gobbo INFN Sezione di Trieste

CSN 1 Benigno Gobbo – INFN Trieste 2 17 settembre 2002 Hardware 11 Old clients: MSI 694D Pro Dual PIII 800 Mhz 2 x 20 GB ATA Disks 512 MB RAM 11 Old clients: MSI 694D Pro Dual PIII 800 Mhz 2 x 20 GB ATA Disks 512 MB RAM 19 New clients: Abit VP6 Dual PIII 1000 Mhz 2 x 40 GB ATA Disks 512 MB RAM 19 New clients: Abit VP6 Dual PIII 1000 Mhz 2 x 40 GB ATA Disks 512 MB RAM 3com com 3900 Kvm switch Server SGE, DHCP, BB, … Asus CUR-DLS Dual PIII 800 MHz 2 x 30 GB ATA Disks 512 MB RAM GA620 G gigabit EIDE disk server Intel L440 GX+ Dual PIII 700 MHz 2 x 15 GB ATA disks 14 x 75 GB ATA disks 6 x 80 GB ATA disks GA620 G gigabit EIDE disk server Intel STL2 Dual PIII 866 MHz 2 x 20 GB ATA disks 20 x 80 GB ATA disks GA620 G gigabit Tape Library STK L40 20 slot 2 x IBM Ultrium Tape/disk server Dell PowerEdge 4400 Dual Xeon 1 GHz 2 x 36 GB SCSI RAID1 6 x 73 GB SCSI RAID0 SCSI disk server Sun Blade 1000 Dual SparcIII 750 MHz 18 GB SCSI FC disk 8 x 73 GB SCSI RAID5 CRD-5440

CSN 1 Benigno Gobbo – INFN Trieste 3 17 settembre 2002 Hardware (cont.) Problemi, rotture, etc… ACID01 (server SunGrid, DHCP, BigBrother, …) Problemi con motherboard (CUR-DLS) che legge male la temperatura della seconda CPU. Risolto aumentando la ventilazione. ACID02 Problemi con scheda di rete Intel PRO/100 S. ACID03 (disk server) Problemi su diversi dischi IBM DTLA (è un problema noto, ora…). Client Vecchi (ACID06, 07, 09, 10, 12, 13) Problemi con le ventole delle CPU. ACID05 Rottura alimentatore. ACID13 Rottura disco ( ri-installazione del sistema). ACID17 (disk server) Rottura di una 3ware Escalade ACID36 Rottura dellalimentatore e della scheda video (probabilmente correlate).

CSN 1 Benigno Gobbo – INFN Trieste 4 17 settembre 2002 Software installato Management della farm R. Birsa (Solaris), BG (Linux) Componenti free software RedHat Linux 7.2 ( kernel 2.4.9, glibc ) oppure 7.3 ( kernel , glibc ). A parte la Sun che ovviamente monta Solaris Queuing system: Sun Grid Engine EE 5.3p1 System/Network monitor: Big Brother 1.9 CERN software CERNLib, ANAPHE, ROOT, CASTOR, DATE COMPASS software COMGeant (simulazione), Coral (ricostruzione ed ad analisi) Tools locali (parallelizzazione dei processi, accesso a DB remoto) Componenti commerciali Backup: CA Arcserve 7 1 licenza Linux server, 3 licenze Linux client, 1 licenza Unix client ODBMS: Objectivity CERN Contract

CSN 1 Benigno Gobbo – INFN Trieste 5 17 settembre 2002 Software installato (cont.)

CSN 1 Benigno Gobbo – INFN Trieste 6 17 settembre 2002 Software installato (cont.)

CSN 1 Benigno Gobbo – INFN Trieste 7 17 settembre 2002 Software installato (cont.)

CSN 1 Benigno Gobbo – INFN Trieste 8 17 settembre 2002 Software installato (cont.) Mirroring/Update Giornaliero di: Distribuzione RedHat 7.2 e 7.3 Software/DataBase di COMPASS COMGeant CORAL DataBase delle calibrazioni Database di geometria, mappe ed allineamenti Periodico dei patch su sistema od applicativi Non si usano auto-update toolsASIS Non viene usato Sono installati solo i package che servono esplicitamente (CERNLib, CASTOR, …), localmente su ogni nodo, usando RPM.

CSN 1 Benigno Gobbo – INFN Trieste 9 17 settembre 2002 Tools sviluppati ed attività in corso Spar: tool per la parallelizzazione della procedura di analisi di MC via SunGrid (V.Duic) Input: lutente specifica eseguibili e file di configurazione come se si trattasse di un unico job di generazione/produzione/analisi spar provvede alla suddivisione in job paralleli alterando opportunamente i file di opzioni (il grado di parallelizzazione viene specificato dallutente). Output: spar alla fine raggruppa opportunamente i file di output Supporta fino allintero ciclo di processamento: generatori COMGeant CORAL, con possibilità di escludere alcuni passi Può partire da passi intermedi (es. CORAL su output di COMGeant) Una prima versione di spar è gia in utilizzo. Parallelizzazione dellanalisi sui DST e raw data (V.Duic) Concettualmente è analogo al tool precedente Si basa sullanalogo tool in uso al CERN per la produzione (VD, M.Lamanna).

CSN 1 Benigno Gobbo – INFN Trieste settembre 2002 Tools sviluppati ed attività in corso (cont.) Copia delle federazioni Objectivity di COMPASS (V.Duic) Solo DST ed alcuni raw data. Trasferimento (va ftp su wacdr) di: Federazione Database di header (di run ed eventi) Database di eventi (essenzialmente DST) Come test sono stati trasferiti i DST relativi al 2001 I DST dei dati con polarizzazione trasversa del 2002 sono importati man mano che vengono prodotti al CERN Test di processatura di raw event e DST Produzione MC per test sistema e sviluppo software (A.Martin) Per trasverso. 1M eventi su tutto range x e in diversi bin di x Generazione eventi DIS con Lepto: singolo job per campione (è rapido) COMGeant: parallelizzato da spar su 10 e 20 nodi/generazione 1.4 s/evento, 5k eventi/CPU/generatore, 2 ore siu 10 CPU, zebra file 0.34 GB CORAL: parallelizzato da spar su 10 e 20 nodi/generazione Output ROOT tree (1MB per 5k eventi), somma dei singoli file fatta automaticamente da spar Ottimizzazione della ricostruzione del RICH1 (P.Schiavon) Run su file binari pre-prodotti al CERN per sviluppo ed ottimizzazione della ricostruzione degli anelli del RICH.

CSN 1 Benigno Gobbo – INFN Trieste settembre 2002 Attività prossima futura Il run ci ha tenuto molto occupati. A questo si aggiunge limpegno sulloffline generale di COMPASS Responsabilità: Coral (BG), CCF e gestione dati (M.Lamanna), software RICH1 (P.Schiavon). Attività: gestione dati e produzione DST (P.Pagano, V.Duic) Ottimizzazione della Farm per lanalisi dei dati Test di accesso diretto alle federazioni CERN via WAN (da ottobre) Verifica protezioni, sicurezza, etc. Produzione selettiva di DST da DST con Coral Richiede modifiche del codice GUI per i tool di parallelizzazione In test Miglioramento dei tools di gestione e controllo della farm Più sono automatizzati meno lavoro cè per me (credo…)

CSN 1 Benigno Gobbo – INFN Trieste settembre 2002 Attività prossima futura (cont.) Verifica della possibilità di utilizzo di HSM Studio della possibilità di porting di CASTOR (ostico…) HSM commerciali (poca roba per Linux: DiskXtender,…) NOTA: dallesperienza di analisi sui dati 2002 capiremo se ed eventualmente quanto storage aggiuntivo ci serve. È importante capire se si può puntare verso un HSM che potrebbe avere costi sensibilmente minori dellallargamento dello spazio disco. Adattamento e test del software per il nuovo DBMS Studio sistematico della prestazioni del RICH1 Analisi dei dati (già iniziata): misura di h 1 da asimmetria dei leading π in DIS su bersaglio con polarizzazione trasversa

CSN 1 Benigno Gobbo – INFN Trieste settembre 2002 Analisi dati trasverso 2002 È una misura complessa: lasimmetria prevista è di pochi % con un apparato del tutto nuovo DST Organizzati in due periodi corrispondenti a circa 270 run (più di mezzo miliardo di eventi) 26 TB di raw data, 2 TB di dati DST Inoltre è stato deciso di acquisire ulteriori dati per il trasverso in questi ultimi giorni di run: due periodi da cui ci aspettiamo almeno 100 run aggiuntivi. La produzione dei primi due periodi è stata iniziata al CERN a fine agosto Il primo periodo è in avanzato stato di processato e trasferimento a Trieste La produzione del secondo periodo è stata appena iniziataAnalisi Studi di stabilità su tutti gli eventi (2 TB) in collaborazione con Torino in base alle risorse hardware disponibili Calcolo asimmetria allinizio solo su eventi con Q 2 >1 GeV 2 (20%). Software già testato sulla farm (P.Pagano) Studio di effetti sistematici dovuti ad accettanza e fondo Richiede Produzione massiccia di MC Produzione iniziale 10 7 eventi DIS nel range di interesse 1TB di eventi simulati (20 CPU per 8 giorni) Processatura: ogni analisi richiede lo stesso ordine di tempo della produzione

CSN 1 Benigno Gobbo – INFN Trieste settembre 2002 Hardware, desiderata 2003 Inventariabile Rimpiazzo RAID controller SCSI CRD-5440 con analogo Infotrend Sentinel 150 ( 3.5 k ) CMD si è orientata su mercato militare. Non cè modo di mettere loggetto in manutenzione Sostituzione ACID01 con server di qualità (con RAID…) ( 5.6 k ) Fa servizi importanti: master SGE, server DHCP, master e display BigBrother,… È vecchio e usa dischi ATA non in RAID. Upgrade della Tape Library a 40 slot (5.0 + IVA k ) 20 slot (= 2 TB). NOTA: prezzo farm con 20 slot 67 MITL Inventariabile (seconda priorità) Inizio upgrade dei client vecchi (5/30 da fare a fine 2003) (28.0 k )Consumo Varie ( 3.0 k ) Tape Ultrium ( 10.0 k )Manutenzioni Switch 3com 3900 (07/ /2003) ( 0.7 k, possibilmente anticipati al 2002) Switch 3com 4900 (01/ /2003) (0.6 k ) Gruppo di continuità (50%: 0.6 k )