CNAF - Agenda INFN

Computing di BaBar
Fabrizio Bianchi
Universita’ di Torino e INFN Sez. di Torino
Roma, 20 novembre 2007
1
Sommario

Overview del computing di BaBar

Contributo INFN

Attivita’ 2008

Previsioni per il 2009-2011
2
Overview del Computing di BaBar

Attivita’ :



Produzione: Prompt Reconstruction, Simulation Production,
Skimming
Analisi
Distribuito su diversi centri: SLAC, IN2P3, Gridka,
RAL-Manchester, Padova, CNAF

SP utilizza anche GRID e farm di calcolo universitarie
3
PR: typical single run processing
Run
taking
0
2
PC
Importing
conditions at
Padova
24
ER
Exporting
ROOT to
SLAC
44
48
Hours after the end of run recording
Prompt Calibration a SLAC, Event Reconstruction a Padova
4
Simulation Production

Sforzo distribuito su ~20 siti.

Eventi generati vengono trasferiti a SLAC e qui skimmati
e distribuiti ai centri di analisi

Si sono prodotti fino a 260 Milioni di eventi / settimana
5
SP: contributo INFN

~10% del totale

Farm di Roma (G. Cavoto, R. Faccini)

INFN-GRID: E. Luppi, D. Andreotti (Ferrara), A. Fella
(CNAF)



Siti coinvolti: CNAF, Ferrara, Napoli, Padova, Catania, Bari,
Perugia, Pisa.
Server Xrootd per CDB e BKG installati a: CNAF, Ferrara,
Padova, Pisa.
ProdTools installati sulla UI (User Interface) del CNAF e
integrati con l'ambiente GRID.
6
Skimming

Gli eventi vengono selezionati in ~200 stream.


Un evento puo’ essere selezionato in piu’ stream
Fattore di espansione dei dati: 4-5

Deep Copy o Pointer Skim per ottimizzare dimensione
dati e velocita’ di accesso

Skimming a SLAC (~90%), Gridka, RAL-Manchester
(su GRID), Padova (in background rispetto ad ER)
7
Farm di Padova

Attivita’: ER e skimming

Manpower: R. Stroili, P. Solagna, G. Castelli, A. Crescente + ER
shifters

Hardware:




330 nodi di calcolo: fino a 2 fb-1/ giorno (ER)
22 data servers: 31TB spazio disco
Due librerie L700, capacita` 1400 cassette, fino a 560TB di dati
Nuovo Hardware in arrivo:



30 macchine biprocessori quad core
Una libreria da 500 slot
Per le altre librerie: quattro drive LTO4
8
CNAF

Netto miglioramento dei servizi.



Attivita’: Analisi ed SP su GRID


Downtime nel 2007 comparabili con altri centri
Qualche preoccupazion per i lavori strutturali 2008
D-mixing osservato al CNAF
Manpower: A. Fella, L. Ligioi + altro personale CNAF
9
CNAF

SP accede ai working nodes via GRID, job analisi via
LSF (N.B.: non ci sono wn riservati a BaBar)

Hardware dedicato:



17 servers: databases, aree utenti, scratch, data import,
software di esperimento
6 nuovi servers in arrivo per rimpiazzare macchine obsolete
~250 TB di spazio disco per i dati

150 TB aggiuntivi finanziati nel 2008
10
CNAF: uso della farm
11
Altri Contributi INFN

Skim production: T. Cartaro (Trieste)

Skim software: G. Marchiori (Pisa)

Analysis software: A. Lazzaro (Milano)

Data Quality Manager: S. Tosi (Genova)

Run Quality: M. Pelliccioni (Torino)

Operation Manager: FB
12
Decisioni e nuovi sviluppi

Ci sara’ il reprocessing e la risimulazione dei dati di
run1-6

Aprile-dicembre 2008

SP usera’ Geant4v8 + improvement ai generatori

Phaseout di Objectivity quasi completo

Risparmio sulle licenze
13
Objectivity Phaseout Status

Fully migrated, and Objectivity no longer used in R22:




ROOT read-only conditions database (CDB) is default
for all applications at all sites, except:



Online “ambient” database (history of detector control values)
Configuration database (running on mySQL in IR-2, read-only
ROOT copies elsewhere)
“Spatial” and “temporal” databases used in rolling
calibrations
SLAC uses Objectivity for CDB in online, PC, and skimming
Some scaling issues remain with the ROOT CDB for skimming
To do:


Understand scaling of ROOT CDB for skimming
Deploy writable mySQL CDB in online, PC
14
Attivita’ fino a dicembre 2008








10 fb-1 test di release 24: entro fine novembre
60 fb-1 test di release 24: entro 15 gennaio
Ricostruzione e simulazione dei dati di run7 (previsti 270 fb-1): in
parallelo con la presa dati
Bootstrap reprocessing dei primi ~10 fb-1 di run7: entro aprile
Skimming run7: in parallelo con la presa dati
Reprocessing e risimulazione di run1-6: aprile-dicembre 2008
Skimming run1-6: in parallelo con reprocessing
Obbiettivo: dataset finale in tempo per le conferenze invernali
2009
15
2009-2010

Alta’ intensita’ di Analisi


Migrazione di FTE da attivita’ di servizio ad analisi


Dataset finale disponibile
Compensa diminuzione membri della collaborazione
Produzione prevista:


Skimming sostanziale nel 2009 e piu’ limitato nel 2010 (nuove
analisi)
Limitata SP
16
2011-?

Attivita’ decrescente di analisi


Le collaborazioni LEP stanno ancora pubblicando
Dopo il 2011 si prevede che le attivita’ di analisi
saranno supportate solo a SLAC
17
Computing Professional

Accordo (stabilito < 1999): 6.5 OCF, 8 DOE, 8 non-DOE

Meno corrispondente alla realta’ con il passare degli anni:





Task effetivamente necessari differenti dalla lista originaria
Contributo addizionale di SLAC (fino ad 11 FTE)
Personale nei Tier
Crescenti difficolta’ a riempire le posizioni necessarie a runnare il
computing di BaBar (sia CP che Fisici)
Revisione del meccanismo dei CP (G. Dubois-Felsmann, M.
Morandin, R. Mount) presentato all’IFC di luglio 2007, approvato
per il 2008
18
Computing Professional: 2007

Identificati i task
necessari



Alcuni nella lista
tradizionale
Altri nuovi
Personale TierA ed altri
~10 FTE non inclusi
19
Computing Professional: 2008 ed oltre

Proposta: 25% SLAC, 25% OCF, 50% head count

Non ci sono costi aggiuntivi per l’INFN
20
Necessita’ hardware post 2008




Le attivita’ di produzione cessano nel 2008, salvo coda
nel 2009-2010.
Si prevede una attivita’ di analisi ai livelli 2008 nel
2009-2010, a decrescere negli anni seguenti
Sara’ sufficiente sostituire una frazione dell’hardware
divenuto obsoleto
All’IFC di febbraio verra’ presentato un modello per
calcolare questi costi


Ordine di grandezza 700 (2009), 450(2010), 300(2011) KUSD
Per confronto, nel 2008 il costo e’ ~2700 KUSD
21
Contributo INFN 2009-2011


Padova cessera’ il supporto di BaBar con la fine dello
skimming
CNAF continuera’ ad essere un centro di analisi



CPU sono condivise
Le necessita’ di spazio disco si ridurranno a 150-200 TB dal
2010 (saranno 400 TB nel 2008)
Stima (rozza) contributo INFN per il computing (in
aggiunta al mantenimento del CNAF): 70 (2009), 50
(2010), 40 (2011) KUSD

N. B.: A questi numeri vanno aggiunte le altre voci del CF
22
Conclusioni

Ci stiamo preparando per ottenere il massimo dal run7
e produrre il campione finale di dati in tempo per le
conferenze invernali del 2009

Prevediamo un intenso periodo di analisi nel 2009-2010
ed una attivita’ decrescente a partire dal 2011

All’IFC di febbraio verra’ presentato un modello
dettagliato per il calcolo dei costi
23