tokom “loadtest07” vežbe cms kolaboracije · vin. č. a, beograd. uvod-cms experiment je od...
TRANSCRIPT
FIS konferencija
Kreacija
i distribucija
“Monarc”
fajlovatokom
“LoadTest07”
vežbe CMS kolaboracije
September 26th
2007
Dimitrije Maletić,INN
Vinča, Beograd
UvodUvod
-
CMS experiment je
od
početka bio planiran kao distibutivan računarski model i to zbog:-
Potrebe za ogromnim količinama podataka i proračuna-
Mogućnosti preraspodele resursa na svoje institute i laboratorije-
20% resursa treba da budu u CERN-u, 40% na T1 i 40% na T2 centrima.-
T2 centri planirani su kao središta aktivnosti vezanih za analizu podataka,-
T1 centri planirani su da sadrže i serviraju podatke dobijene iz CMS detektora.-
Pošto nema dovoljno resursa ni u jednom centru da se izvše sve analize pristupilo se analizi koristeći Grid.
September 26th
2007 2
UvodUvod (II)(II)
-
Dok se CMS detektor ne upozna dovoljno, celokupni podaci moraju biti dostupni za analizu. Ovo zahteva i do 35 puta veći transfer podataka u prvih par godina rada CMSa.-Zbog ovoga,
Grid data menadžment servisi moraju dobro da rade od početka
rada
CMS-a.-
CMS model predviđa da se transfer fajlova unutar CMS kolaboracije sprovodi
korišćenjem PhEDEx-a
(PhysicsExperiementDataExport)-
Predviđa se da u 2008 obim transfera podataka bude oko 7PB (~3M) fajlova.- Takođe, predviđena brzina je oko 5 Gb/s u 2008 godini.
September 26th
2007 3
PhEDExPhEDEx (II)(II)
September 26th
2007 5
AllocatorFileRouter
Site A
TMDB
DownloadSite A
Export Site B
12
34
5
Blackboard
PhEDExPhEDEx (III) / LoadTest07 file injector(III) / LoadTest07 file injector
September 26th
2007 6
LFN –
Logical File NameLoadTest/MyTest/LoadTest07_CERN_FF
PFN –
Physical File Name/castor/cern.ch/cms/store/LoadTest/MyTest/LoadTest07_CERN_FF
LoadTest07 file injectorLoadTest07 file injector
September 26th
2007 7
<lfn-to-pfn
protocol="direct" path-match=".*/LoadTest07_SITE_(.*)_.*_.*"
result="/path_to_LoadTest07_files/LoadTest07_SITE_$1"/>
LoadTest07_CERN_FF LoadTest07_CERN_FF_Sxd45D_20
Seed(40kB)
LoadTest07_CERN_FF
LoadTest07_CERN_00 LoadTest07_CERN_00_Sxd45D_20
LoadTest07_CERN_00_pptyxd_1299256 * 2.5 GB/site
~2.5 PB/week
.
.
.
.
.
.
.
.
CMS computing modelCMS computing model
September 26th
2007 8
FNAL
Chicago
IN2P3
Lyon
PIC
Bascelona
ASGC
Taiwan
RAL
Oxford
FZK
Karlsrue
CNAF
Bolognia
ZakljuZaključčakak- CMS computing model je distributivan model
- Transfer fajlova unutar CMS kolaboracije korišćenjem PhEDEx-a
-
Sve veći zahtevi za
resursima u
CMS centrima
zahtevaju češće i opsežnije testove.
-
Ovaj predloženi metod kreacije i distribucije Monarc fajlova prihvatio CMS Commisioning coordinator Stefano Belforte kao jedini za LoadTest07 vežbu CMS kolaboracije kao pretposlednju vežbu
CMS computing-a
pred puštanje u rad LHC-a.
(Poslednja
vežba CSA07)
- Metod
distribuisan
unutar
PhEDEx
paketa
na
sve
CMS centre.
-
Već
prvog dana LoadTest07 dostignuti zahtevi za brzinu transfera u 2008 godini od 5Mb/s. Tokom Vežbe za ~5 meseci exportovano 3PB iz CERN-a, a za 2008 predviđeno 7PB.
-
LoadTest07 1. septembra
zamenjuje
CSA07 kao
glavna
aktivnost
CMS kolaboracije. LoadTest07 nastavlja
da
služi kao debugging tool.
September 26th
2007 15