Novinky ze sv¥ta grid

Novinky ze sv¥ta grid·
Zden¥k ’ustr et al.
CESNET
8. listopadu 2010
ćst I
Novinky v MetaCentru
Zden¥k ’ustr et al. (CESNET)
Novinky ze sv¥ta grid·
8. listopadu 2010
2 / 17
MetaCentrum t°ikrát
Národní Gridová Iniciativa
I
koordinátor vztah· mezi uºivateli (VO) a zdroji
I
rozhraní na Evropskou Gridovou Iniciativu
I
provoz spole£ných národních sluºeb
Poskytovatel zdroj·
I
nadkritická velikost zdroj· atraktivní pro uºivatele
I
stimulace vzniku VO a p°ipojení dal²ích zdroj·
Catch-all virtuální organizace MetaCentrum VO
I
uºivatelé bez vlastní virtuální organizace
I
rovný p°ístup pro v²echny
I
v p°echodovém období v²ichni sou£asní uºivatelé
Zden¥k ’ustr et al. (CESNET)
Novinky ze sv¥ta grid·
8. listopadu 2010
3 / 17
Hardware a software
I
I
roz²í°ení diskového pole o 24 TB (na 128 TB)
cca 1500 CPU na p°ibliºn¥ stejné úrovni jako loni
I
I
I
I
I
roz²í°en cluster Alela (o 32 CPU)
nový cluster Tarkil v Praze (224 CPU) nahradil staré Skuruty
na p°ání vlastník· £áste£n¥ odst¥hován (z·stal ve správ¥ MC) a
£áste£n¥ vypnut (staré stroje) cluster Perian
p°ipravujeme zapojení cluster· dal²ích institucí (nap°. FAI UTB Zlín)
zakoupena a nainstalována nová verze SW Gaussian 09
Zden¥k ’ustr et al. (CESNET)
Novinky ze sv¥ta grid·
8. listopadu 2010
4 / 17
Ro£enka MetaCentra 2009
I
Informace o
infrastruktu°e v£etn¥
provozní statistiky
I
22 p°ísp¥vk· uºivatel· /
uºivatelských skupin
Zden¥k ’ustr et al. (CESNET)
Novinky ze sv¥ta grid·
8. listopadu 2010
5 / 17
Seminá°
I
15. 10. 2010 v Praze
I
partnerem Bull, s.r.o.
I
více neº 70 ú£astník· (uºivatelé a poskytovatelé eInfrastrukturních
sluºeb)
program
I
I
I
I
I
I
zvaný host Jean-Pierre Panziera, Director of Performance
Engineering, Bull Extreme Computing group, hovo°il o GPU
GPU aktivity na FI MUNI
novinky v MetaCentru, p°edstavení MC v roli NGI, praktické návody
atd.
zku²enosti a pot°eby uºivatel· z NCBR a projektu CEITEC
diskusní panel Budoucnost e-Infrastruktury v ƒR
I
ú£astnili se zástupci 3 nejv¥t²ích eInfra projekt· (Jan Gruntorád CESNET, Vít Vondrák IT4Innovations, Lud¥k Matyska CERIT-SC)
Zden¥k ’ustr et al. (CESNET)
Novinky ze sv¥ta grid·
8. listopadu 2010
6 / 17
Vyuºití infrastruktury
(leden aº °íjen 2010)
I
285 aktivních uºivatel·, z toho 104 nových
I
1500 CPU zapojených do MetaCentrum VO
I
dal²ích cca 3000 CPU zapojených prost°ednictvím mezinárodních
VO do EGI (AUGER, VOCE, . . . )
v RT jsme °e²ili 1128 dotaz· a poºadavk·
I
I
I
z toho 212 dotaz· a poºadavk· se týkalo mezinárodního gridového
prost°edí
úpravami v plánova£i vzrostlo procento pr·m¥rného vytíºení stroj·
oproti lo¬skému roku o 10 %. U voln¥ p°ístupných stroj· aktuáln¥
mezi 70 aº 92 %.
rok
2010 (1-10)
2009
Zden¥k ’ustr et al. (CESNET)
# uºivatel·
385
371
CPU jader
1500
1468
Novinky ze sv¥ta grid·
CPU hodiny
5,6 mil.
5,0 mil.
vytíºení
85 %
75 %
8. listopadu 2010
7 / 17
Volný vs. vyhrazený cluster
voln¥
p°ístupný
vyhrazený
vlastníkovi
Zden¥k ’ustr et al. (CESNET)
Novinky ze sv¥ta grid·
8. listopadu 2010
8 / 17
Statistika v EGI
Zden¥k ’ustr et al. (CESNET)
Novinky ze sv¥ta grid·
8. listopadu 2010
9 / 17
Vyuºití cluster· v EGI
CESNET
Zden¥k ’ustr et al. (CESNET)
FZU
Novinky ze sv¥ta grid·
8. listopadu 2010
10 / 17
ćst II
Mezinárodní gridové projekty
Zden¥k ’ustr et al. (CESNET)
Novinky ze sv¥ta grid·
8. listopadu 2010
11 / 17
Konec éry EGEE
I
Konec série projekt· DataGrid, EGEE I, EGEE II, EGEE III
I
I
Ukon£ení EGEE III ke 30. 4. 2010
D¥dictví:
I
I
I
gLite gridový middleware
grid EGEE
Následné projekty s cílem vytvo°it dlouhodob¥ udrºitelnou
infrastrukturu
I
EGI-InSpire
I
I
I
I
EMI
I
I
Provoz gridu EGEE
Postupná zm¥na modelu nancování
Postupný p°echod na nancování národními partnery
pokra£ování ve vývoji gridového middlewaru
. . . ale nejsme na to sami
Zden¥k ’ustr et al. (CESNET)
Novinky ze sv¥ta grid·
8. listopadu 2010
12 / 17
EMI
I
gLite, Unicore, ARC, dCache kaºdý se svým middlewarem
I
I
I
harmonizace
spole£né releasy
Formáln¥ orientace na více zákazník·
I
I
I
EGI
PRACE Partnership for Advanced Computing in Europe
dal²í velké distribuované výpo£etní infrastruktury
Zden¥k ’ustr et al. (CESNET)
Novinky ze sv¥ta grid·
8. listopadu 2010
13 / 17
Vývoj v EMI I
I
Výpo£ty
I
I
Computing elementy
Plánova£e
I
I
I
I
Nalezení adekvátních zdroj· k provedení úlohy
Spln¥ní systémových poºadavk·, ale také nap°. statistických
ukazatel·.
Souslednost provedení úloh
Data
I
I
Storage elementy
Správa dat
Zden¥k ’ustr et al. (CESNET)
Novinky ze sv¥ta grid·
8. listopadu 2010
14 / 17
Vývoj v EMI II
I
Infrastruktura
I
I
I
I
Monitoring
Accounting
Informa£ní sluºby (LDAP)
Messaging
I
I
I
ActiveMQ
Zpracování stavových informací
Bezpe£nost
I
I
Protokoly
Certikáty
I
I
I
Proxy certikáty
Hledání náhrady za certikáty
VOMS (Virtual Ornagization Membership Services)
Zden¥k ’ustr et al. (CESNET)
Novinky ze sv¥ta grid·
8. listopadu 2010
15 / 17
CESNET v EMI
I
CESNET partnerem ve vývojových aktivitách EMI
I
I
I
Bezpe£nost
I
I
I
I
bezpe£nost
infrastruktura
integrace MyProxy a dopl¬ková sluºba Proxyrenewal
knihovny pro komunika£ní protokoly GSS a gSOAP
integrace autoriza£ní sady GridSite
Infrastruktura sledování a vyhodnocování stavových informací
z gridových komponent
I
I
I
I
Nejv¥t²í produkt £eské ú£asti: Logging and Bookkeeping (L&B)
P°íjem zpráv o událostech, p°edev²ím p°i zpracování výpo£etních úloh
Implementace stavového diagramu a pr·b¥ºný výpo£et stavu procesu
podle p°ijatých zpráv
Postupné roz²i°ování na stavy jiných d¥j·
I
p°enosy soubor·, stav infrastruktury. . .
Zden¥k ’ustr et al. (CESNET)
Novinky ze sv¥ta grid·
8. listopadu 2010
16 / 17
Konec
D¥kuji za pozornost.
Zden¥k ’ustr et al. (CESNET)
Novinky ze sv¥ta grid·
8. listopadu 2010
17 / 17