09191 abstracts collection.2040

7/27/2019 09191 Abstracts Collection.2040

1/15

0 9 1 9 1 A b s t r a c t s C o l l e c t i o n

F a u l t T o l e r a n c e i n H i g h - P e r f o r m a n c e C o m p u t i n g

a n d G r i d s

D a g s t u h l S e m i n a r

F r a n c k C a p p e l l o

1, L a x m i k a n t K a l e

2, F r a n k M u e l l e r

3, K e s h a v P i n g a l i

4a n d

A l e x a n d e r R e i n e f e l d

5

1I N R I A F u t u r s - O r s a y , F

f c i @ l r i . f r

2U n i v . o f I l l i n o i s - U r b a n a , U S A

k a l e @ c s . u i u c . e d u

3N o r t h C a r o l i n a S t a t e U n i v e r s i t y , U S A

m u e l l e r @ c s . n c s u . e d u

4U n i v . o f T e x a s a t A u s t i n , U S A

5Z u s e I n s t i t u t e B e r l i n

r e i n e f e l d @ z i b . d e

A b s t r a c t . F r o m J u n e 4 8 , 2 0 0 9 , t h e D a g s t u h l S e m i n a r 0 9 1 9 1 F a u l t

T o l e r a n c e i n H i g h - P e r f o r m a n c e C o m p u t i n g a n d G r i d s w a s h e l d i n S c h l o s s

D a g s t u h l L e i b n i z C e n t e r f o r I n f o r m a t i c s . D u r i n g t h e s e m i n a r , s e v e r a l

p a r t i c i p a n t s p r e s e n t e d t h e i r c u r r e n t r e s e a r c h , a n d o n g o i n g w o r k a n d o p e n

p r o b l e m s w e r e d i s c u s s e d . A b s t r a c t s o f t h e p r e s e n t a t i o n s g i v e n d u r i n g

t h e s e m i n a r a s w e l l a s a b s t r a c t s o f s e m i n a r r e s u l t s a n d i d e a s a r e p u t

t o g e t h e r i n t h i s p a p e r . T h e r s t s e c t i o n d e s c r i b e s t h e s e m i n a r t o p i c s

a n d g o a l s i n g e n e r a l . L i n k s t o e x t e n d e d a b s t r a c t s o r f u l l p a p e r s a r e p r o -

v i d e d , i f a v a i l a b l e . S l i d e s o f t h e t a l k s a n d a b s t r a c t s a r e a v a i l a b l e o n l i n e

a t h t t p : / / w w w . d a g s t u h l . d e / M a t e r i a l s / i n d e x . e n . p h t m l ? 0 9 1 9 1 .

K e y w o r d s . H i g h - P e r f o r m a n c e C o m p u t i n g , G r i d s , F a u l t - T o l e r a n c e , A p -

p l i c a t i o n s , R u n t i m e S y s t e m s , O p e r a t i n g S y s t e m s , M i d d l e w a r e , P e e r - t o -

p e e r , O v e r l a y N e t w o r k s

0 9 1 9 1 S e m i n a r R e p o r t F a u l t T o l e r a n c e i n

H i g h - P e r f o r m a n c e C o m p u t i n g a n d G r i d s

T h e o b j e c t i v e o f t h i s s e m i n a r w a s t o b r i n g t o g e t h e r r e s e a r c h e r s a n d p r a c t i -

t i o n e r s f r o m t h e H P C a n d G r i d c o m m u n i t i e s t o d i s c u s s m e d i u m t o l o n g - t e r m

a p p r o a c h e s t o a d d r e s s f a u l t t o l e r a n c e ( F T ) . T h e f o c u s o f s o l u t i o n s w a s o n t h e

p r a c t i c a l , s y s t e m s i d e a n d w i t h t h e i n t e n t t o r e a c h b e y o n d e s t a b l i s h e d s o l u t i o n s .

O v e r a l l , t h e o b j e c t i v e o f t h e w o r k s h o p i s t o s p a r k r e s e a r c h a c t i v i t i e s i n a

c o o r d i n a t e d m a n n e r t h a t c a n s i g n i c a n t l y e n h a n c e F T c a p a b i l i t i e s o f t o d a y ' s

D a g s t u h l S e m i n a r P r o c e e d i n g s 0 9 1 9 1

F a u l t T o l e r a n c e i n H i g h - P e r f o r m a n c e C o m p u t i n g a n d G r i d s

h t t p : / / d r o p s . d a g s t u h l . d e / o p u s / v o l l t e x t e / 2 0 0 9 / 2 0 4 0
http://www.dagstuhl.de/Materials/index.en.phtml?09191


2/15

2 F r a n c k C a p p e l l o , L a x m i k a n t K a l e , F r a n k M u e l l e r , K e s h a v P i n g a l i a n d


a n d t o m o r r o w ' s H P C s y s t e m s a n d G r i d s . T h e b e n e t s o f t h i s w o r k e x t e n d t o

t h e c o m m u n i t y o f s c i e n t i c c o m p u t i n g a t l a r g e , w e l l b e y o n d c o m p u t e r s c i e n c e .

D u e t o t h e w i d e r a n g e o f p a r t i c i p a n t s ( r e s e a r c h e r s a n d i n d u s t r y p r a c t i t i o n e r s

f r o m t h e U . S . , E u r o p e , a n d A s i a ) , f o r t h c o m i n g r e s e a r c h w o r k m a y s i g n i c a n t l y

h e l p e n h a n c e F T p r o p e r t i e s o f l a r g e - s c a l e s y s t e m s , a n d t e c h n o l o g y t r a n s f e r i s

l i k e l y t o e v e n t u a l l y r e a c h g e n e r a l - p u r p o s e c o m p u t i n g g i v e n t h e i n c r e a s i n g t r e n d

t o m u l t i - c o r e p a r a l l e l i s m a n d s e r v e r - s t y l e c o m p u t i n g , s u c h a s G o o g l e . S p e c i c a l l y ,

t h e w o r k s h o u l d s e t t h e s e e d s f o r i n c r e a s e d c o l l a b o r a t i o n s b e t w e e n i n s t i t u t e s i n

E u r o p e a n d t h e U . S . / A s i a . I f s u c c e s s f u l , a f o l l o w - u p s e m i n a r m a y b e o r g a n i z e d

i n t h e f o l l o w i n g y e a r .

T h i s m e e t i n g w a s t h e r s t o f i t s k i n d a t D a g s t u h l a n d p r o v i d e d a f o u n d a t i o n

t o c r e a t e a c o m m u n i t y p l a t f o r m w i t h a c o h e s i v e o u t l o o k o n F T i n H P C a n d G r i d s .

T h e p r e s e n t a t i o n s o f p a r t i c i p a n t s c o n c e n t r a t e d o n f u n d a m e n t a l i s s u e s r e l a t e d

t o F T i n H P C a p p l i c a t i o n s , r u n t i m e s y s t e m s , o p e r a t i n g s y s t e m s , n e t w o r k i n g ,

I / O a n d s c h e d u l e r . T h e p r o g r a m c o n s i s t e d o f a n i n t r o d u c t o r y s e s s i o n f o r a l l

p a r t i c i p a n t s , 2 2 p r e s e n t a t i o n s w e l l a s f o u r o p e n m i c s e s s i o n s w h e r e t i m e w a s

s e t a s i d e f o r s p o n t a n e o u s d i s c u s s i o n s , b r a i n s t o r m i n g a n d c o m m u n i t y - b u i l d i n g

p l a n s . T h e s e m i n a r b r o u g h t t o g e t h e r a t o t a l o f 3 1 r e s e a r c h e r s a n d d e v e l o p e r s

w o r k i n g i n t h e a r e a s r e l a t e d t o f a u l t t o l e r a n c e f r o m u n i v e r s i t i e s , n a t i o n a l r e s e a r c h

l a b o r a t o r i e s a n d c o m p u t e r v e n d o r s . T h e g o a l s w e r e t o i n c r e a s e t h e e x c h a n g e o f

i d e a s , k n o w l e d g e t r a n s f e r , f o s t e r a m u l t i d i s c i p l i n a r y a p p r o a c h t o a t t a c k i n g t h i s

v e r y i m p o r t a n t r e s e a r c h p r o b l e m w i t h d i r e c t i m p a c t o n t h e w a y i n w h i c h w e

d e s i g n a n d u t i l i z e p a r a l l e l s y s t e m s t o m a k e a p p l i c a t i o n s r e s i l i e n t t o f a u l t s i n

h a r d w a r e o r s o f t w a r e . T h e p r e s e n t a t i o n s w e r e g r o u p e d t h e m a t i c a l l y a s f o l l o w s :

H P C F T

T r a n s p a r e n t F a u l t T o l e r a n c e i n M e s s a g e P a s s i n g S y s t e m s , T h o m a s H e r -

a u l t , U n i v e r s i t P a r i s S u d

S u s t a i n e d E x a s c a l e , G e o r g e B o s i l c a , U n i v e r s i t y o f T e n n e s s e e

D i s t r i b u t e d S y s t e m F T

H a n d l i n g M a p R e d u c e F a i l u r e s i n D y n a m i c D i s t r i b u t e d E n v i r o n m e n t s ,

P a o l o T r u n o , U n i v e r s i t y o f C a l a b r i a

I m p l e m e n t i n g F a u l t T o l e r a n t S e r v i c e s o n S t r u c t u r e d O v e r l a y N e t w o r k s

- P a r t 1 o f t h e M e s s y D e t a i l s , A l e x a n d e r R e i n e f e l d , K . Z u s e Z e n t r u m

B e r l i n

I m p l e m e n t i n g F a u l t T o l e r a n t S e r v i c e s o n S t r u c t u r e d O v e r l a y N e t w o r k s

- P a r t 2 o f t h e M e s s y D e t a i l s , F l o r i a n S c h i n t k e , K . Z u s e Z e n t r u m B e r l i n

A p p l i c a t i o n - v s . P r o c e s s - v s . O S - l e v e l F T

B e r k e l e y L a b C h e c k p o i n t / R e s t a r t ( B L C R ) : S t a t u s a n d F u t u r e P l a n s ,

P a u l H a r g r o v e , L a w r e n c e B e r k e l e y N a t i o n a l L a b o r a t o r y

C h a l l e n g e s i n F a u l t T o l e r a n c e f o r H i g h - P e r f o r m a n c e C o m p u t i n g , F r a n k

M u e l l e r , N o r t h C a r o l i n a S t a t e U n i v e r s i t y

O b j e c t - b a s e d O v e r - D e c o m p o s i t i o n c a n e n a b l e p o w e r f u l F a u l t T o l e r a n c e

S c h e m e s , L a x m i k a n t K a l e , U n i v e r s i t y o f I l l i n o i s - U r b a n a

M o n i t o r i n g a n d N e t w o r k F T


3/15

F a u l t T o l e r a n c e i n H i g h - P e r f o r m a n c e C o m p u t i n g a n d G r i d s 3

S u p p o r t i n g F a u l t - T o l e r a n c e i n M o d e r n H i g h - E n d C o m p u t i n g S y s t e m s

w i t h I n n i B a n d , D h a b a l e s w a r K . P a n d a , O h i o S t a t e U n i v e r s i t y

A P r o a c t i v e R e s i l i e n c y A p p r o a c h f o r L a r g e - S c a l e H P C S y s t e m s , G e o f -

f r o y V a l l e e , O a k R i d g e N a t i o n a l L a b .

I / O F T

C h e c k p o i n t I / O r e q u i r e m e n t f o r p e t a - s c a l e a p p l i c a t i o n s , X i a o s o n g M a

, N o r t h C a r o l i n a S t a t e U n i v e r s i t y

S c a l a b l e M a s s i v e l y P a r a l l e l I / O t o T a s k - L o c a l F i l e s , W o l f g a n g F r i n g s ,

J l i c h S u p e r c o m p u t i n g C e n t r e

R e v i s i t i n g F a u l t T o l e r a n c e f o r H P C A p p l i c a t i o n s , F r a n c k C a p p e l l o , I N -

R I A F u t u r s / U n i v . o f I l l i n o i s - U r b a n a , U S A

G r i d F T

W h o c a r e s a b o u t t h e f u t u r e ( j o b s ) ? , J r g S c h n e i d e r , T U B e r l i n

B r i n g i n g t o g e t h e r f a u l t t o l e r a n c e a n d d a t a c o n s i s t e n c y t o e n a b l e g r i d

d a t a s h a r i n g . , G a b r i e l A n t o n i u , I R I S A - R e n n e s

F a u l t - t o l e r a n t D a t a S h a r i n g i n G r i d E n v i r o n m e n t s , M i c h a e l S c h t t n e r

, U n i v e r s i t t D s s e l d o r f

S o f t E r r o r s

M o d u l a r R e d u n d a n c y f o r S o f t - E r r o r R e s i l i e n c e i n L a r g e - S c a l e H P C S y s -

t e m s , C h r i s t i a n E n g e l m a n n , O a k R i d g e N a t i o n a l L a b .

T h e p l a n f o r t h e n e w F r a n k f u r t G r e e n - I T H P C C o m p u t e r a n d i t s r e -

q u i r e m e n t s o n f a u l t t o l e r a n c e i n f r a s t r u c t u r e , V o l k e r L i n d e n s t r u t h , U n i -

v e r s i t t H e i d e l b e r g

E n s u r i n g C o l l e c t i v e A v a i l a b i l i t y i n L a r g e R e s o u r c e P o o l s v i a C l a s s i c a -

t i o n , A r t u r A n d r z e j a k , K . Z u s e Z e n t r u m B e r l i n

F T S t a n d a r d i z a t i o n

T o w a r d s S u p p o r t f o r F a u l t T o l e r a n c e i n t h e M P I S t a n d a r d , R i c h a r d L .

G r a h a m , O a k R i d g e N a t i o n a l L a b .

T o w a r d s H P C R e s i l i e n c e s t a n d a r d i z a t i o n , C h o k c h a i L e a n g s u k s u n , L o u i s i a n a

T e c h U n i v e r s i t y

F a u l t - t o l e r a n c e - R A S - R e s i l i e n c y : " y o u g u y s s t a r t w r i t i n g c o d e a n d I ' l l

g o s e e w h a t t h e y w a n t . . . " , S t e p h e n L . S c o t t , O a k R i d g e N a t i o n a l L a b .

T h e f o l l o w i n g o p e n m i c d i s c u s s i o n s c o m p l e m e n t e d t h e p r o g r a m :

L e a r n i n g f r o m F T r e s u l t s a c r o s s d o m a i n s : G r i d s , H P C a n d b e y o n d , A l e x a n -

d e r R e i n e f e l d

W h a t i s t h e r i g h t F T a p p r o a c h ? , L a x i m a n t K a l e

I n t e r n a t i o n a l c o l l a b o r a t i o n s [ n o t o n l y o n s y s t e m - l e v e l F T ] f o r P e t a S c a l e a n d

E x a S c a l e s y s t e m s , F r a n c k C a p e l l o

F T S t a n d a r d i z a t i o n , F r a n k M u e l l e r

T h r o u g h t h e l i v e l y e n g a g e m e n t o f a l l p a r t i c i p a n t s , t h e s e m i n a r w a s v e r y s u c -

c e s s f u l a n d c o n d u c t e d i n a p r o f e s s i o n a l , f r i e n d l y a n d c o l l e g i a l a t m o s p h e r e s u p -

p o r t e d b y t h e k i n d a n d h e l p f u l s t a a t S c h l o s s D a g s t u h l . L i v e l y d i s c u s s i o n s c o n -

t i n u e d e v e r y d a y w e l l b e y o n d m e e t i n g t i m e s . T h e g r o u p m e e t i n g i n i t s f o u r - d a y


4/15



f o r m a t c o m b i n e d w i t h t h e c o s y c o n n e m e n t o f D a g s t u h l p r o v i d e d a n u m b r e l l a

f o r t h o u g h t f u l d i s c u s s i o n t h a t c o n f e r e n c e s o r w o r k s h o p s c a n n o t p r o v i d e . T h i s

h e l p e d c r e a t e a c o m m u n i t y f e e l i n g t h a t c o u l d b e c o m e a b u i l d i n g b l o c k f o r a

c o n c e r t e d e o r t t o c o o r d i n a t e f u t u r e r e s e a r c h a c t i v i t i e s , c o o p e r a t e i n o u t r e a c h

e o r t a n d m a x i m i z e e v e r y o n e ' s p r o d u c t i v i t y a n d i m p a c t i n f u l l i n g t o g e t h e r e a c h

o n e ' s u n i q u e e x p e r t i s e f o r a c o m b i n e d e o r t t o s u c c e s s f u l l y s o l v e t h e g r a n d c h a l -

l e n g e s o f F T i n H P C a n d G r i d s . D u r i n g t h e m e e t i n g , f o l l o w - u p a c t i o n i t e m s w i t h

c o m m u n i t y - b u i l d i n g c h a r a c t e r w e r e i d e n t i e d , a s d e t a i l e d i n t h e o n l i n e d i s c u s -

s i o n n o t e s o f t h e o p e n m i c s e s s i o n s . T h e y i n c l u d e ( a ) c r e a t i o n o f a m a i l i n g l i s t

t o c o o r d i n a t e a c t i v i t i e s a n d d i s s e m i n a t e i n f o r m a t i o n o n F T i n h i g h - p e r f o r m a n c e

c o m p u t i n g a n d r e l a t e d a r e a s , ( b ) p r o v i s i o n o f a W i k i d e s i g n a t e d t o t h e c o l l e c -

t i o n o f i n f o r m a t i o n o n a c t i v e p r o j e c t s , e x i s t i n g s o l u t i o n s a n d t h e c o o r d i n a t i o n

o f f u t u r e r e s e a r c h a c t i v i t i e s , a n d ( c ) o r g a n i z a t i o n o f f o l l o w - o n m e e t i n g s f o r t h e

c o m m u n i t y . W i t h i n o n e m o n t h o f t h e s e m i n a r , a c t i o n i t e m s ( a ) a n d ( b ) h a v e

b e e n r e a l i z e d a n d a f o l l o w - u p m e e t i n g ( c ) i s i n t h e p l a n n i n g s t a g e s .

T h e s e m i n a r a l s o i n c l u d e d a h a l f - d a y e x c u r s i o n w i t h a g u i d e d t o u r o f B u r g

E l t z a n d a w i n e - t a s t i n g a n d d i n n e r a t t h e l o v e l y d o w n o f B e i l s t e i n o n t h e M o s e l

r i v e r , w h i c h w a s w e l l r e c e i v e d b y t h e p a r t i c i p a n t s . T h i s d o c u m e n t p r o v i d e s a n

a c c o u n t o f D a g s t u h l s e m i n a r 9 1 9 1 : F a u l t T o l e r a n c e i n H i g h - P e r f o r m a n c e C o m -

p u t i n g a n d G r i d s .

K e y w o r d s : D a g s t u h l S e m i n a r P r o c e e d i n g s , D R O P S

J o i n t w o r k o f : M u e l l e r , F r a n k

O p e n M i c : I n t e r n a t i o n a l c o l l a b o r a t i o n

D i s c u s s t h e n e e d f o r I n t e r n a t i o n a l c o l l a b o r a t i o n o r c o o r d i n a t i o n

I n i t i a t e a c o l l a b o r a t i v e e o r t t o c o l l e c t a n d p u b l i s h i n f o r m a t i o n a b o u t t h e

c o m m u n i t y a c t i v i t i e s a n d n e e d s ( a l l t h e c o m m u n i t y i s n o t h e r e )

F o r P e t a E x a s c a l e M a c h i n e s b u t a l s o G r i d

J o i n t w o r k o f : F r a n c k C a p p e l l o

E n s u r i n g C o l l e c t i v e A v a i l a b i l i t y i n L a r g e R e s o u r c e P o o l s

v i a C l a s s i c a t i o n

A r t u r A n d r z e j a k ( K . Z u s e Z e n t r u m B e r l i n , D E )

R e s o u r c e p o o l s s u c h a s B O I N C v o l u n t a r i l y c o m p u t i n g p r o j e c t o r G o o g l e d a t a

c e n t e r s r e a c h s i z e s o f s e v e r a l h u n d r e d t h o u s a n d s o f P C s . W h i l e a v a i l a b i l i t y o f

i n d i v i d u a l h o s t s c a n n o t b e g u a r a n t e e d i n s u c h s c e n a r i o s ( a n d i s n o t o r i o u s l y b a d i n

c a s e o f B O I N C ) , t h e i n h e r e n t r e s o u r c e r e d u n d a n c y o e r s n e w w a y s f o r a c h i e v i n g

a v a i l a b i l i t y .


5/15


I n t h i s t a l k w e e v a l u a t e t h e m o d e l o f * c o l l e c t i v e a v a i l a b i l i t y * , i . e . a s s u r a n c e

t h a t a t l e a s t a c e r t a i n f r a c t i o n o f a s p e c i e d s e t o f h o s t s w i l l b e a v a i l a b l e i n t h e

s h o r t - t e r m f u t u r e . T o t h i s a i m w e u s e a s e t o f s c a l a b l e t e c h n i q u e s f o r e s t i m a t -

i n g t h e p r e d i c t a b i l i t y o f h o s t ' s u p t i m e a n d e c i e n t f o r e c a s t i n g o f t h i s u p t i m e .

B y s e g m e n t i n g t h e r e s o u r c e p o o l a c c o r d i n g t o a v a i l a b i l i t y , p r e d i c t a b i l i t y a n d t h e

f o r e c a s t e d u p t i m e w e a r e a b l e t o i d e n t i f y r e s o u r c e s u b s e t s w i t h d i e r e n t c l a s s e s

o f s u c h c o l l e c t i v e a v a i l a b i l i t y . I n c o n j u n c t i o n w i t h r e p l i c a t i o n a n d m i g r a t i o n s u c h

s u b s e t s a r e ( s t a t i s t i c a l l y ) r o b u s t a g a i n s t f a i l u r e s o f i n d i v i d u a l b o x e s . W e e v a l u -

a t e o u r a p p r o a c h o n t h e a v a i l a b i l i t y d a t a c o l l e c t e d f r o m o v e r 2 5 0 0 0 i n s t i t u t i o n a l

h o s t s p a r t i c i p a t i n g i n t h e S E T I @ h o m e p r o j e c t , a n d c o n t r a s t i t w i t h t h e e v a l u a -

t i o n o n o v e r 7 5 0 0 0 p r i v a t e h o s t s f r o m t h i s e n v i r o n m e n t .

K e y w o r d s : A v a i l a b i l i t y , m a c h i n e l e a r n i n g , s t a t i s t i c a l m o d e l s , l a r g e r e s o u r c e

p o o l s

J o i n t w o r k o f : A n d r z e j a k , A r t u r ; K o n d o , D e r r i c k ; A n d e r s o n , D a v i d P .

F u l l P a p e r :

h t t p : / / w w w . z i b . d e / a n d r z e j a k / m y - p a p e r s / A n d r z e j a k K o n d o A n d e r s o n - D S O M 2 0 0 8 . p d f

S e e a l s o : A r t u r A n d r z e j a k , D e r r i c k K o n d o , D a v i d P . A n d e r s o n : E n s u r i n g C o l -

l e c t i v e A v a i l a b i l i t y i n V o l a t i l e R e s o u r c e P o o l s v i a F o r e c a s t i n g , 1 9 t h I F I P / I E E E

D i s t r i b u t e d S y s t e m s : O p e r a t i o n s a n d M a n a g e m e n t ( D S O M 2 0 0 8 ) ( p a r t o f M a n -

w e e k 2 0 0 8 ) , S a m o s I s l a n d , G r e e c e , S e p t e m b e r 2 2 - 2 6 , 2 0 0 8

F a u l t T o l e r a n c e a n d D a t a C o n s i s t e n c y f o r G r i d

D a t a - S h a r i n g S e r v i c e s : F r o m J u x M e m t o B l o b S e e r

G a b r i e l A n t o n i u ( I N R I A - R e n n e s B r e t a g n e A t l a n t i q u e , F R )

T h i s t a l k a d d r e s s e s t h e c h a l l e n g e o f t r a n s p a r e n t d a t a s h a r i n g w i t h i n c o m p u t i n g

g r i d s b u i l t a s c l u s t e r f e d e r a t i o n s . O n s u c h p l a t f o r m s , t h e a v a i l a b i l i t y o f s t o r a g e

r e s o u r c e s m a y c h a n g e i n a d y n a m i c w a y , o f t e n d u e t o h a r d w a r e f a i l u r e s . W e f o c u s

o n t h e p r o b l e m o f h a n d l i n g t h e c o n s i s t e n c y o f r e p l i c a t e d d a t a i n t h e p r e s e n c e o f

f a i l u r e s . W e d e s c r i b e a s o f t w a r e a r c h i t e c t u r e w h i c h d e c o u p l e s c o n s i s t e n c y m a n -

a g e m e n t f r o m f a u l t t o l e r a n c e m a n a g e m e n t . W e i l l u s t r a t e t h i s a r c h i t e c t u r e w i t h

a c a s e s t u d y s h o w i n g h o w t o d e s i g n a c o n s i s t e n c y p r o t o c o l u s i n g f a u l t - t o l e r a n t

b u i l d i n g b l o c k s . A p r o t o t y p e i m p l e m e n t a t i o n o f t h i s p r o t o c o l h a s b e e n r e a l i z e d

w i t h i n J u x M e m , a s o f t w a r e e x p e r i m e n t a l p l a t f o r m f o r g r i d d a t a s h a r i n g . I n a s e c -

o n d s t e p , t o a d d r e s s t o d a y ' s n e w c h a l l e n g e s o f l a r g e - s c a l e d a t a m a n a g e m e n t s o n

g r i d s a n d c l o u d s , w e h a v e r e c e n t l y s t a r t e d t o e x p l o r e a n e w a p p r o a c h , t a r g e t t i n g

t h e m a n a g e m e n t o f h u g e d a t a a c c e s s e d a t n e g r a i n , u n d e r h e a v y c o n s i s t e n c y .

W e e x p e r i m e n t t h i s a p p r o a c h w i t h t h e B l o b s e e r p l a t f o r m . T o a d d r e s s f a u l t t o l e r -

a n c e i n t h i s a p p r o a c h , w e i n v e s t i g a t e t h e b e n e t s o f g l o b a l b e h a v i o r m o d e l l i n g .
http://www.zib.de/andrzejak/my-papers/AndrzejakKondoAnderson-DSOM2008.pdf


6/15



K e y w o r d s : T r a n s p a r e n t d a t a a c c e s s , d a t a s h a r i n g , f a u l t t o l e r a n c e , d a t a c o n s i s -

t e n c y , g r i d d a t a m a n a g e m e n t , g l o b a l b e h a v i o r m o d e l l i n g

S u s t a i n e d E x a s c a l e

G e o r g e B o s i l c a ( U n i v e r s i t y o f T e n n e s s e e , U S )

E v e n m a k i n g g e n e r o u s a s s u m p t i o n s a b o u t t h e r e l i a b i l i t y o f a s i n g l e p r o c e s s o r , i t

i s c l e a r t h a t a s t h e p r o c e s s o r c o u n t i n h i g h e n d c l u s t e r s g r o w s i n t o t h e t e n s o f

t h o u s a n d s , t h e m e a n t i m e t o f a i l u r e ( M T T F ) w i l l d r o p f r o m h u n d r e d s o f d a y s

t o a f e w h o u r s , o r l e s s . T h e t y p e o f 1 0 0 , 0 0 0 - p r o c e s s o r m a c h i n e s t h a t n o w e x i s t

a r e e x p e c t e d t o e x p e r i e n c e a p r o c e s s o r f a i l u r e a l m o s t d a i l y , p e r h a p s h o u r l y . A l -

t h o u g h t o d a y ' s a r c h i t e c t u r e s a r e r o b u s t e n o u g h t o i n c u r p r o c e s s f a i l u r e s w i t h o u t

s u e r i n g c o m p l e t e s y s t e m f a i l u r e , a t t h i s s c a l e a n d f a i l u r e r a t e , t h e o n l y t e c h -

n i q u e a v a i l a b l e t o a p p l i c a t i o n d e v e l o p e r s f o r p r o v i d i n g f a u l t t o l e r a n c e , w i t h i n

t h e c u r r e n t p a r a l l e l p r o g r a m m i n g m o d e l o f c h e c k p o i n t / r e s t a r t , h a s p e r f o r m a n c e

a n d c o n c e p t u a l l i m i t a t i o n s t h a t m a k e i t i n a d e q u a t e t o t h e f u t u r e n e e d s o f t h e

c o m m u n i t i e s t h a t w i l l u s e t h e s e s y s t e m s .

T h e M P I s t a n d a r d , a s d e n e d b y t h e M P I f o r u m i n 1 9 9 4 - 1 9 9 7 , h a s u n d o u b t -

e d l y b e c o m e t h e d e - f a c t o s t a n d a r d f o r p a r a l l e l a p p l i c a t i o n s . W h i l e f e w o t h e r

p a r a l l e l p r o g r a m m i n g p a r a d i g m s a r e c u r r e n t l y a v a i l a b l e , t h e i r s h a r e o f t h e p a r -

a l l e l a p p l i c a t i o n s w o r l d i s l i m i t e d t o s o m e n a r r o w a p p l i c a t i o n d o m a i n s a n d t h e

o v e r a l l n u m b e r o f a p p l i c a t i o n s u s i n g t h e s e p a r a d i g m s i s l i m i t e d . U n f o r t u n a t e l y ,

n e i t h e r o f t h e r s t o r s e c o n d v e r s i o n o f t h e M P I s t a n d a r d w e r e a d d r e s s i n g t h e

f a u l t t o l e r a n c e i s s u e . W e c a n n d t w o e x p l a n a t i o n s f o r t h i s s t a t e m e n t : a t t h i s

t i m e , H P C a r c h i t e c t u r e w e r e u s i n g f e w e r C P U s , t h u s f a i l u r e s w e r e v e r y u n c o m -

m o n e v e n t s a n d w e r e n o t a p r a c t i c a l i s s u e ; a n d f a u l t t o l e r a n t m e c h a n i s m s , e s p e -

c i a l l y a u t o m a t i c o n e s , a r e u s u a l l y i n t r o d u c i n g s o m e o v e r h e a d o n m e s s a g e p a s s i n g

p e r f o r m a n c e . T h o u g h M P I s t a n d a r d d o e s n o t p r o v i d e a n y h e l p t o r e c o v e r f r o m

f a i l u r e s , i t d e n e s s e v e r a l e r r o r c o d e s r e t u r n e d b y M P I f u n c t i o n s t o w a r n t h e

a p p l i c a t i o n t h a t m a y b e u s e d t o t a k e s o m e c o r r e c t i v e a c t i o n . S e v e r a l p r o j e c t s

h a v e a i m e d a t e a s i n g t h e d e v e l o p m e n t o f f a u l t t o l e r a n t M P I a p p l i c a t i o n s .

A l t h o u g h w o r k i n f a u l t t o l e r a n c e h a s b e e n d o m i n a t e d i n r e c e n t y e a r s b y

s y s t e m s - o r i e n t e d a p p r o a c h e s t h a t a r e t r a n s p a r e n t t o t h e a p p l i c a t i o n a n d r e l a -

t i v e l y e a s y t o u s e , w e b e l i e v e t h a t , i n t h e n e x t g e n e r a t i o n o f h i g h - e n d c o m p u t i n g

e n v i r o n m e n t s , s u c c e s s f u l a p p r o a c h e s t o f a u l t t o l e r a n c e m u s t l e v e r a g e i n t i m a t e

k n o w l e d g e o f t h e p a r a l l e l e n v i r o n m e n t , t h e a p p l i c a t i o n a n d i t s d o m i n a n t a l g o -

r i t h m i n o r d e r t o a c h i e v e t h e e c i e n c i e s r e q u i r e d f o r f a s t e r ( o r e v e n a d e q u a t e )

r e c o v e r y t i m e s a n d m e m o r y r e q u i r e m e n t s . T h i s t a l k w i l l p r e s e n t t h e l a t e s t a d -

v a n c e s i n u n c o o r d i n a t e d c h e c k p o i n t / r e s t a r t a s w e l l a s u s e r l e v e l r e c o v e r y a l g o -

r i t h m s b a s e d o n t h e r e s e a r c h a n d p r o t o t y p e s f r o m t h e U n i v e r s i t y o f T e n n e s s e e .

K e y w o r d s : F a u l t t o l e r a n c e , M P I , A B F T


7/15


R e v i s i t i n g F a u l t T o l e r a n c e f o r H P C A p p l i c a t i o n s ( p a r a l l e l

e x e c u t i o n s )

F r a n c k C a p p e l l o ( I N R I A - O r s a y , F R )

C u r r e n t l y , F a u l t T o l e r a n c e f o r H P C a p p l i c a t i o n s c o n s i d e r s e q u i v a l e n c e b e t w e e n

p a r a l l e l e x e c u t i o n s a n d d i s t r i b u t e d a l g o r i t h m e x e c u t i o n s . A s a c o n s e q u e n c e , c l a s -

s i c a p p r o a c h e s f o r f a u l t t o l e r a n c e i n d i s t r i b u t e d s y s t e m s h a v e b e e n c o n s i d e r e d

s u c h a s r e p l i c a t i o n a n d c o m p l e x p r o t o c o l s c o m p u t i n g c o n s i s t e n t c u t s o f d i s -

t r i b u t e d a l g o r i t h m e x e c u t i o n s ( c o o r d i n a t e d c h e c k p o i n t i n g a n d m e s s a g e l o g g i n g ) .

T y p i c a l l y , t h e s e a p p r o a c h e s a r e u s e d f r o m t h e b e g i n n i n g t o t h e e n d o f t h e e x -

e c u t i o n , c o n s i d e r i n g t h a t a p a r a l l e l e x e c u t i o n a l w a y s b e h a v e s a s a d i s t r i b u t e d

a l g o r i t h m . H o w e v e r H P C a p p l i c a t i o n s a r e b y f a r m o r e c o m p l e x t h a n a s i n g l e

d i s t r i b u t e d a l g o r i t h m a n d r e l y o n a c o l l e c t i o n o f g l o b a l t r a n s f o r m a t i o n s t h a t d o

n o t n e c e s s a r i l y n e e d c o m p l e x f a u l t t o l e r a n c e a l g o r i t h m s . B a s e d o n t h i s v i e w o f

p a r a l l e l e x e c u t i o n s , w e d e r i v e a s i m p l e f a u l t t o l e r a n c e a p p r o a c h b a s e d o n e s s e n -

t i a l g l o b a l t r a n s f o r m a t i o n s t h a t c o n s i d e r s t r a n s a c t i o n s a s a m e c h a n i s m f o r f a u l t

t o l e r a n c e i n H P C p a r a l l e l a p p l i c a t i o n s . T h i s a p p r o a c h b e i n g s t i l l u n d e r i t s d e s i g n

s t a g e , w e o n l y d i s c u s s i t s m a i n p r i n c i p l e s .

M o d u l a r R e d u n d a n c y f o r S o f t - E r r o r R e s i l i e n c e i n

L a r g e - S c a l e H P C S y s t e m s

C h r i s t i a n E n g e l m a n n ( O a k R i d g e N a t i o n a l L a b . , U S )

R e c e n t i n v e s t i g a t i o n s i n t o r e s i l i e n c e o f l a r g e - s c a l e h i g h - p e r f o r m a n c e c o m p u t i n g

( H P C ) s y s t e m s s h o w e d a c o n t i n u o u s t r e n d o f d e c r e a s i n g r e l i a b i l i t y a n d a v a i l -

a b i l i t y . N e w l y i n s t a l l e d s y s t e m s h a v e a l o w e r m e a n - t i m e t o f a i l u r e ( M T T F ) a n d

a h i g h e r m e a n - t i m e t o r e c o v e r ( M T T R ) t h a n t h e i r p r e d e c e s s o r s . M o d u l a r r e -

d u n d a n c y i s b e i n g u s e d i n m a n y m i s s i o n c r i t i c a l s y s t e m s t o d a y t o p r o v i d e f o r

r e s i l i e n c e , s u c h a s f o r a e r o s p a c e a n d c o m m a n d & c o n t r o l s y s t e m s . T h e p r i m a r y

a r g u m e n t a g a i n s t m o d u l a r r e d u n d a n c y f o r r e s i l i e n c e i n H P C h a s a l w a y s b e e n

t h a t t h e c a p a b i l i t y o f a H P C s y s t e m , a n d r e s p e c t i v e r e t u r n o n i n v e s t m e n t , w o u l d

b e s i g n i c a n t l y r e d u c e d . W e a r g u e t h a t m o d u l a r r e d u n d a n c y c a n s i g n i c a n t l y

i n c r e a s e c o m p u t e n o d e a v a i l a b i l i t y a s i t r e m o v e s t h e i m p a c t o f s c a l e f r o m s i n g l e

c o m p u t e n o d e M T T R . W e f u r t h e r a r g u e t h a t s i n g l e c o m p u t e n o d e s c a n b e m u c h

l e s s r e l i a b l e , a n d t h e r e f o r e l e s s e x p e n s i v e , a n d s t i l l b e h i g h l y a v a i l a b l e , i f t h e i r

M T T R / M T T F r a t i o i s m a i n t a i n e d .

J o i n t w o r k o f : E n g e l m a n n , C h r i s t i a n ; O n g , H o n g ; S c o t t , S t e p h e n


8/15



S c a l a b l e M a s s i v e l y P a r a l l e l I / O t o T a s k - L o c a l F i l e s

W o l f g a n g F r i n g s ( J l i c h S u p e r c o m p u t i n g C e n t r e , D E )

P a r a l l e l a p p l i c a t i o n s o f t e n s t o r e d a t a i n m u l t i p l e t a s k - l o c a l l e s , f o r e x a m p l e , t o

r e m e m b e r c h e c k p o i n t s , t o c i r c u m v e n t m e m o r y l i m i t a t i o n s , o r t o r e c o r d p e r f o r -

m a n c e d a t a . W h e n o p e r a t i n g a t v e r y l a r g e p r o c e s s o r c o n g u r a t i o n s , s u c h a p p l i -

c a t i o n s o f t e n e x p e r i e n c e s c a l a b i l i t y l i m i t a t i o n s w h e n t h e s i m u l t a n e o u s c r e a t i o n

o f t h o u s a n d s o f l e s c a u s e s m e t a d a t a c o n t e n t i o n o r s i m p l y w h e n l a r g e l e c o u n t s

c o m p l i c a t e l e m a n a g e m e n t o r o p e r a t i o n s o n t h o s e l e s e v e n d e s t a b i l i z e t h e l e

s y s t e m . S I O N l i b i s a p a r a l l e l I / O - l i b r a r y t h a t a d d r e s s e s t h i s p r o b l e m b y t r a n s -

p a r e n t l y m a p p i n g a l a r g e n u m b e r o f t a s k - l o c a l l e s o n t o a s m a l l n u m b e r o f

p h y s i c a l l e s v i a i n t e r n a l m e t a d a t a h a n d l i n g a n d b l o c k a l i g n m e n t t o e n s u r e h i g h

p e r f o r m a n c e .

U s i n g S I O N l i b s i g n i c a n t l y r e d u c e s l e c r e a t i o n o v e r h e a d a n d s i m p l i e s l e

h a n d l i n g , w h i l e r e q u i r i n g o n l y m i n i m a l s o u r c e c o d e c h a n g e s a n d w i t h o u t p e n a l -

i z i n g r e a d a n d w r i t e p e r f o r m a n c e . W e e v a l u a t e S I O N l i b ' s e c i e n c y w i t h u p t o

6 4 K t a s k s a n d r e p o r t s i g n i c a n t p e r f o r m a n c e i m p r o v e m e n t s i n t w o u s e c a s e s .

T o w a r d s S u p p o r t f o r F a u l t T o l e r a n c e i n t h e M P I S t a n d a r d

R i c h a r d L . G r a h a m ( O a k R i d g e N a t i o n a l L a b . , U S )

W i t h t h e r a p i d i n c r e a s e i n t h e s i z e o f c u r r e n t a n d p l a n n e d H i g h P e r f o r m a n c e

C o m p u t i n g p l a t f o r m s a n d t h e i r a s s o c i a t e d l a r g e - s c a l e s i m u l a t i o n c o d e s , a n d t h e

e m e r g e n c e o f l o n g r u n n i n g l o o s e l y c o u p l e d m i s s i o n c r i t i c a l p a r a l l e l a p p l i c a t i o n s ,

t h e n e e d t o h a n d l e s y s t e m f a i l u r e s w h i l e t h e s e c o m p u t e r c o d e s c o n t i n u e t o r u n

c o r r e c t l y i s e s s e n t i a l . W i t h t h e M e s s a g e P a s s i n g I n t e r f a c e ( M P I ) b e i n g t h e m o s t

w i d e l y u s e d p a r a l l e l a p p l i c a t i o n p r o c e s s m a n a g e m e n t a n d c o m m u n i c a t i o n s s y s -

t e m , a d d r e s s i n g M P I ' s s u p p o r t f o r F a u l t T o l e r a n c e i s n e c e s s a r y . T h i s t a l k w i l l

d i s c u s s o n g o i n g w o r k t o a d d s u p p o r t f o r F a u l t T o l e r a n c e t o t h e M P I s t a n d a r d .

T h i s w o r k i s a i m e d a t t h e M P I - 3 s t a n d a r d .

K e y w o r d s : M P I , F a u l t T o l e r a c n e

B e r k e l e y L a b C h e c k p o i n t / R e s t a r t ( B L C R ) : S t a t u s a n d

F u t u r e P l a n s

P a u l H a r g r o v e ( L a w r e n c e B e r k e l e y N a t i o n a l L a b o r a t o r y , U S )

T h i s w i l l b e a v e r y i n f o r m a l p r e s e n t a t i o n a b o u t t h e c u r r e n t s t a t u s a n d f u t u r e

p l a n s f o r t h e s o f t w a r e p a c k a g e B e r k e l e y L a b C h e c k p o i n t / R e s t a r t ( B L C R ) .


9/15


A s a k e r n e l - l e v e l i m p l e m e n t a t i o n o f c l a s s i c r o l l b a c k r e c o v e r y , B L C R i s i n h e r -

e n t l y v e r y I / O i n t e n s i v e . I n t h i s t a l k I w i l l d i s c u s s w i t h t h e

K e y w o r d s : B L C R c h e c k p o i n t s c a l a b i l i t y C P R r o l l b a c k

T r a n s p a r e n t F a u l t T o l e r a n c e i n M e s s a g e P a s s i n g S y s t e m s

T h o m a s H e r a u l t ( U n i v e r s i t P a r i s S u d , F R )

I n t h i s t a l k , I w i l l p r e s e n t t h e s t u d y t h a t w a s c o n d u c t e d i n t h e G r a n d - L a r g e

p r o j e c t / t e a m o f t h e I N R I A a t O r s a y , a n d t h e P a r a l l e l i s m t e a m o f t h e U n i v e r s i t y

P a r i s - S u d o n t r a n s p a r e n t f a u l t t o l e r a n t p r o t o c o l s f o r m e s s a g e p a s s i n g s y s t e m s

( i n p a r t i c u l a r M P I C H ) . T h e t a l k w i l l p r e s e n t a l l t h e p r o t o c o l s t h a t w e r e s t u d i e d

d u r i n g t h e l a s t y e a r s , t h e r e s u l t s w e o b t a i n e d , a n d o n g o i n g r e s e a r c h d o n e t o d a y i n

c o l l a b o r a t i o n w i t h t h e u n i v e r s i t y o f T e n n e s s e e . I w i l l a l s o p r e s e n t r e c e n t w o r k s

d o n e t o p o r t M P I o n i n s t i t u t i o n a l g r i d s , a n d i s s u e s t h a t w e r e r a i s e d b y s u c h

s t u d y .

O b j e c t - b a s e d O v e r - D e c o m p o s i t i o n c a n e n a b l e p o w e r f u l

F a u l t T o l e r a n c e S c h e m e s

L a x m i k a n t K a l e ( U n i v e r s i t y o f I l l i n o i s - U r b a n a , U S )

H P C s y s t e m s f o r C o m p u t a t i o n a l S c i e n c e a n d E n g i n e e r i n g h a v e a l m o s t r e a c h e d

t h e t h r e s h o l d w h e r e t h e y c a n n o t d o w i t h o u t s o m e f o r o f f a u l t t o l e r a n c e . A l -

t h o u g h s y s t e m - l e v e l c h e c k p o i n t - r e s t a r t k e e p s t h i n g s s i m p l e f o r t h e a p p l i c a t i o n

d e v e l o p e r , t h e y l e a d t o h i g h o v e r h e a d ; a p p l i c a t i o n - l e v e l s c h e m e s a r e e o r t i n t e n -

s i v e . S c h e m e s b a s e d o n s m a r t r u n t i m e s y s t e m s a p p e a r t o b e a t t h e r i g h t l e v e l f o r

e e c t i n g f a u l t t o l e r a n c e . F u r t h e r , a s f a u l t f r e q u e n c i e s r i s e a n d M T B F a p p r o a c h e s

i d e a l c h e c k p o i n t i n g p e r i o d , i t b e c o m e s h a r d e r f o r a p p l i c a t i o n s t o m a k e f o r w a r d

p r o g r e s s . I w i l l d i s c u s s a s e r i e s o f t e c h n i q u e s t h a t c a n h e l p i n t h i s s i t u a t i o n . I n

p a r t i c u l a r , m y p e t t e c h n i q u e o f o b j e c t b a s e d o v e r - d e c o m p o s i t i o n ( a s i m p l e m e n t e d

i n C h a r m + + a n d A M P I ) a p p e a r s t o b e ( s u r p r i s e , s u r p r i s e ) k e y t o m a n y n o v e l

f a u l t t o l e r a n c e i d e a s I ' l l e x p l a i n w h y . T h e t e c h n i q u e s i n c l u d e p r o a c t i v e f a u l t

t o l e r a n c e , d i s t r i b u t e d c h e c k p o i n t s , a n d m e s s a g e - l o g g i n g w i t h p a r a l l e l r e c o v e r y .

I ' d l i k e t o i n v o l v e t h e e x p e r t i s e o f t h e c o m m u n i t y i n c o m b i n i n g n e w i d e a s

w i t h o b j e c t - b a s e d t e c h n i q u e s t o o v e r c o m e c h a l l e n g e s o f f u t u r e , w h i c h i n c l u d e

m i n i m i z i n g f o r w a r d - p a t h ( i . e . n o - f a i l u r e ) o v e r h e a d o f s c a l a b l e f a u l t t o l e r a n c e

s c h e m e s .

K e y w o r d s : O b j e c t - b a s e d o v e r d e c o m p o s t i o n , p r o a c t i v e f a u l t t o l e r a n c e , m e s s a g e

l o g g i n g , p a r a l l e l r e c o v e r y


10/15

1 0 F r a n c k C a p p e l l o , L a x m i k a n t K a l e , F r a n k M u e l l e r , K e s h a v P i n g a l i a n d


T o w a r d s H P C R e s i l i e n c e s t a n d a r d i z a t i o n

C h o k c h a i L e a n g s u k s u n ( L o u i s i a n a T e c h U n i v e r s i t y , U S )

A n e w p a r a d i g m i n d i s t r i b u t e d c o m p u t i n g i s e m e r g i n g , w i t h s y s t e m s n e a r i n g

t h e m i l l i o n c o r e m a r k , t h e p r o b a b i l i t y o f a n y s i n g l e c o m p o n e n t f a i l i n g i s n o

l o n g e r m e r e l y a p o s s i b i l i t y b u t a g u a r a n t e e . T o a d d r e s s t h e i s s u e o f i m m i n e n t

f a i l u r e , r e s i l i e n t c o m p u t i n g h a s e m e r g e d a s t h e c h a m p i o n t h a t w i l l n o t o n l y

r e a c t t o e x p e c t e d f a i l u r e s , b u t a l s o c o p e w i t h f a i l u r e s t h a t a r e u n e x p e c t e d . W i t h

t h e m i s s i o n t o e n s u r e t h a t a j o b m a k e s p r o g r e s s i n s p i t e o f f a i l u r e s , r e s i l i e n c e

i s d i c u l t t o d e n e ; i t a t t e m p t s t o c a p t u r e b o t h p r o a c t i v e a n d r e a c t i v e f a u l t

t o l e r a n c e , w h i l e a l s o a t t e m p t i n g t o q u a n t i f y w h e t h e r a n a p p l i c a t i o n i s m a k i n g

p r o g r e s s t o w a r d i t s i n t e n d e d g o a l . A k e y a s p e c t o f r e s i l i e n t c o m p u t i n g i s t h a t

i t i s a p p l i c a t i o n c e n t r i c , t h e s o l e f o c u s b e i n g t o e n s u r e t h e a p p l i c a t i o n m a k e s

p r o g r e s s .

T h e r e a r e m a n y c h a l l e n g e s a s s o c i a t e d w i t h r e s i l i e n c e , a n d m a n y o r g a n i z a -

t i o n s a n d r e s e a r c h e r s a r e a t t a c k i n g v a r i o u s a s p e c t s . W i t h r e s i l i e n c e ' s c h a n g e i n

p e r s p e c t i v e f r o m s y s t e m l e v e l t o j o b / a p p l i c a t i o n l e v e l , t h e s e m a n t i c s r e l a t e d t o

r e l i a b i l i t y n e e d t o b e a d d r e s s e d . F o r i n s t a n c e , i n H P C e n v i r o n m e n t s , w h a t d o e s

a v a i l a b i l i t y m e a n ? D o e s a v a i l a b i l i t y r e q u i r e a l l r e s o u r c e s t o b e a v a i l a b l e ? O r o n l y

t h o s e r e q u i r e d b y t h e a p p l i c a t i o n ? I n a d d i t i o n , k n o w i n g m o r e d e t a i l e d i n f o r m a -

t i o n a b o u t t h e s t a t e o f t h e s y s t e m i s r e q u i r e d , a s r e s i l i e n c e m e c h a n i s m s s h o u l d

r e s p o n d d i e r e n t l y b a s e d o n t h e s t a t e o f t h e s y s t e m . S o m e p o t e n t i a l s t a t e s f o r

t h e s y s t e m g l o b a l l y a s w e l l a s r e s o u r c e s w i t h i n i t a r e : p r o d u c t i o n m o d e , p l a n n e d

d o w n t i m e , a n d e n g i n e e r i n g m o d e . I t i s a l s o i m p o r t a n t t o c l a r i f y w h a t e x a c t l y

c o n s t i t u t e s a f a i l u r e ; f r o m t h e a p p l i c a t i o n p o i n t o f v i e w , a f a i l u r e c o u l d b e c a l l e d

a n i n t e r r u p t o r i t m a y b e c a l l e d a f a i l u r e b y t h e c u r r e n t m e t h o d o l o g y . T h e s e

s u b t l e d i e r e n c e s s h o u l d b e c l a r i e d n o w , r a t h e r t h a n l a t e r t o e n s u r e t h a t t h e

H P C c o m m u n i t y h a s a c l e a r v i s i o n a n d l a n g u a g e f o r e x p r e s s i n g r e s i l i e n t c o m -

p u t i n g r e s e a r c h . T h e b e n e t s o f a d d r e s s i n g t h e s e c h a l l e n g e s n o w e x p a n d b e y o n d

r e s i l i e n t c o m p u t i n g , a n d h a v e t h e p o t e n t i a l t o e n h a n c e a n d c l a r i f y t h e r e s e a r c h

o f a l l H P C r e s e a r c h e r s .

T o a d d r e s s t h e s e c h a l l e n g e s , w e a r e a c t i v e l y w o r k i n g t o f o r m a l i z e a n d j u s t i f y

e x i s t i n g t e r m i n o l o g y a n d m e t r i c s a s w e l l a s t h i e r s e m a n t i c s . W e s e e k t o d o c u m e n t

t h e n u a n c e s w h e n m o v i n g b e t w e e n p e r s p e c t i v e s , a n d w o r k t o w a r d s a w h i t e p a p e r

t h a t c l e a r l y s t a t e s w h a t t h e r e s e a r c h c o m m u n i t y a g r e e s a r e , t h e a c c e p t e d t e r m s

a n d w h a t t h e i n t e n d e d m e a n i n g s h o u l d b e b a s e d o n t h e c o n t e x t . W e p l a n t o

h a v e a d r a f t a v a i l a b l e i n a p u b l i c r e p o s i t o r y , a n d w i l l e n c o u r a g e a l l r e s e a r c h e r s

t o p r o p o s e m o d i c a t i o n s .

K e y w o r d s : R e s i l i e n c e H P C s t a n d a r d i z a t i o n R e l i a b i l i t y


11/15

F a u l t T o l e r a n c e i n H i g h - P e r f o r m a n c e C o m p u t i n g a n d G r i d s 1 1

T h e p l a n f o r t h e n e w F r a n k f u r t G r e e n - I T H P C C o m p u t e r

a n d i t s r e q u i r e m e n t s o n f a u l t t o l e r a n c e i n f r a s t r u c t u r e

V o l k e r L i n d e n s t r u t h ( U n i v e r s i t t H e i d e l b e r g , D E )

A n e w G r e e n - I T c o m p u t e r c e n t e r i s p l a n n e d i n F r a n k f u r t w i t h a c o o l i n g o u v e r -

h e a d o f l e s s t h a n 2 0 % . T h i s i s r e a l i z e d b y w a t e r c o o l e d r a c k s , w h i c h a r e m o u n t e d

i n a 3 D s t e e l s t r u c t u r e l i k e a h i g h r i s e r a c k s t o r e . T h e c o m p u t e r i t s e l f i s p l a n n e d

a s a c l u s t e r , c o n n e c t e d w i t h a h i g h p e r f o r m a n c e l o w l a t e n c y n e t w o r k a n d u t i l i z e s

h a r d w a r e a c c e l e r a t o r s , s u c h a s G P U s a n d t h e l i k e . T h e p r e s e n t a t i o n w i l l g i v e

a n o u t l i n e o f t h e d a t a c e n t e r a r c h i t e c t u r e a n d i t s f a u l t t o l e r a n c e r e q u i r e m e n t s .

I t t u r n s o u t t h a t a n u m b e r o f d e s i g n p a r a m e t e r s a r e t y p i c a l l y c h o s e n s u c h , t h a t

t h e y p r o v i d e a c e r t a i n l e v e l o f s y s t e m s e c u r i t y a t t h e c o s t o f e n e r g y u s a g e d u r i n g

n o r m a l o p e r a t i o n . T h e F r a n k f u r t s y s t e m i s p l a n n e d d i e r e n t l y , b u t a t t h e c o s t

o f a d d i t i o n a l r e q u i r e m e n t s f o r s y s t e m s u p p o r t . A s e c o n d s u b j e c t i s t h e g r o w i n g

d e m a n d f o r h a r d w a r e a c c e l e r a t o r s . M a n y o f t h e e x i s t i n g a p p l i c a t i o n s o f t h e d i s -

c u s s e d s y s t e m c a n u t i l i z e s u c h d e v i c e s . H o w e v e r , t h e y m a y b e e i t h e r s o m e w h a t

u n r e l i a b l e b e c a u s e t h e y d o n o t i m p l e m e n t E C C m e m o r i e s o r t h e y a r e q u i t e e x -

p e n s i v e . W e w a n t t o i n v e s t i g a t e w h e t h e r i t i s p o s s i b l e t o c o p e w i t h t h i s i s s u e b y

f a u l t t o l e r a n t a l g o r i t h m s . T h e s c a l e o f a d i s t r i b u t e d s y s t e m w i t h t h o u s a n d s o f

n o d e s , w h i c h a r e t h e m s e l v s e a s t r u c t u r e d s y s t e m w i l l b e u n r e l i a b l e i n i t s e l f . O n

a v e r a g e w e e x p e c t o n e t o t w o n o d e f a i l u r e s p e r d a y . F a u l t t o l e r a n c e i n f r a s t r u c -

t u r e h a s t o b e a v a i l a b l e i n o r d e r t o h a n d l e s u c h f a i l i n g s y s t e m s , f o r i n s t a n c e b y

f a i l i n g o v e r t h e a p p l i c a t i o n t o a n o t h e r n o d e .

K e y w o r d s : M a n y c o r e , m u l t i c o r e , H P C , f a u l t t o l e r a n c e , g r e e n - I T

C h e c k p o i n t I / O r e q u i r e m e n t f o r p e t a - s c a l e a p p l i c a t i o n s

X i a o s o n g M a ( N o r t h C a r o l i n a S t a t e U n i v e r s i t y , U S )

L a r g e - s c a l e a p p l i c a t i o n s r o u t i n e l y w r i t e c h e c k p o i n t s . M a n y h a v e t r e a t e d c h e c k -

p o i n t d a t a t h e s a m e w a y a s t h e r e s u l t d a t a . H o w e v e r , t h e s e t w o t y p e s o f o u t p u t

h a v e v e r y d i e r e n t s e m a n t i c s a n d r e q u i r e m e n t s . I n t h i s t a l k , w e d i s c u s s t h e o p -

p o r t u n i t i e s i n d i e r e n t i a t i n g c h e c k p o i n t d a t a f r o m r e s u l t d a t a , f o r m o r e e c i e n t

p a r a l l e l I / O a n d o v e r a l l e x e c u t i o n .

K e y w o r d s : C h e c k p o i n t i n g , p a r a l l e l I / O

C h a l l e n g e s i n F a u l t T o l e r a n c e f o r H i g h - P e r f o r m a n c e

C o m p u t i n g

F r a n k M u e l l e r ( N o r t h C a r o l i n a S t a t e U n i v e r s i t y , U S )

L a r g e - s c a l e p a r a l l e l c o m p u t i n g i s r e l y i n g i n c r e a s i n g l y o n c l u s t e r s w i t h ( t e n s o f )

t h o u s a n d s o f p r o c e s s o r s .


12/15



A t s u c h l a r g e c o u n t s o f c o m p u t e n o d e s , f a u l t s a r e b e c o m i n g c o m m o n p l a c e .

C u r r e n t t e c h n i q u e s t o t o l e r a t e f a u l t s f o c u s o n r e a c t i v e s c h e m e s f o r r e c o v e r y a n d

g e n e r a l l y r e l y o n a s i m p l e c h e c k p o i n t / r e s t a r t m e c h a n i s m . Y e t , t h e y h a v e a n u m -

b e r o f s h o r t c o m i n g s . ( 1 ) T h e y d o n o t s c a l e a n d r e q u i r e c o m p l e t e j o b r e s t a r t s .

( 2 ) P r o j e c t i o n s i n d i c a t e t h a t t h e m e a n - t i m e - b e t w e e n - f a i l u r e s i s a p p r o a c h i n g t h e

o v e r h e a d r e q u i r e d f o r c h e c k p o i n t i n g . ( 3 ) E x i s t i n g a p p r o a c h e s a r e a p p l i c a t i o n -

c e n t r i c , w h i c h i n c r e a s e s t h e b u r d e n o n a p p l i c a t i o n p r o g r a m m e r s a n d r e d u c e s

p o r t a b i l i t y .

T o a d d r e s s t h e s e p r o b l e m s , w e d i s c u s s a n u m b e r o f t e c h n i q u e s a n d t h e l e v e l o f

m a t u r i t y ( o r l a c k t h e r e o f ) : ( a ) S c a l a b l e n e t w o r k o v e r l a y s t r a c k n o d e f a i l u r e s a n d

r e c o v e r i e s l i f t i n g p a r t o f t h e b u r d e n f r o m t h e p r o g r a m m e r s . ( b ) M e c h a n i s m s f o r

o n - t h e - y r e c o v e r y w i t h o u t a n e e d t o r e s t a r t c o m p u t e j o b s c o n s e r v e l a r g e - s c a l e

r e s o u r c e s m u c h i n c o n t r a s t t o t o d a y ' s t e c h n i q u e s . ( c ) A n a p p r o a c h f o r p r o a c t i v e

f a u l t t o l e r a n c e t h a t c o m p l e m e n t s r e a c t i v e s c h e m e s f u r t h e r r e d u c e s r e s o u r c e r e -

q u i r e m e n t s . ( d ) M i n i m a l A P I s u p p o r t f o r f a u l t t o l e r a n c e i n c r e a s e s p o r t a b i l i t y

w i t h o u t r e q u i r i n g v e n d o r s t o i m p l e m e n t e x t e n s i v e f u n c t i o n a l i t y .

K e y w o r d s : F a u l t t o l e r a n c e , h i g h p e r f o r m a n c e c o m p u t i n g

S u p p o r t i n g F a u l t - T o l e r a n c e i n M o d e r n H i g h - E n d

C o m p u t i n g S y s t e m s w i t h I n n i B a n d

D h a b a l e s w a r K . P a n d a ( O h i o S t a t e U n i v e r s i t y , U S )

I n n i B a n d a r c h i t e c t u r e i s e m e r g i n g a s a m o d e r n i n t e r c o n n e c t f o r d e s i g n i n g l a r g e -

s c a l e H i g h - E n d C o m p u t i n g ( H E C ) s y s t e m s . T h i s a r c h i t e c t u r e p r o v i d e s n o v e l

m e c h a n i s m s f o r p e r f o r m a n c e , n e t w o r k f a u l t - t o l e r a n c e a n d Q u a l i t y o f S e r v i c e

( Q o S ) . E x a m p l e s o f s o m e o f t h e s e m e c h a n i s m s i n c l u d e : R e m o t e D M A ( R D M A ) ,

A u t o m a t i c P a t h M i g r a t i o n ( A P M ) , S e r v i c e L e v e l s ( S L ) a n d V i r t u a l L a n e s ( V L ) .

W e w i l l p r e s e n t n o v e l s c h e m e s u s i n g t h e s e m e c h a n i s m s t o p r o v i d e v a r i o u s l e v e l s

o f f a u l t t o l e r a n c e a t t h e M P I l a y e r o n I n n i B a n d c l u s t e r s . O u r e x p e r i e n c e s i n

d e s i g n i n g m u l t i p l e l e v e l s o f f a u l t - t o l e r a n c e ( s u c h a s n e t w o r k - l e v e l f a u l t - t o l e r a n c e

u s i n g A P M , p r o c e s s - l e v e l f a u l t - t o l e r a n c e u s i n g C h e c k p o i n t - R e s t a r t , I / O a g g r e -

g a t i o n t o r e d u c e c h e c k p o i n t - r e s t a r t o v e r h e a d , e c i e n t p r o c e s s m i g r a t i o n u s i n g

R D M A a n d v i r t u a l i z a t i o n , e t c . ) i n M V A P I C H 2 l i b r a r y w i l l b e p r e s e n t e d . C h a l -

l e n g e s i n u s i n g t h e s e s c h e m e s o n l a r g e - s c a l e H E C s y s t e m s w i l l b e d i s c u s s e d .

K e y w o r d s : C l u s t e r s , I n n i B a n d , F a u l t - T o l e r a n c e , C h e c k p o i n t - R e s t a r t , M P I

a n d Q o S

J o i n t w o r k o f : P a n d a , D h a b a l e s w a r K . ( D K )


13/15


I m p l e m e n t i n g F a u l t T o l e r a n t S e r v i c e s o n S t r u c t u r e d

O v e r l a y N e t w o r k s - P a r t 1 o f t h e M e s s y D e t a i l s

A l e x a n d e r R e i n e f e l d ( K . Z u s e Z e n t r u m B e r l i n , D E )

S t r u c t u r e d o v e r l a y n e t w o r k s p r o v i d e s c a l a b i l i t y a n d a v a i l a b i l i t y w i t h u n r e l i a b l e

c o m p o n e n t s . T h e y a r e d e s i g n e d f o r o p e r a t i o n i n h o s t i l e e n v i r o n m e n t s w h e r e

n o d e s m a y c r a s h , l e a v e o r j o i n a t a n y t i m e .

I n t h e r s t p a r t o f o u r t a l k w e i n v e s t i g a t e a l l t h e n i t t y g r i t t y d e t a i l s t h a t

a r e n e e d e d f o r i m p l e m e n t i n g a s t a b l e d a t a s t r u c t u r e i n t h e f a c e o f u n r e l i a b l e

c o m p o n e n t s . W e d i s c u s s h o w c o n s i s t e n t d a t a a c c e s s c a n b e g u a r a n t e e d w i t h

r e p l i c a t e d d a t a s t o r e s o n I n t e r n e t - c o n n e c t e d s e r v e r s .

I n t h e s e c o n d p a r t o f t h e t a l k w e d i s c u s s t h e a d v a n t a g e s o f u s i n g f u n c t i o n a l

p r o g r a m m i n g l a n g u a g e s l i k e E r l a n g i n t h e d e s i g n a n d i m p l e m e n t a t i o n o f f a u l t

t o l e r a n t , l a r g e - s c a l e d i s t r i b u t e d a p p l i c a t i o n s .

K e y w o r d s : S t r u c t u r e d o v e r l a y s , P a x o s , t r a n s a c t i o n s , E r l a n g

I m p l e m e n t i n g F a u l t T o l e r a n t S e r v i c e s o n S t r u c t u r e d

O v e r l a y N e t w o r k s - P a r t 2 o f t h e M e s s y D e t a i l s

F l o r i a n S c h i n t k e ( K . Z u s e Z e n t r u m B e r l i n , D E )

S t r u c t u r e d o v e r l a y n e t w o r k s p r o v i d e s c a l a b i l i t y a n d a v a i l a b i l i t y w i t h u n r e l i a b l e

c o m p o n e n t s . T h e y a r e d e s i g n e d f o r o p e r a t i o n i n h o s t i l e e n v i r o n m e n t s w h e r e

n o d e s m a y c r a s h , l e a v e o r j o i n a t a n y t i m e .

I n t h e r s t p a r t o f o u r t a l k w e i n v e s t i g a t e a l l t h e n i t t y g r i t t y d e t a i l s t h a t

a r e n e e d e d f o r i m p l e m e n t i n g a s t a b l e d a t a s t r u c t u r e i n t h e f a c e o f u n r e l i a b l e

c o m p o n e n t s . W e d i s c u s s h o w c o n s i s t e n t d a t a a c c e s s c a n b e g u a r a n t e e d w i t h

r e p l i c a t e d d a t a s t o r e s o n I n t e r n e t - c o n n e c t e d s e r v e r s .

I n t h e s e c o n d p a r t o f t h e t a l k w e d i s c u s s t h e a d v a n t a g e s o f u s i n g f u n c t i o n a l

p r o g r a m m i n g l a n g u a g e s l i k e E r l a n g i n t h e d e s i g n a n d i m p l e m e n t a t i o n o f f a u l t

t o l e r a n t , l a r g e - s c a l e d i s t r i b u t e d a p p l i c a t i o n s .

K e y w o r d s : S t r u c t u r e d o v e r l a y s , P a x o s , t r a n s a c t i o n s , E r l a n g

W h o c a r e s a b o u t t h e f u t u r e ( j o b s ) ?

J o e r g S c h n e i d e r ( T U B e r l i n , D E )

A l o t o f f a i l u r e h a n d l i n g t e c h n i q u e s h a v e b e e n d e v e l o p e d t o s a v e r u n n i n g j o b s .

H o w e v e r , a r e s o u r c e f a i l u r e c a n l a s t u n p r e d i c t a b l y l o n g . T h e r e f o r e , s u b m i t t e d

b u t n o t y e t s t a r t e d j o b s a r e a e c t e d b y t h e r e s o u r c e o u t a g e a s w e l l . I n c a s e o f

a d v a n c e r e s e r v a t i o n s w i t h a g u a r a n t e e d e n d t i m e , a s i m p l e p o s t p o n i n g a f t e r t h e

d o w n t i m e i s n o t s u c i e n t .


14/15



I n t h i s t a l k a p p r o a c h e s t o r e m a p t h e p o s s i b l y a e c t e d j o b s t o o t h e r r e s o u r c e s

a r e d i s c u s s e d t o g e t h e r w i t h t h e e e c t s t o t h e G r i d a n d t h e n o n - f a i l e d r e s o u r c e s .

J o i n t w o r k o f : S c h n e i d e r , J r g ; L i n n e r t , B a r r y

F a u l t - t o l e r a n t D a t a S h a r i n g i n G r i d E n v i r o n m e n t s

M i c h a e l S c h o e t t n e r ( U n i v e r s i t t D s s e l d o r f , D E )

D a t a r e p l i c a t i o n i s o n e o f t h e b a s i c b u i l d i n g b l o c k s f o r i m p l e m e n t i n g f a u l t t o l -

e r a n c e . F u r t h e r m o r e , r e p l i c a t i o n a l s o i m p r o v e s a p p l i c a t i o n p e r f o r m a n c e b y p r o -

v i d i n g l o c a l d a t a a c c e s s . T h e s y n e r g y o f f a u l t t o l e r a n c e a n d l o c a l i t y i s d r i v i n g

t h e d e s i g n a n d i m p l e m e n t a t i o n o f o u r g r i d d a t a s h a r i n g s e r v i c e c o m p l e m e n t i n g

t r a d i t i o n a l m e s s a g e p a s s i n g b y t r a n s p a r e n t d a t a a c c e s s , a u t o m a t i c r e p l i c a a n d

c o n s i s t e n c y m a n a g e m e n t . F o r s c a l a b i l i t y a n d f a u l t t o l e r a n c e r e a s o n s o u r c o m m u -

n i c a t i o n i n f r a s t r u c t u r e i s b u i l t o n t o p o f s t r u c t u r e d o v e r l a y n e t w o r k t e c h n i q u e s .

F o r s e v e r e e r r o r s w e r e l y o n a g r i d c h e c k p o i n t i n g s e r v i c e ( G C S ) t h a t i s a b l e t o

s a v e a n d r e s t o r e d i s t r i b u t e d a n d p a r a l l e l a p p l i c a t i o n s i n h e t e r o g e n e o u s e n v i r o n -

m e n t s . T h e G C S s e r v i c e i s i n t e g r a t i n g e x i s t i n g k e r n e l c h e c k p o i n t e r s o l u t i o n s . A

c o m m o n k e r n e l c h e c k p o i n t e r A P I a l l o w s t h e G C S t o u s e d i e r e n t c h e c k p o i n t e r s

i n a u n i f o r m w a y . O u r a r c h i t e c t u r e i s o p e n t o s u p p o r t d i e r e n t c h e c k p o i n t i n g

s t r a t e g i e s t h a t c a n b e a d a p t e d a c c o r d i n g t o e v o l v i n g f a i l u r e s i t u a t i o n s a n d c h a n g -

i n g a p p l i c a t i o n r e q u i r e m e n t s .

K e y w o r d s : F a u l t t o l e r a n c e , d a t a s h a r i n g , d a t a c o n s i s t e n c y , g r i d c h e c k p o i n t i n g

J o i n t w o r k o f : S c h t t n e r , M i c h a e l ; M o r i n , C h r i s t i n e

F a u l t - t o l e r a n c e - R A S - R e s i l i e n c y : " y o u g u y s s t a r t w r i t i n g

c o d e a n d I ' l l g o s e e w h a t t h e y w a n t . . . " '

S t e p h e n L . S c o t t ( O a k R i d g e N a t i o n a l L a b . , U S )

S o m e o f u s h a v e b e e n e v a n g e l i z i n g t h e c a u s e f o r f a u l t - t o l e r a n c e , R A S ( R e l i a b i l i t y ,

A v a i l a b i l i t y , S e r v i c e a b i l i t y ) , a n d R e s i l i e n c y f o r a q u i t e a n u m b e r o f y e a r s . L a t e l y

p e o p l e h a v e n o t i c e d ! T h a t i s t h e g o o d n e w s - t h e b a d n e w s i s t h a t t h e h i g h p e r -

f o r m a n c e c o m p u t i n g c o m m u n i t y d o e s n o t h a v e a n y s e m b l a n c e o f a n a g r e e m e n t

r e g a r d i n g w h a t t h e y w a n t a n d h o w t o a c h i e v e i t . P e r h a p s w e n e e d t o b e g i n w i t h

s o m e t h i n g a s " s i m p l e " a s d e n i n g F T / R A S / R e s i l i e n c y ? ( L e t ' s h o p e n o t ! ) H o w

d o e s t h e v i e w d i e r f o r f o l k s i n t h e a p p l i c a t i o n , s y s t e m s , a n d h a r d w a r e c o m m u -

n i t i e s ? W h a t c a n w e d o t o a c h i e v e c o m m u n i t y c o n s e n s u s s o t h a t o u r r e s i l i e n c e

e o r t s c a n m o v e f o r w a r d , r e c e i v e a c c e p t e d b y t h e o t h e r s , a n d u l t i m a t e l y h e l p t o

a c h i e v e o u r h i g h p e r f o r m a n c e c o m p u t i n g g o a l s ?


15/15


H a n d l i n g M a p R e d u c e F a i l u r e s i n D y n a m i c D i s t r i b u t e d

E n v i r o n m e n t s

P a o l o T r u n o ( U n i v e r s i t y o f C a l a b r i a , I T )

M a p R e d u c e i s a p r o g r a m m i n g m o d e l u s e d f o r p r o c e s s i n g l a r g e d a t a s e t s i n a

h i g h l y p a r a l l e l w a y . M a p R e d u c e i m p l e m e n t a t i o n s a r e b a s e d o n a m a s t e r - s l a v e

m o d e l . T h e f a i l u r e o f a s l a v e i s m a n a g e d b y r e - e x e c u t i n g i t s t a s k o n a n o t h e r

s l a v e , w h i l e m a s t e r f a i l u r e s a r e n o t e e c t i v e l y m a n a g e d b y c u r r e n t M a p R e d u c e

i m p l e m e n t a t i o n s a s d e s i g n e r s c o n s i d e r f a i l u r e s u n l i k e l y i n r e l i a b l e e n v i r o n m e n t s ,

l i k e c l u s t e r s a n d C l o u d s y s t e m s . O n t h e c o n t r a r y , n o d e f a i l u r e s ( i n c l u d i n g m a s -

t e r f a i l u r e s ) a r e l i k e l y t o h a p p e n i n d y n a m i c e n v i r o n m e n t s , l i k e G r i d s a n d P 2 P

s y s t e m s , w h e r e n o d e s j o i n a n d l e a v e t h e n e t w o r k a t a n u n p r e d i c t a b l e r a t e . T h e r e -

f o r e , p r o v i d i n g e e c t i v e m e c h a n i s m s t o m a n a g e m a s t e r f a i l u r e s i s f u n d a m e n t a l

t o e x p l o i t t h e M a p R e d u c e m o d e l i n t h e i m p l e m e n t a t i o n o f d a t a - i n t e n s i v e a p p l i -

c a t i o n s i n t h o s e d y n a m i c e n v i r o n m e n t s w h e r e c u r r e n t M a p R e d u c e i m p l e m e n t a -

t i o n s c o u l d b e u n r e l i a b l e . T h e g o a l o f o u r w o r k i s i n v e s t i g a t i n g h o w t o i m p r o v e

t h e m a s t e r - s l a v e a r c h i t e c t u r e o f c u r r e n t M a p R e d u c e i m p l e m e n t a t i o n s t o m a k e

i t m o r e s u i t a b l e f o r G r i d - l i k e a n d P 2 P d y n a m i c s c e n a r i o s . T h e e x t e n d e d m o d e l

w e i n t r o d u c e h e r e e x p l o i t s a P 2 P m o d e l t o d y n a m i c a l l y a s s i g n t h e m a s t e r r o l e ,

m a n a g i n g i n t e r m i t t e n t n o d e s p a r t i c i p a t i o n a n d m a s t e r f a i l u r e s i n a d e c e n t r a l i z e d

b u t s i m p l e w a y

K e y w o r d s : M a p R e d u c e , P 2 P

J o i n t w o r k o f : T a l i a , D o m e n i c o ; T r u n o , P a o l o

A P r o a c t i v e R e s i l i e n c y A p p r o a c h f o r L a r g e - S c a l e H P C

S y s t e m s

G e o r o y V a l l e e ( O a k R i d g e N a t i o n a l L a b . , U S )

R e a c t i v e f a u l t t o l e r a n c e h a s b e e n t h e p r i v i l e g e d s o l u t i o n f o r s y s t e m r e s i l i e n c e

s i n c e m a n y y e a r s . H o w e v e r , t h i s a p p r o a c h n o w a d a y s s h o w i t s l i m i t s , m a i n l y b e -

c a u s e o f I / O i s s u e s . I n t h i s p r e s e n t a t i o n , I p r e s e n t t e c h n i q u e s a n d p o l i c i e s f o r

p r o a c t i v e r e s i l i e n c y w h i c h a i m s a t p r e d i c t i n g f a i l u r e i n o r d e r t o m o v e a p p l i c a t i o n s

a w a y f r o m n o d e s t h a t a r e a b o u t t o f a i l .

I w i l l p r e s e n t a d v a n t a g e s a n d l i m i t a t i o n s o f s u c h a s o l u t i o n , f o c u s i n g o n t h e

s y s t e m a s p e c t s .

K e y w o r d s : P r o a c t i v e r e s i l i e n c y , s y s t e m

09191 abstracts collection.2040

Documents