genetic algorithms for soft decision decoding of linear block code
TRANSCRIPT
-
8/2/2019 Genetic Algorithms for Soft Decision Decoding of Linear Block Code
1/25
G e n e t i c A l g o r i t h m s f o r S o f t D e c i s i o n
D e c o d i n g o f L i n e a r B l o c k C o d e s
H a r p a l M a i n i
K i s h a n M e h r o t r a , C h i l u k u r i M o h a n , S a n j a y R a n k a
S c h o o l o f C o m p u t e r a n d I n f o r m a t i o n S c i e n c e
4 - 1 1 6 C e n t e r f o r S c i e n c e a n d T e c h n o l o g y
S y r a c u s e U n i v e r s i t y
S y r a c u s e , N Y 1 3 2 4 4 - 4 1 0 0
e m a i l : h s m a i n i / k i s h a n / m o h a n / r a n k a @ t o p . c i s . s y r . e d u
t e l : ( 3 1 5 ) 4 4 3 - 2 3 6 8
J u l y 8 , 1 9 9 4
A b s t r a c t
S o f t - d e c i s i o n d e c o d i n g i s a n N P - h a r d p r o b l e m o f g r e a t i n t e r e s t t o d e v e l o p e r s o f c o m -
m u n i c a t i o n s y s t e m s . W e s h o w t h a t t h i s p r o b l e m i s e q u i v a l e n t t o t h e p r o b l e m o f o p t i m i z i n g
W a l s h p o l y n o m i a l s . W e p r e s e n t g e n e t i c a l g o r i t h m s f o r s o f t - d e c i s i o n d e c o d i n g o f b i n a r y
l i n e a r b l o c k c o d e s a n d c o m p a r e t h e p e r f o r m a n c e w i t h v a r i o u s o t h e r d e c o d i n g a l g o r i t h m s
i n c l u d i n g t h e c u r r e n t l y d e v e l o p e d A * a l g o r i t h m . S i m u l a t i o n r e s u l t s s h o w t h a t o u r a l g o -
r i t h m s a c h i e v e b i t - e r r o r - p r o b a b i l i t i e s a s l o w a s 0 0 0 1 8 3 f o r a 1 0 4 ; 5 2 ] c o d e w i t h a l o w
s i g n a l - t o - n o i s e r a t i o o f 2 5 d B , e x p l o r i n g o n l y 2 2 ; 4 0 0 c o d e w o r d s , w h e r e a s t h e s e a r c h s p a c e
c o n t a i n s 4 5 1 0
1 5
c o d e w o r d s . W e d e n e a n e w c r o s s o v e r o p e r a t o r t h a t e x p l o i t s d o m a i n -
s p e c i c i n f o r m a t i o n a n d c o m p a r e i t w i t h u n i f o r m a n d t w o p o i n t c r o s s o v e r .
K e y w o r d s : g e n e t i c a l g o r i t h m s , s o f t - d e c i s i o n d e c o d i n g , u n i f o r m c r o s s o v e r .
-
8/2/2019 Genetic Algorithms for Soft Decision Decoding of Linear Block Code
2/25
1 I n t r o d u c t i o n
C o d e s a r e u s e d f o r t h e r e l i a b l e t r a n s m i s s i o n o f d a t a o v e r c o m m u n i c a t i o n c h a n n e l s s u s c e p t i b l e
t o n o i s e . C o d e s m a y b e c l a s s i e d a s e i t h e r b l o c k c o d e s o r t r e e c o d e s . A n e n c o d e r f o r a b l o c k
c o d e a c c e p t s a s i n p u t a k s y m b o l m e s s a g e s e q u e n c e ( u s u a l l y b i n a r y s e q u e n c e ) a n d m a p s i t t o
a n n ( > k ) s y m b o l s e q u e n c e . E a c h n - s y m b o l s e q u e n c e i s c o m p l e t e l y d e t e r m i n e d b y a s p e c i c
k - s y m b o l m e s s a g e . B l o c k c o d e s m a y f u r t h e r b e c l a s s i e d a s l i n e a r o r n o n l i n e a r . A l i n e a r c o d e ,
i s a v e c t o r s p a c e o v e r a n i t e e l d . W e r e s t r i c t o u r a t t e n t i o n t o c o d e s o v e r t h e t w o - e l e m e n t
e l d , Z
2
. F i g u r e 1 d e s c r i b e s a t y p i c a l c o m m u n i c a t i o n s y s t e m . A s a r e s u l t o f n o i s e , t h e r e c e i v e d
v e c t o r c o m p o n e n t s a r e r e a l n u m b e r s . O f t h e n c o d e w o r d c o o r d i n a t e s , e x a c t l y k a r e l i n e a r l y
i n d e p e n d e n t . L e t i b e t h e i n f o r m a t i o n v e c t o r a n d G = ( g
j m
) t h e g e n e r a t o r m a t r i x , a l i s t i n g o f
t h e b a s i s v e c t o r s o f a c o d e C ; t h e n t h e e n c o d i n g o p e r a t i o n y i e l d s i G = c , a n d , c o n s e q u e n t l y ,
c
j
=
P
k
m = 1
i
m
g
j m
r e p r e s e n t s t h e j - t h c o m p o n e n t o f t h e c o d e w o r d , c . L e t r b e a r e c e i v e d
v e c t o r . \ H a r d d e c i s i o n " d e c o d i n g i n v o l v e s q u a n t i z i n g e a c h c o m p o n e n t o f t h e r e c e i v e d v e c t o r
i n d e p e n d e n t l y t o t h e n e a r e s t v a l u e 2 f 0 ; 1 g a n d t h e n m o v i n g t o t h e c o d e - v e c t o r n e a r e s t t o t h e
r e s u l t i n g s e q u e n c e . \ S o f t - d e c i s i o n " d e c o d i n g a l g o r i t h m s u t i l i z e r e c e i v e d v e c t o r c o m p o n e n t s , n o t
j u s t t h e i r q u a n t i z e d e s t i m a t e s ( T a i p a l e & P u r s l e y , 1 9 9 1 ) . A m a x i m u m - l i k e l i h o o d d e c o d e r n d s
M e s s a g e
S o u r c e
E n c o d e r M o d u l a t o r
C h a n n e l D e m o d u l a t o r
a n d D e c o d e r
I n f o r m a t i o n
V e c t o r
C o d e V e c t o r
T r a n s m i t t
V e c t o r
R e c e i v e d
V e c t o r
r
c
( )
(
i
E s t i m a t e d
C o d e V e c t o r
a n d I n f o r m a t i o n
V e c t o r
k b i t s
n b i t s )
N o i s e N ( 0 ;
2
)
c
0
i
0
F i g u r e 1 : A T y p i c a l C o m m u n i c a t i o n S y s t e m
a c o d e w o r d c
0
t h a t m a x i m i z e s t h e c o n d i t i o n a l p r o b a b i l i t y o f r e c e i v i n g r , i . e .
P ( c r ) = m a x
c
P ( c r ) = m a x
c 2 C
P ( r c ) P ( c ) = P ( r )
T h e a b o v e e q u a t i o n h o l d s s i n c e w e a s s u m e t h a t a l l c o d e w o r d s a r e e q u a l l y l i k e l y t o b e t r a n s m i t -
t e d . A m a x i m u m - l i k e l i h o o d d e c o d e r i s o p t i m a l i n t h i s s e n s e . I f t r a n s m i t t e d s i g n a l s a r e b i n a r y
a n t i p o d a l o v e r a d i s c r e t e m e m o r y l e s s c h a n n e l s u s c e p t i b l e t o a d d i t i v e w h i t e G a u s s i a n n o i s e , a n d
t h e n o i s e a e c t s e a c h s y m b o l i n d e p e n d e n t l y , t h e n P ( r j c ) i s m a x i m i z e d w h e n t h e s q u a r e d E u -
c l i d e a n d i s t a n c e b e t w e e n v e c t o r r a n d c ,
P
n
j = 1
( r
j
? c
0
j
)
2
, i s m i n i m i z e d ( C l a r k & C a i n , 1 9 8 8 ;
F a r r e l l , R u d o l p h & H a r t m a n n , 1 9 8 3 ) . T h u s m a x i m u m - l i k e l i h o o d d e c o d i n g r e d u c e s t o n e a r e s t -
n e i g h b o r d e c o d i n g , w i t h t h e E u c l i d e a n m e t r i c . M o r e f o r m a l l y t h e s o f t - d e c i s i o n d e c o d i n g p r o b l e m
1
-
8/2/2019 Genetic Algorithms for Soft Decision Decoding of Linear Block Code
3/25
r e d u c e s t o :
G i v e n r e c e i v e d r e a l v e c t o r r = ( r
1
; : : : ; r
n
) , n d a c o d e w o r d c 2 C t h a t m i n i m i z e s
P
n
j = 1
( r
j
? c
j
)
2
M o s t r e s e a r c h i n d e c o d i n g a l g o r i t h m s h a s b e e n f o c u s e d o n h a r d - d e c i s i o n d e c o d i n g a l g o r i t h m s
b a s e d o n a l g e b r a i c t e c h n i q u e s . S o f t - d e c i s i o n d e c o d i n g h a s n o t b e e n a s e x t e n s i v e l y s t u d i e d a n d
u n t i l r e c e n t l y t h e r e w e r e n o t m a n y e c i e n t d e c o d i n g a l g o r i t h m s f o r l i n e a r b l o c k c o d e s o f l a r g e
b l o c k l e n g t h . A n e c i e n t a l g o r i t h m i s t h e r e c e n t l y d e v e l o p e d A
- b a s e d d e c o d i n g a l g o r i t h m ( H a n ,
1 9 9 3 ) . A l g o r i t h m G A D E C i s a s i g n i c a n t c o n t r i b u t i o n t o s o f t - d e c i s i o n d e c o d i n g a s s h o w n b y
c o m p a r i n g i t w i t h a n A * b a s e d a p p r o a c h t h a t i s c u r r e n t l y t h e m o s t s u c c e s s f u l a l g o r i t h m f o r s o f t
d e c i s i o n d e c o d i n g .
T h e p r o b l e m o f d e c o d i n g a n e r r o r c o r r e c t i n g c o d e i s k n o w n t o b e N P - h a r d . I t i s i n d e e d
d e s i r a b l e a n d o f t e n p r e f e r a b l e t o o b t a i n s u b o p t i m a l s o l u t i o n s t o s u c h a p r o b l e m . I n t h i s p a p e r
w e p r e s e n t a s u b o p t i m a l d e c o d i n g a l g o r i t h m f o r l i n e a r b l o c k c o d e s t h a t i s b a s e d o n n d i n g a
n e a r - g l o b a l m i n i m u m f o r t h e f u n c t i o n
P
n
j = 1
( r
j
? c
j
)
2
. I n s e c t i o n 2 , w e d e s c r i b e t h e m o t i v a t i o n
f o r c o n s i d e r i n g a g e n e t i c a l g o r i t h m - b a s e d d e c o d i n g s c h e m e . I n s e c t i o n 3 , G A D E C , o u r g e n e t i c
a l g o r i t h m f o r d e c o d i n g , i s d e s c r i b e d . I n s e c t i o n 4 , w e p r e s e n t a n d d i s c u s s s i m u l a t i o n r e s u l t s . I n
s e c t i o n 5 , w e a n a l y z e t h e a l g o r i t h m . I n S e c t i o n 6 , w e g i v e a c o m p a r i s o n w i t h o t h e r d e c o d i n g
a l g o r i t h m s .
1 . 1 A n E x a m p l e
S i n c e c o d e v e c t o r s a r e t r a n s m i t t e d o v e r t h e a n a l o g c o m m u n i c a t i o n c h a n n e l , t h e a c t u a l t r a n s m i t -
t e d v e c t o r i s t y p i c a l l y a v e c t o r o f t h e f o r m ( a
i
; ? a
i
; ? a
i
; a
i
; ? a
i
; : : : ) , w h e r e a
i
i s t h e a m p l i t u d e
o f t h e t r a n s m i t t e d s i g n a l , w h i c h i s p r o p o r t i o n a l t o t h e s q u a r e r o o t o f t h e s i g n a l e n e r g y . F o r o u r
p u r p o s e s , w e a s s u m e a
i
= 1 , a n d t h a t t h e m o d u l a t o r m a p s e a c h 0 b i t ( c o m p o n e n t ) o f t h e c o d e
v e c t o r t o + 1 , a n d e a c h 1 b i t o f t h e c o d e v e c t o r t o - 1 . T h i s i s a o n e - t o - o n e , o n t o m a p p i n g , a n d
t h e t r a n s m i t t e d v e c t o r i s h e n c e a v e c t o r c o n s i s t i n g o f p o s i t i v e a n d n e g a t i v e p u l s e s .
S o m e c h a n n e l s a r e n o i s i e r t h a n o t h e r s , a n d t h e a m o u n t o f c o r r u p t i o n o f t h e t r a n s m i t t e d v e c t o r
b y t h e c h a n n e l d e p e n d s o n t h e s i g n a l - t o - n o i s e r a t i o . U n b i a s e d , n o r m a l e r r o r , n o i s e m o d e l s a r e
o f t e n a s s u m e d ( a n d o b s e r v e d ) . C o m p o n e n t s o f t h e a c t u a l n - b i t r e c e i v e d v e c t o r a r e r e a l n u m b e r s ,
w h o s e v a l u e s m a y d i e r f r o m f 1 , - 1 g . T h e t a s k o f t h e d e c o d e r i s t o e x t r a c t t h e t r a n s m i t t e d v e c t o r
f r o m t h e r e c e i v e d v e c t o r .
L e t u s c o n s i d e r k = 2 , n = 4 , a n d a n e n c o d e r r e p r e s e n t e d b y t h e m a t r i x
G =
0
@
1 0 1 0
0 1 0 1
1
A
T h e s e t o f a l l p o s s i b l e m e s s a g e s ( i n f o r m a t i o n v e c t o r s ) i s f 0 0 ; 0 1 ; 1 0 ; 1 1 g , a n d t h e c o r r e -
s p o n d i n g s e t o f c o d e v e c t o r s i s f 0 0 0 0 ; 0 1 0 1 ; 1 0 1 0 ; 1 1 1 1 g . T h e m o d u l a t o r t r a n s f o r m s t h e s e i n t o
f ( 1 ; 1 ; 1 ; 1 ) ; ( ? 1 ; 1 ; ? 1 ; 1 ) ; ( 1 ; ? 1 ; 1 ; ? 1 ) ; ( ? 1 ; ? 1 ; ? 1 ; ? 1 ) g . A t r a n s m i t e d v e c t o r s u c h a s ( ? 1 ; 1 ; ? 1 ; 1 )
2
-
8/2/2019 Genetic Algorithms for Soft Decision Decoding of Linear Block Code
4/25
m a y b e c o r r u p t e d b y t h e c o m m u n i c a t i o n c h a n n e l i n t o t h e r e c e i v e d v e c t o r ( ? 0 7 ; 1 3 ; 0 2 ; 0 3 )
T h e d e c o d e r t h e n n e e d s t o r e c o v e r t h e t r a n s m i t t e d v e c t o r f r o m t h e r e c e i v e d v e c t o r .
O n e o b v i o u s m e t h o d i s t o m a p e v e r y n e g a t i v e r e c e i v e d v e c t o r c o m p o n e n t t o ? 1 , a n d e v e r y
n o n - n e g a t i v e c o m p o n e n t t o 1 , e x a m i n i n g o n l y t h e s i g n o f t h e r e c e i v e d v e c t o r c o m p o n e n t s , a n d
i g n o r i n g t h e i r m a g n i t u d e s . T h i s i s c a l l e d \ q u a n t i z a t i o n " . I n t h e a b o v e e x a m p l e , t h e r e s u l t
o f t h i s m a p p i n g i s ( ? 1 ; 1 ; 1 ; 1 ) w h i c h i s m a p p e d b y t h e d e m o d u l a t o r t o t h e b i t - s t r i n g 1 0 0 0 .
U n f o r t u n a t e l y , 1 0 0 0 i s n o t a c o d e v e c t o r , a n d i s e q u a l l y d i s t a n t f r o m t h e c o d e v e c t o r s 0 0 0 0 a n d
1 0 1 0 .
Q u a n t i z a t i o n r e s u l t s i n t h e l o s s o f i n f o r m a t i o n w h i c h c a n b e g l e a n e d f r o m t h e m a g n i t u d e s
o f r e c e i v e d v e c t o r c o m p o n e n t s . F o r i n s t a n c e , w e c a n a r g u e t h a t a r e c e i v e d v e c t o r c o m p o n e n t o f
? 0 7 i s c l o s e r t h a n ? 0 1 t o ? 1 , h e n c e w e s h o u l d h a v e g r e a t e r c o n d e n c e i n d e c o d i n g t h e f o r m e r
t o ? 1 . T h e m a g n i t u d e o f a c o m p o n e n t i s t h u s c o n s i d e r e d a m e a s u r e o f t h e r e l i a b i l i t y o f i t s
q u a n t i z a t i o n t o i t s s i g n . S o f t - d e c i s i o n d e c o d i n g a t t e m p t s t o t a k e t h e s e m a g n i t u d e s i n t o a c c o u n t .
I f t h e c o m m u n i c a t i o n c h a n n e l w a s m a l i c i o u s e n o u g h t o i n v e r t t h e s i g n o f e v e r y c o m p o n e n t
( e . g . , c o r r u p t i n g ( ? 1 ; 1 ; ? 1 ; 1 ) t o ( 0 ; 5 ; ? 0 5 ; 0 ; 5 ; ? 0 5 ) , t h e n t h e r e i s n o h o p e o f r e c o v e r i n g t h e
o r i g i n a l t r a n s m i t t e d v e c t o r . I n t h e a b s e n c e o f k n o w i n g w h a t t h e t r a n s m i t t e d v e c t o r w a s , t h e
b e s t t h a t c a n b e a c h i e v e d b y t h e d e c o d e r i s t o n d a v e c t o r i n f 1 ; ? 1 g
n
t h a t c o r r e s p o n d s t o
a c o d e v e c t o r ( i n f 0 ; 1 g
n
) t h a t i s a t t h e l e a s t p o s s i b l e E u c l i d e a n d i s t a n c e f r o m t h e r e c e i v e d
v e c t o r . M i n i m i z i n g d i s t a n c e t o t h e r e c e i v e d v e c t o r m a x i m i z e s t h e l i k e l i h o o d o f r e c o v e r i n g t h e
t r a n s m i t t e d v e c t o r . S o f t - d e c i s i o n d e c o d i n g i s t h u s a n o p t i m i z a t i o n t a s k .
F o r t h e e x a m p l e m e n t i o n e d e a r l i e r , w e c a n d e t e r m i n e w h i c h o f t h e v e c t o r s f ( 1 ; 1 ; 1 ; 1 ) ;
( 1 ; ? 1 ; 1 ; ? 1 ) ; ( ? 1 ; 1 ; ? 1 ; 1 ) ; ( ? 1 ; ? 1 ; ? 1 ; ? 1 ) g i s c l o s e s t t o t h e r e c e i v e d v e c t o r ( ? 0 9 ; 1 3 ; 0 2 ; 0 3 ) ,
b y c o m p u t i n g a l l f o u r d i s t a n c e s . T h e r e s u l t , ( ? 1 ; 1 ; ? 1 ; 1 ) , i s n a l l y m a p p e d b a c k t o t h e c o d e
v e c t o r 1 0 1 0 a n d t h e n c e t o t h e i n f o r m a t i o n v e c t o r 1 0 .
F o r l a r g e c o d e s , h o w e v e r , t h i s e x h a u s t i v e p r o c e d u r e i s i m p r a c t i c a l s i n c e t h e r e a r e 2
k
c o d e -
w o r d s , a n d k c a n b e l a r g e . A n e c i e n t s e a r c h p r o c e d u r e i s n e e d e d t o n d t h e c l o s e s t p o s s i b l e
t r a n s m i t t e d v e c t o r . W e h a v e a c c o m p l i s h e d t h i s t a s k u s i n g a g e n e t i c a l g o r i t h m f o r k = 5 2 , s o
f a r , r e q u i r i n g a n o r d e r o f m a g n i t u d e l e s s s t o r a g e t h a n t h e c u r r e n t b e s t - k n o w n a l g o r i t h m f o r t h i s
t a s k ( H a n , 1 9 9 3 ) .
2 W a l s h P o l y n o m i a l s a n d N e a r e s t N e i g h b o r D e c o d i n g
W a l s h p o l y n o m i a l s h a v e b e e n u s e d a s a b e n c h m a r k f o r g e n e t i c a l g o r i t h m p e r f o r m a n c e b y T a n e s e
( T a n e s e , 1 9 8 9 ) . T h i s s e c t i o n d e s c r i b e s h o w t h e s o f t - d e c i s i o n d e c o d i n g p r o b l e m i s e q u i v a l e n t t o
a W a l s h p o l y n o m i a l o p t i m i z a t i o n p r o b l e m . A W a l s h p o l y n o m i a l i s a f u n c t i o n o f t h e f o r m
f ( x ) =
X
j 2 B
w
j
j
( x )
3
-
8/2/2019 Genetic Algorithms for Soft Decision Decoding of Linear Block Code
5/25
w h e r e B i s t h e s e t o f l - b i t s t r i n g s a n d x 2 B . N o t e t h a t e a c h j c a n b e u n i q u e l y i d e n t i e d w i t h
a v e c t o r o f d i m e n s i o n l , j . I n t h e c o n t e x t o f s o f t - d e c i s i o n d e c o d i n g r e c e i v e d v e c t o r c o m p o n e n t s
r
j
p l a y t h e r o l e o f w
j
. E a c h r
j
i s r e a l , a n d W a l s h f u n c t i o n
j
( x ) = ( ? 1 )
j : x
= 1 i f j : x h a s
e v e n p a r i t y a n d
j
( x ) = ? 1 o t h e r w i s e ( F o r r e s t & M i t c h e l l , 1 9 9 1 ) . C o n s i d e r t h e t r a n s f o r m a t i o n :
( Z
2
; + ) ! ( Z
2
; )
g i v e n b y a ! ( ? 1 )
a
, w h e r e a 2 Z
2
. T h i s i s o m o r p h i s m m a p s t h e a d d i t i v e b i n a r y g r o u p t o t h e
m u l t i p l i c a t i v e b i n a r y g r o u p . U n d e r t h i s t r a n s f o r m a t i o n , t h e c
j
' s d e n e d e a r l i e r t r a n s f o r m t o
( ? 1 )
i g
j
= 1 i f i g
j
h a s e v e n p a r i t y a n d ? 1 o t h e r w i s e . T h i s i s t h e W a l s h f u n c t i o n c o r r e s p o n d i n g
t o t h e j - t h c o l u m n o f G
W e n e e d t o m i n i m i z e t h e f o l l o w i n g o b j e c t i v e f u n c t i o n f o r n e a r e s t - n e i g h b o r d e c o d i n g :
n
X
j = 1
( r
j
? c
j
)
2
=
n
X
j = 1
( r
j
)
2
+ n ? 2
n
X
j = 1
r
j
c
j
A s t h e r s t a n d s e c o n d t e r m s a r e c o n s t a n t s , t h i s i s e q u i v a l e n t t o t h e t a s k o f m a x i m i z i n g :
P
n
j = 1
r
j
c
j
. W i t h i a n d t h e c o l u m n s o f G p l a y i n g t h e r o l e o f x a n d j r e s p e c t i v e l y , t h i s i s s e e n t o
b e a p r o b l e m o f o p t i m i z i n g ,
P
j
r
j
c
j
, a W a l s h p o l y n o m i a l .
2 . 1 D e c o d i n g a n d T a n e s e F u n c t i o n s
T a n e s e r e p o r t e d ( T a n e s e , 1 9 8 9 ) t h a t g e n e t i c a l g o r i t h m s p e r f o r m e d r a t h e r p o o r l y o n o p t i m i z i n g a
c e r t a i n c l a s s o f W a l s h p o l y n o m i a l s , g e n e t i c a l g o r i t h m s w e r e i n f a c t o u t p e r f o r m e d b y h i l l c l i m b i n g
1
. A n i m p o r t a n t i n v e s t i g a t i o n i n t h i s r e g a r d w a s u n d e r t a k e n b y F o r r e s t a n d M i t c h e l l ( F o r r e s t &
M i t c h e l l , 1 9 9 1 ) i n w h i c h t h e y r e m a r k t h a t :
i n g e n e r a l , f o r a T a n e s e f u n c t i o n o f o r d e r n , n o s c h e m a o f o r d e r l e s s t h a n n w i l l g i v e
a n y u s e f u l i n f o r m a t i o n ; s i n c e f o r a g i v e n j , h a l f t h e i n s t a n c e s o f t h e s c h e m a w i l l h a v e
e v e n p a r i t y w i t h r e s p e c t t o j , a n d h a l f w i l l h a v e o d d p a r i t y w i t h r e s p e c t t o j . T h i s
i s b e c a u s e e a c h o f t h e W a l s h f u n c t i o n s i s o f t h e s a m e o r d e r . T h e r e f o r e ] s c h e m a o f
l o w e r o r d e r t h a n n d o n o t p r o v i d e t h e G A w i t h u s e f u l i n f o r m a t i o n .
T h u s f o r p r o b l e m s e q u i v a l e n t t o T a n e s e f u n c t i o n s , c r o s s o v e r i s n o t a u s e f u l t o o l f o r r e c o m b i n -
i n g b u i l d i n g b l o c k s . I n t h e c a s e o f s o f t - d e c i s i o n d e c o d i n g o f l i n e a r b l o c k c o d e s t h e j ' s c o r r e s p o n d
t o t h e c o l u m n s o f t h e g e n e r a t o r m a t r i x , G . R e c a l l t h a t G i s c o n s t r u c t e d b y l i s t i n g t h e b a s i s
1
T h e W a l s h p o l y n o m i a l s g e n e r a t e d a n d u s e d b y T a n e s e ( T a n e s e , 1 9 8 9 ) a r e h e r e a f t e r r e f e r r e d t o a s T a n e s e
f u n c t i o n s . T a n e s e s e l e c t e d s p e c i c W a l s h f u n c t i o n s b y r a n d o m l y c h o o s i n g 3 2 p a r t i t i o n i n d i c e s j a l l c o n t a i n i n g
t h e s a m e n u m b e r o f o n e s . T h e W a l s h c o e c i e n t w
j
f o r e a c h o f t h e 3 2 c h o s e n p a r t i t i o n i n d i c e s w a s a l s o c h o s e n a t
r a n d o m f r o m t h e i n t e r v a l ( 0 0 0 5 ] . T h e t n e s s f u n c t i o n u s e d i n h e r e x p e r i m e n t s w a s a s u m , f ( x ) =
P
j
w
j
j
( x )
o f t h e s e 3 2 t e r m s , o t h e r t e r m s w e r e e e c t i v e l y s e t t o 0 .
4
-
8/2/2019 Genetic Algorithms for Soft Decision Decoding of Linear Block Code
6/25
v e c t o r s o f C a s r o w s . T h r o u g h e l e m e n t a r y r o w o p e r a t i o n s G c a n b e r e d u c e d t o a s y s t e m a t i c
f o r m , i . e :
G =
I P
;
w h e r e I i s a k k i d e n t i t y m a t r i x a n d P i s a n n ( n ? k ) m a t r i x . C o n s i d e r , f o r e x a m p l e t h e
r o w r e d u c e d G m a t r i x o f t h e H a m m i n g 7 ; 4 ] c o d e :
G =
0
B
B
B
B
B
@
1 0 0 0 1 1 0
0 1 0 0 1 0 1
0 0 1 0 0 1 1
0 0 0 1 1 1 1
1
C
C
C
C
C
A
T h e W a l s h p o l y n o m i a l s t h a t a r i s e a s a c o n s e q u e n c e o f s o f t - d e c i s i o n d e c o d i n g c o n s i s t o f a s u m
o f a t m o s t n t e r m s , w h e r e n i s t h e b l o c k l e n g t h o f t h e c o d e . T h i s i s b e c a u s e t h e r e a r e n c o l u m n s
i n t h e G m a t r i x o f a n n ; k ] l i n e a r b l o c k c o d e . E a c h t r a n s m i s s i o n o f a c o d e w o r d g i v e s r i s e t o a
p o t e n t i a l l y d i e r e n t W a l s h p o l y n o m i a l a s t h e c o m p o n e n t s o f r a r e l i k e l y t o b e d i e r e n t . W e a l s o
n o t e t h a t n o t a l l W a l s h f u n c t i o n s a r e o f t h e s a m e o r d e r , i n f a c t t h e r s t k t e r m s a r e n e c e s s a r i l y
o f o r d e r 1 . T h i s i s b e c a u s e n o t a l l c o l u m n s o f t h e G m a t r i x h a v e t h e s a m e H a m m i n g w e i g h t ,
a n d t h e r s t k h a v e H a m m i n g w e i g h t ( o r d e r ) 1 . T h e r e f o r e t h i s p r o b l e m d o e s n o t s u e r f r o m
t h e l a c k o f l o w - o r d e r s c h e m a p r o c e s s i n g c h a r a c t e r i z i n g T a n e s e f u n c t i o n s a n d t h e r e i s r e a s o n t o
b e l i e v e t h a t g e n e t i c a l g o r i t h m s w o u l d b e a u s e f u l t o o l f o r t h e d e c o d i n g p r o b l e m . T h i s m o t i v a t e s
t h e d e v e l o p m e n t o f t h e f o l l o w i n g g e n e t i c a l g o r i t h m a s a n e a r e s t - n e i g h b o r s o f t - d e c i s i o n d e c o d i n g
a l g o r i t h m .
5
-
8/2/2019 Genetic Algorithms for Soft Decision Decoding of Linear Block Code
7/25
3 A l g o r i t h m G A D E C
T h e f o l l o w i n g i s a n o u t l i n e o f a n a l g o r i t h m t h a t p e r f o r m s a g e n e t i c s e a r c h o v e r t h e s p a c e o f
a l l c o d e w o r d s t o s e a r c h f o r t h e c o d e w o r d n e a r e s t t o r e c e i v e d v e c t o r r . F o r e x h a u s t i v e e x p e r i -
m e n t a t i o n , t h e a l g o r i t h m r s t s i m u l a t e s t h e t r a n s m i s s i o n o f c o d e w o r d s o v e r a n a d d i t i v e w h i t e
G a u s s i a n n o i s e c h a n n e l . A n i m p o r t a n t f e a t u r e o f t h i s a l g o r i t h m i s t h e u t i l i z a t i o n o f d o m a i n -
s p e c i c \ r e l i a b i l i t y " i n f o r m a t i o n f o r d i e r e n t c o m p o n e n t s o f t h e r e c e i v e d v e c t o r .
A l g o r i t h m G A D E C ( n ; k ; Y ; p
m
; p
c r o s s
; N )
A l g o r i t h m G A D E C e x p e c t s a s i n p u t t h e b l o c k l e n g t h , n , o f t h e c o d e , t h e d i m e n s i o n , k , o f t h e
l i n e a r c o d e , t h e s i g n a l t o n o i s e r a t i o , Y , i n d e c i b e l s , t h e p r o b a b i l i t y o f m u t a t i n g a s i n g l e b i t , p
m
,
t h e c r o s s o v e r p r o b a b i l i t y , p
c r o s s
, a n d t h e s i z e , N , o f t h e p o p u l a t i o n .
S T E P 1 : S i m u l a t e m e s s a g e t r a n s m i s s i o n .
R a n d o m l y g e n e r a t e k b i n a r y i n f o r m a t i o n b i t s . E n c o d e t h e s e i n f o r m a t i o n b i t s u s i n g t h e
G m a t r i x o f t h e c o d e , t o y i e l d a n n - b i t v e c t o r . A d d s i m u l a t e d G a u s s i a n n o i s e a f t e r
t r a n s f o r m i n g e a c h 0 t o a 1 a n d e a c h 1 t o a ? 1 t o o b t a i n a r e c e i v e d v e c t o r , r 2 R
n
S T E P 2 : P e r m u t e t h e c o o r d i n a t e s o f r e c e i v e d v e c t o r r s o t h a t t h e r s t k p o s i t i o n s a r e t h e
m o s t r e l i a b l e l i n e a r l y i n d e p e n d e n t p o s i t i o n s o f r
B y a s s u m p t i o n d a t a i s t r a n s m i t t e d o v e r a n a d d i t i v e w h i t e G a u s s i a n n o i s e c h a n n e l . H e n c e ,
r
i
i s c o n s i d e r e d t o b e m o r e r e l i a b l e t h a n r
j
i f r
i
> r
j
. P e r m u t e t h e v e c t o r r i n s u c h
a w a y t h a t r
i
> r
i + 1
, f o r 1 i n . F u r t h e r , p e r m u t e t h e c o o r d i n a t e s o f r t o e n s u r e
t h a t t h e r s t k p o s i t i o n s o f r a r e i t s m o s t r e l i a b l e l i n e a r l y i n d e p e n d e n t p o s i t i o n s . C a l l t h i s
v e c t o r r . M o d i f y t h e g e n e r a t o r m a t r i x o f t h e c o d e b y a p p l y i n g t h e s a m e t r a n s f o r m a t i o n
t o t h e c o l u m n s o f G t h a t p r o d u c e s r f r o m r , t o g e t G . S t o r e p e r m u t a t i o n i n v e c t o r
P E R M
S T E P 3 : R a n d o m l y g e n e r a t e a p o p u l a t i o n o f p o s s i b l e m e s s a g e v e c t o r s .
Q u a n t i z e t h e r s t k b i t s o f r t o o b t a i n v e c t o r h , w h i c h i s u s e d t o s e e d t h e i n i t i a l p o p u l a t i o n .
I n a d d i t i o n , u n i f o r m l y r a n d o m l y g e n e r a t e ( N ? 1 ) n u m b e r o f v e c t o r s 2 f ? 1 ; 1 g
k
. L e t b e s t
b e t h e m e m b e r o f t h e p o p u l a t i o n t h a t i s c l o s e s t t o r
S T E P 4 : w h i l e ( g e n e r a t i o n c o u n t e r
-
8/2/2019 Genetic Algorithms for Soft Decision Decoding of Linear Block Code
8/25
{ S T E P 4 . 3 : A l l o t r a n k s t o i n d i v i d u a l s i n p o p u l a t i o n a n d a l l o c a t e r e p r o d u c t i v e t r i a l s t o
t h e m .
{ S T E P 4 . 4 : w h i l e ( p o p u l a t i o n - s i z e - c o u n t e r
>
>
>
>
>
>
:
0 i f a
i
= b
i
= ? 1
1 i f a
i
= b
i
= 1
1
1 + e x p
2 r
2
i f a
i
6= b
i
; w h e r e
2
i s t h e v a r i a n c e o f t h e n o i s e s a m p l e
O s p r i n g d i n h e r i t s 1 w i t h p r o b a b i l i t y P ( d
i
= 1 ) a n d - 1 w i t h p r o b a b i l i t y
1 ? P ( d
i
= 1 ) .
S T E P 4 . 4 . 3 : M u t a t e ( d )
F l i p e a c h b i t o f d w i t h p r o b a b i l i t y p
m u t
S T E P 4 . 4 . 4 : I n t r o d u c e d a s a n i n d i v i d u a l i n t o n e w p o p u l a t i o n .
e l s e
S T E P 4 . 4 . 5 : I n t r o d u c e e i t h e r a o r b i n t o n e w p o p u l a t i o n w i t h e q u a l p r o b a b i l i t y .
S T E P 4 . 5 : L e t c u r r b e s t = t t e s t m e m b e r o f t h e n e w p o p u l a t i o n . I f t n e s s ( b e s t )
-
8/2/2019 Genetic Algorithms for Soft Decision Decoding of Linear Block Code
9/25
c o d e w o r d c a n d t h e r e c e i v e d v e c t o r r a r e c
j
= ( ? 1 )
c
j
p
E a n d r
j
= ( ? 1 )
c
j
p
E + e
j
r e s p e c t i v e l y ,
w h e r e E i s t h e s i g n a l e n e r g y p e r c h a n n e l b i t a n d e
j
i s a n o i s e s a m p l e o f a G a u s s i a n p r o c e s s w i t h
s i n g l e - s i d e d n o i s e p o w e r p e r h e r t z N
0
. T h e m e a n o f e
j
i s z e r o a n d t h e v a r i a n c e ,
2
, i s N
0
= 2
T h e s i g n a l - t o - n o i s e r a t i o f o r t h e c h a n n e l i s Y = E = N
0
. I n o r d e r t o a c c o u n t f o r t h e r e d u n d a n c y
i n c o d e s o f d i e r e n t r a t e s , t h e s i g n a l - t o - n o i s e r a t i o p e r t r a n s m i t t e d b i t , i . e . , Y
b
= Y n = k i s u s e d .
F o r s i m u l a t i o n p u r p o s e s , E i s s e t t o 1 a n d t h e m e a n a n d v a r i a n c e o f e
i
c o m p u t e d a c c o r d i n g l y .
3 . 1 . 2 C h r o m o s o m e R e p r e s e n t a t i o n
I n S T E P 3 , s o l u t i o n s t o t h e o p t i m i z a t i o n p r o b l e m a r e r e p r e s e n t e d a s k - d i m e n s i o n a l v e c t o r s .
T h e k b i t s r e p r e s e n t t h e i n f o r m a t i o n b i t s o f a c o d e - v e c t o r . H e n c e , c r o s s o v e r a n d m u t a t i o n
o p e r a t e o n l y o n t h e i n f o r m a t i o n b i t s , w h i c h m e a n s t h a t a l l t h e i n d i v i d u a l s i n t h e p o p u l a t i o n a r e
a l w a y s f e a s i b l e s o l u t i o n s . A n a l t e r n a t i v e s t r a t e g y i s t o r e p r e s e n t i n d i v i d u a l s a s n b i t c o d e w o r d s .
R e p r o d u c t i o n c o u l d t h e n c r e a t e a n o s p r i n g t h a t i s n o t n e c e s s a r i l y a f e a s i b l e s o l u t i o n . F e a s i b i l i t y
c o u l d b e r e s t o r e d b y f o l l o w i n g t h i s u p w i t h a h a r d - d e c i s i o n d e c o d i n g s t e p t o n d t h e c o d e w o r d
c l o s e s t i n h a m m i n g d i s t a n c e t o t h e n b i t o s p r i n g .
3 . 1 . 3 P o p u l a t i o n I n i t i a l i z a t i o n
T h e i n i t i a l p o p u l a t i o n i s g e n e r a t e d u n i f o r m l y r a n d o m l y , s o t h a t e v e r y s c h e m a o f a g i v e n l e n g t h i s
e q u i p r o b a b l y r e p r e s e n t e d i n t h e i n t i a l p o p u l a t i o n . T h e i n i t i a l p o p u l a t i o n a l s o c o n t a i n s a b i n a r y
v e c t o r , h , c o n s i s t i n g o f c o m p o n e n t s h
i
= s g n ( r
i
)
2
I t i s p o s s i b l e t o s e e d t h e p o p u l a t i o n w i t h
s e v e r a l g o o d e s t i m a t e s o f i , t h e t r a n s m i t t e d i n f o r m a t i o n v e c t o r , b y u s i n g m i n o r p e r t u r b a t i o n s
o f h , o r p e r h a p s c h o o s i n g d i e r e n t i n f o r m a t i o n s e t s .
3 . 1 . 4 F i t n e s s E v a l u a t i o n
I n S T E P 4 . 1 , t o e v a l u a t e t h e t n e s s o f a n i n d i v i d u a l , i t i s n e c e s s a r y t o r s t e n c o d e i t b y
m u l t i p l y i n g i t w i t h m a t r i x G . T h e s q u a r e d E u c l i d e a n d i s t a n c e b e t w e e n r a n d t h i s e n c o d e d
v e c t o r i s t h e n c o m p u t e d . A n i n d i v i d u a l i s t t e r t h a n a n o t h e r i f i t i s c l o s e r i n s q u a r e d E u c l i d e a n
d i s t a n c e t o r
3 . 1 . 5 S e l e c t i o n
I n S T E P 4 . 2 & 4 . 3 , t h e s e l e c t i o n s t r a t e g y u s e d i s \ L i n e a r R a n k i n g S e l e c t i o n " . I n d i v i d u a l s i n t h e
p o p u l a t i o n a r e s o r t e d b y n o n - d e c r e a s i n g o r d e r o f s q u a r e d E u c l i d e a n d i s t a n c e a n d e a c h i n d i v i d u a l
i s a s s i g n e d a r a n k w h i c h d e t e r m i n e s t h e n u m b e r o f r e p r o d u c t i v e t r i a l s f o r t h a t i n d i v i d u a l . T h i s
2
r i s r e o r d e r e d s o t h a t t h e m o s t r e l i a b l e k l i n e a r l y i n d e p e n d e n t b i t s o c c u p y t h e r s t k p o s i t i o n s o f r
8
-
8/2/2019 Genetic Algorithms for Soft Decision Decoding of Linear Block Code
10/25
-
8/2/2019 Genetic Algorithms for Soft Decision Decoding of Linear Block Code
11/25
3 . 1 . 7 M u t a t i o n
S T E P 4 . 4 . 3 i s t h e m u t a t i o n s t e p . M u t a t i o n i s d o n e b i t - w i s e o n o s p r i n g w i t h p r o b a b i l i t y p
m u t
M u t a t i o n r a t e f o r e a c h b i t i s k e p t l o w , s i n c e t h e p r o b a b i l i t y t h a t a v e c t o r i s p e r t u r b e d i s 1 ?
( 1 ? p
m u t
)
k
) k p
m u t
, a n d k i s a s h i g h a s 5 2 i n s o m e o f t h e p r o b l e m s w e h a v e e x p e r i m e n t e d w i t h .
4 S i m u l a t i o n R e s u l t s a n d D i s c u s s i o n
W e p r e s e n t s i m u l a t i o n r e s u l t s a t v a r i o u s s i g n a l - t o - n o i s e r a t i o s f o r t h e 1 0 4 ; 5 2 ] e x t e n d e d b i n a r y
q u a d r a t i c r e s i d u e c o d e . T h i s i s a l a r g e c o d e , w i t h a s e a r c h s p a c e o f s i z e 2
5 2
. W e p r e s e n t g r a p h s
a n d d a t a s h o w i n g t h e e x c e l l e n t p e r f o r m a n c e o f o u r a p p r o a c h . W e i l l u s t r a t e t h e r e l a t i o n b e t w e e n
b i t e r r o r p r o b a b i l i t y a n d t h e n u m b e r o f g e n e t i c a l g o r i t h m g e n e r a t i o n s . S i m u l a t i o n p a r a m e t e r s f o r
t h e r e s u l t s p r e s e n t e d i n F i g u r e s 2 , 3 , a n d T a b l e 1 a r e : n = 1 0 4 ; k = 5 2 ; p
m u t
= 3 % , p
c r o s s
= 7 0 % ,
N = p o p u l a t i o n s i z e = 3 0 0 .
F i g u r e s 2 a n d 3 i n d i c a t e t h e e v o l u t i o n o f b i t - e r r o r - p r o b a b i l i t y w i t h g e n e t i c a l g o r i t h m g e n e r -
a t i o n s . 1 0 0 0 c o d e w o r d s w e r e t r a n s m i t t e d a n d t h e f r a c t i o n o f i n f o r m a t i o n b i t s i n e r r o r c a l c u l a t e d
e a c h t i m e . B i t e r r o r p r o b a b i l i t y i s t h e a v e r a g e , o v e r 1 0 0 0 s i m u l a t i o n s , o f t h e f r a c t i o n o f i n f o r -
m a t i o n b i t s i n e r r o r . N o t i c e t h a t t h e b i t - e r r o r - p r o b a b i l i t y d e c r e a s e s w i t h i n c r e a s i n g n u m b e r o f
g e n e r a t i o n s , r e e c t i n g t h e f a c t t h a t i t i s p o s s i b l e t o b a l a n c e s o l u t i o n q u a l i t y w i t h c o m p u t a t i o n a l
e c i e n c y . A l s o n o t i c e i n g u r e 3 , t h e r a p i d i n i t i a l e v o l u t i o n w h i c h s e t t l e s d o w n t o a s t e a d y r a t e
o f i m p r o v e m e n t i n b i t - e r r o r - p r o b a b i l i t y .
0
0.02
0.04
0.06
0.08
0.1
0.12
0.14
0.16
0 10 20 30 40 50 60 70 80 90 100
Number of Generations
"1.5dB""1.75dB"
"2.0dB""2.25dB"
"2.5dB"
BitErrorProbability
F i g u r e 2 : B i t E r r o r P r o b a b i l i t y v s N u m b e r o f G e n e r a t i o n s
A n i m p o r t a n t q u e s t i o n a b o u t t h i s a l g o r i t h m a n d , m o r e g e n e r a l l y , a n y g e n e t i c a l g o r i t h m -
b a s e d o p t i m i z a t i o n t e c h n i q u e , i s a b o u t t h e s t o p p i n g c r i t e r i o n . W h e n s h o u l d o n e s t o p i t e r a t i n g
S T E P 4 o f a l g o r i t h m G A D E C ? S i n c e G A D E C i s i t e r a t i v e , o n e h a s t h e l u x u r y o f b a l a n c i n g
1 0
-
8/2/2019 Genetic Algorithms for Soft Decision Decoding of Linear Block Code
12/25
0
0.005
0.01
0.015
0.020.025
0.03
0.035
0.04
0.045
0.05
10 20 30 40 50 60 70 80 90 100Number of Generations
"1.5dB""1.75dB"
"2.0dB""2.25dB"
"2.5dB"
BitErrorP
robability
F i g u r e 3 : B i t E r r o r P r o b a b i l i t y i n t h e L a t e r S t a g e s o f E v o l u t i o n
p e r f o r m a n c e a n d c o m p u t a t i o n a l e o r t . T a b l e 1 s h o w s t h a t t h e r e i s a s t e a d y d e c r e a s e i n b i t
e r r o r p r o b a b i l i t y w i t h i n c r e a s e i n t h e n u m b e r o f g e n e r a t i o n s , w i t h a b o u t 3 0 t o 4 0 % r e d u c t i o n
w h e n t h e n u m b e r o f g e n e r a t i o n s i s i n c r e a s e d f r o m 5 0 t o 1 0 0 . W h e n i t e r a t e d s t i l l f u r t h e r t o 1 0 0 0
g e n e r a t i o n s , t h e b i t e r r o r p r o b a b i l i t y d r o p s f r o m 0 1 6 t o 0 1 1 i n d i c a t i n g t h a t i t i s p o s s i b l e t o
o b t a i n a n i m p r o v e m e n t i n p e r f o r m a n c e a t t h e c o s t o f m o r e c o m p u t a t i o n .
F o r a g i v e n n ; k ] c o d e , i t i s p o s s i b l e t o p e r f o r m a r e g r e s s i o n b e t w e e n t h e b i t - e r r o r r a t e a n d
n u m b e r s o f g e n e t i c a l g o r i t h m g e n e r a t i o n s , b a s e d o n s i m u l a t i o n d a t a . T h i s w i l l g i v e a r e l a t i o n
b e t w e e n b i t e r r o r p r o b a b i l i t y a n d a n u p p e r b o u n d o n t h e n u m b e r o f c o d e w o r d s e v a l u a t e d ( =
n u m b e r o f g e n e r a t i o n s p o p u l a t i o n s i z e ) .
W e p r e s e n t i n T a b l e 1 , b i t e r r o r p r o b a b i l i t y a n d r e l a t e d s t a t i s t i c s a f t e r 5 0 a n d 1 0 0 g e n e t i c
a l g o r i t h m g e n e r a t i o n s . F i g u r e s 4 a n d 5 e x h i b i t t h e r e l a t i o n b e t w e e n b i t - e r r o r p r o b a b i l i t y a n d
t h e s i g n a l - t o - n o i s e r a t i o , a f t e r 5 0 a n d 1 0 0 g e n e r a t i o n s , r e s p e c t i v e l y . S o m e o f t h e s e e r r o r s w o u l d
n e c e s s a r i l y b e m a d e b y a n y m a x i m u m l i k e l i h o o d d e c o d e r ( M L D ) a s w e l l a n d r e e c t c a s e s w h e r e a
c o d e w o r d o t h e r t h a n t h e t r a n s m i t t e d c o d e w o r d w a s f o u n d t o b e c l o s e r t o t h e r e c e i v e d v e c t o r , r
T h i s \ l o w e r b o u n d " i s a l s o p r e s e n t e d . T h e d i e r e n c e b e t w e e n t h e t w o c u r v e s , g i v e n i n F i g u r e s
4 a n d 5 , i s o f t e n u s e d t o g a u g e t h e p e r f o r m a n c e o f a s u b o p t i m a l d e c o d i n g a l g o r i t h m .
T h e r e s u l t s o b t a i n e d u s i n g G A D E C a r e e x c e l l e n t : t h e r a t i o o f t h e b i t e r r o r p r o b a b i l i t y t o
t h e m a x i m u m l i k e l i h o o d d e c o d i n g l o w e r b o u n d , i s a s l o w a s 1 6 5 t o 2 2 a f t e r 1 0 0 g e n e r a t i o n s .
A s s h o w n b y t h e s i m u l a t i o n r e s u l t s , i t i s p o s s i b l e t o o b t a i n a l o w e r b i t e r r o r p r o b a b i l i t y a n d
P
b
= M L D r a t i o , a t t h e e x p e n s e o f m o r e c o m p u t a t i o n .
F o r a x e d b i t e r r o r p r o b a b i l i t y , i t i s p o s s i b l e t o c o m p u t e t h e d i e r e n c e i n S N R b e t w e e n
t h e l o w e r b o u n d m a x i m u m - l i k e l i h o o d d e c o d i n g c u r v e a n d t h e c u r v e o b t a i n e d f r o m a l g o r i t h m
G A D E C . T h i s d i e r e n c e i s a t m o s t 0 5 5 d B a f t e r 5 0 g e n e r a t i o n s o f g e n e t i c s e a r c h a n d r e d u c e s
t o a t m o s t 0 3 5 d B a f t e r 1 0 0 g e n e r a t i o n s .
1 1
-
8/2/2019 Genetic Algorithms for Soft Decision Decoding of Linear Block Code
13/25
S i g n a l - t o - N o i s e R a t i o , d B 1 . 5 1 . 7 5 2 . 0 2 . 2 5 2 . 5
B i t - E r r o r P r o b a b i l i t y
( U n c o d e d D a t a ) . 0 4 6 2 . 0 4 1 8 . 0 3 7 5 . 0 3 3 4 . 0 2 9 6
N o . o f C o d e w o r d s
E v a l u a t e d 3 0 0 0 0 3 0 0 0 0 3 0 0 0 0 3 0 0 0 0 3 0 0 0 0
N u m b e r o f G e n e r a t i o n s 1 0 0 1 0 0 1 0 0 1 0 0 1 0 0
P
b
, B i t - E r r o r P r o b a b i l i t y
( C o d e d D a t a ) 0 . 0 1 6 5 0 . 0 0 8 7 3 0 . 0 0 5 6 3 0 . 0 0 2 1 7 0 . 0 0 1 8 3
M L D L o w e r B o u n d 0 . 0 0 9 0 4 0 . 0 0 4 0 4 0 . 0 0 2 6 7 0 . 0 0 1 3 5 0 . 0 0 0 8 3
R a t i o , P
b
= M L D 1 . 8 2 2 . 1 6 2 . 1 0 1 . 6 5 2 . 2
N o . o f C o d e w o r d s
E v a l u a t e d 1 5 0 0 0 1 5 0 0 0 1 5 0 0 0 1 5 0 0 0 1 5 0 0 0
N u m b e r o f G e n e r a t i o n s 5 0 5 0 5 0 5 0 5 0
P
b
, B i t - E r r o r P r o b a b i l i t y
( C o d e d D a t a ) 0 . 0 1 9 7 3 0 0 . 0 1 0 8 3 8 0 . 0 0 7 7 6 9 0 . 0 0 4 2 0 0 0 . 0 0 2 5 6 9
M L D L o w e r B o u n d 0 . 0 0 8 3 0 7 0 . 0 0 4 0 3 9 0 . 0 0 2 6 7 6 0 . 0 0 1 3 3 6 0 . 0 0 0 8 1 0
R a t i o , P
b
= M L D 2 . 3 7 2 . 2 8 2 . 9 0 3 . 1 4 3 . 1 7
T a b l e 1 : S i m u l a t i o n R e s u l t s f o r t h e 1 0 4 ; 5 2 ] C o d e
0.0001
0.001
0.01
0.1
1.4 1.6 1.8 2 2.2 2.4 2.6Signal to Noise Ratio (dB)
"GADEC""LowerBound"
BitErrorProbability
F i g u r e 4 : B i t E r r o r P r o b a b i l i t y , ( B E P ) v s S i g n a l - t o - n o i s e R a t i o , 5 0 g e n e r a t i o n s : 1 0 4 , 5 2 ] C o d e
1 2
-
8/2/2019 Genetic Algorithms for Soft Decision Decoding of Linear Block Code
14/25
-
8/2/2019 Genetic Algorithms for Soft Decision Decoding of Linear Block Code
15/25
5 . 1 C o m p l e x i t y A n a l y s i s
W e s h o w t h a t a l g o r i t h m G A D E C h a s p o l y n o m i a l t i m e c o m p l e x i t y p e r g e n e r a t i o n .
G i v e n t h a t :
n = b l o c k l e n g t h o f c o d e ,
k = d i m e n s i o n o f c o d e = l e n g t h o f i n d i v i d u a l s i n p o p u l a t i o n ,
N = p o p u l a t i o n s i z e = t o t a l n u m b e r o f i n d i v i d u a l s i n p o p u l a t i o n ,
A t a n y g i v e n s t a g e , w e m a i n t a i n a f e w s e t s o f N k a r r a y s , t h e r e f o r e t h e m e m o r y c o m p l e x i t y
o f t h i s a l g o r i t h m i s O ( N k )
S T E P 3 h a s t i m e c o m p l e x i t y o f O ( k
2
n ) ( H a n , 1 9 9 3 ) . S T E P S 4 . 1 t o 4 . 3 h a v e a c o m p u t a t i o n a l
c o m p l e x i t y o f O ( k n N ) + O ( N l o g N ) + O ( k )
T h e c o m p l e x i t y o f S T E P 3 d e p e n d s o n t h e r a n d o m n u m b e r g e n e r a t o r i n u s e ; b u t t h e c o s t i s
n e g l i g i b l e c o m p a r e d t o t h a t o f S T E P 4
S T E P S 4 . 4 . 1 t o 5 h a v e a n a v e r a g e c a s e c o m p l e x i t y o f O ( 1 ) + p
c r o s s
O ( k ) + O ( k ) + O ( k ) +
( 1 ? p
c r o s s
) O ( 1 ) + O ( k ) = O ( 1 ) + p
c r o s s
O ( k ) + ( 1 ? p
c r o s s
) O ( k ) . T h i s r e d u c e s t o O ( k ) , w h i c h i s
a l s o t h e w o r s t c a s e c o m p l e x i t y . H e n c e e a c h i t e r a t i o n o f t h e g e n e t i c a l g o r i t h m p a r t o f G A D E C
h a s a t o t a l t i m e c o m p l e x i t y o f O ( k n N + N l o g N ) p e r g e n e r a t i o n .
A l g o r i t h m G A D E C h a s a t i m e c o m p l e x i t y o f O ( k n N + N l o g N ) p e r g e n e r a t i o n + a n i n i -
t i a l i z a t i o n c o m p l e x i t y o f O ( k
2
n )
5 . 2 P r o b a b i l i s t i c A n a l y s i s o f A l g o r i t h m G A D E C
N e x t , w e p r o c e e d t o g i v e a m a t h e m a t i c a l a n d e m p i r i c a l a n a l y s i s o f t h e a l g o r i t h m . S u c h a n
a n a l y s i s m u s t n e c e s s a r i l y b e p r o b a b i l i s t i c b e c a u s e g e n e t i c a l g o r i t h m s a r e e s s e n t i a l l y s t o c h a s t i c
p r o c e s s e s . W e s t a r t t h i s a n a l y s i s b y c o m p u t i n g t h e e e c t o f S T E P 2 o n t h e d e c o d i n g e o r t . W e
o b t a i n t h e p r o b a b i l i t y t h a t t h e v e c t o r p r o d u c e d a s a r e s u l t o f S T E P 3 , i s t h e n e a r e s t n e i g h b o r
c o d e v e c t o r t o t h e r e c e i v e d v e c t o r r . W e k n o w t h a t v e c t o r r = ( r
1
; : : : ; r
n
) h a s c o m p o n e n t s r
i
t h a t a r e G a u s s i a n r a n d o m v a r i a b l e s w i t h m e a n + 1 o r ? 1 a n d v a r i a n c e N
0
= 2 , a s d e s c r i b e d i n
S T E P 2 o f a l g o r i t h m G A D E C
I f n i n d e p e n d e n t a n d i d e n t i c a l l y d i s t r i b u t e d r a n d o m v a r i a b l e s w i t h p r o b a b i l i t y d e n s i t y f u n c -
t i o n f ( x ) a r e r e a r r a n g e d i n o r d e r o f d e c r e a s i n g m a g n i t u d e , d e n o t e d b y x
( 1 )
x
( 2 )
x
( n )
,
1 4
-
8/2/2019 Genetic Algorithms for Soft Decision Decoding of Linear Block Code
16/25
t h e n t h e p r o b a b i l i t y d e n s i t y f u n c t i o n o f x
( i )
i s g i v e n b y
p
i
( x ) = n
n ? 1
i ? 1
f ( x ) F
n ? i
( x ) G
i ? 1
1
( x )
w h e r e F ( x ) =
Z
x
? 1
f ( t ) d t a n d G ( x ) = 1 ? F ( x )
W e a r e i n t e r e s t e d i n c o m p u t i n g t h e p r o b a b i l i t y t h a t S T E P 3 o f a l g o r i t h m G A D E C p r o d u c e s
t h e n e a r e s t - n e i g h b o r c o d e w o r d . L e t Y
i
= r
i
; t h e n P ( Y
i
x ) = P ( ? x < r
i
< x )
I f r
i
i s r e c e i v e d w i t h m e a n = 1 , t h e n
P ( Y
i
< x ) =
Z
x
? x
1
p
2
e
?
1
2
(
y 1
)
2
d y =
x ? 1
+
x ? 1
? 1 ( 1 )
w h e r e ( u ) =
Z
u
? 1
1
p
2
e
? t
2
= 2
d t
L i k e w i s e , i f r
i
i s r e c e i v e d w i t h m e a n = ? 1 , t h e n
P ( Y
i
< x ) =
Z
x
? x
1
p
2
e
?
1
2
(
t + 1
)
2
d t =
x + 1
+
x ? 1
? 1
I n o t h e r w o r d s , t h e r a n d o m v a r i a b l e s Y
1
; : : : ; Y
n
a r e d i s t r i b u t e d i n d e p e n d e n t l y a n d i d e n t i c a l l y , i r -
r e s p e c t i v e o f t h e m e a n o f t h e r e c e i v e d c o m p o n e n t r
i
f o r i = 1 ; : : : ; n a n d t h e c o m m o n d i s t r i b u t i o n
f u n c t i o n o f t h e Y
i
' s i s g i v e n b y e q u a t i o n ( 1 ) w i t h a s s o c i a t e d d e n s i t y f u n c t i o n
f ( x ) =
1
p
2
e
?
1
2
(
x + 1
)
2
+
1
p
2
e
?
1
2
(
x 1
)
2
; f o r x > 0 ( 2 )
W e w i l l a p p r o x i m a t e t h e p r o b a b i l i t y o f S T E P 3 , p r o d u c i n g t h e n e a r e s t - n e i g h b o r c o d e w o r d
b y n e g l e c t i n g t h e e e c t o f i n t e r c h a n g e s r e q u i r e d t o r e s t o r e l i n e a r i n d e p e n d e n c e t o t h e r s t k
b i t p o s i t i o n s . T h e s e i n t e r c h a n g e s s h o u l d n o t a e c t t h e p r o b a b i l i t y v e r y m u c h ( B a t t a i l & F a n g ,
1 9 8 3 ) , a s t h e r e a r e v e r y f e w o f t h e m ; t h e y a r e h e n c e n e g l e c t e d i n t h e a n a l y s i s .
T h e p r o b a b i l i t y o f q u a n t i z a t i o n y i e l d i n g t h e t r a n s m i t t e d b i t i s g i v e n b y
Z
1
0
1
p
2
e
?
1
2
(
t 1
)
2
d t =
1
i f 1 w a s t r a n s m i t t e d , a n d
Z
0
? 1
1
p
2
e
?
1
2
(
t + 1
)
2
d t =
1
i f ? 1 w a s t r a n s m i t t e d . I n o t h e r w o r d s , t h i s p r o b a b i l i t y o f q u a n t i z a t i o n y i e l d i n g t h e t r a n s m i t t e d
b i t i s a l s o i n d e p e n d e n t o f t h e t r a n s m i t t e d b i t .
T h e f o l l o w i n g e x p r e s s i o n f o r A ( n ; j ) a p p r o x i m a t e s t h e p r o b a b i l i t y t h a t t h e j - t h r e c e i v e d
v e c t o r c o m p o n e n t i s q u a n t i z e d t o i t s a s s o c i a t e d t r a n s m i t t e d b i t .
A ( n ; j ) =
n !
( n ? j ) ! ( j ? 1 ) !
Z
1
0
F ( x )
n ? j
G ( x )
j ? 1
f ( x ) d x
1 5
-
8/2/2019 Genetic Algorithms for Soft Decision Decoding of Linear Block Code
17/25
w h e r e f ( x ) i s d e n e d i n E q u a t i o n 2 , F ( x ) i s t h e a s s o c i a t e d d i s t r i b u t i o n f u n c t i o n a n d , G ( x ) =
1 ? F ( x )
T h e p r o d u c t
Q
k
j = 1
A ( n ; j ) , a p p r o x i m a t e s t h e p r o b a b i l i t y t h a t a l l o f r
( 1 )
; : : : ; r
( k )
a r e q u a n t i z e d
t o t h e i r a s s o c i a t e d t r a n s m i t t e d b i t s . S i n c e t h e r s t k p o s i t i o n s u n i q u e l y d e t e r m i n e a c o d e w o r d ,
p r o d u c t
Q
k
j = 1
A ( n ; j ) r e p r e s e n t s t h e p r o b a b i l i t y t h a t S T E P 3 y i e l d s t h e t r a n s m i t t e d c o d e w o r d .
T h e r e s u l t s p r e s e n t e d i n T a b l e 3 a r i s e f r o m s i m u l a t i n g s e v e r a l c o d e w o r d t r a n s m i s s i o n s t o o b s e r v e
S N R ( d B ) T h e o r e t i c a l E s t i m a t e O b s e r v e d b y S i m u l a t i o n
1 . 5 0 . 8 3 7 0 . 4 1 5 . 3 9 8
1 . 7 5 0 . 8 1 3 0 . 4 8 2 . 4 6 2
2 . 0 0 . 7 9 0 5 0 . 5 4 6 . 5 3 3
2 . 2 5 0 . 7 6 8 0 . 6 1 1 . 5 9 2
2 . 5 0 . 7 4 6 0 . 6 7 3 . 6 5 6
2 . 7 5 0 . 7 2 5 0 . 7 2 9 . 7 1 9
T a b l e 3 : E s t i m a t e s o f
Q
k
j = 1
A ( n ; j ) f o r t h e 1 0 4 ; 5 2 ] C o d e
t h e f r e q u e n c y w i t h w h i c h S T E P 3 p r o d u c e d t h e t r a n s m i t t e d c o d e w o r d c o r r e c t l y . T h e t h e o r e t i c a l
e s t i m a t e o f p r o b a b i l i t y g i v e n b y
Q
k
j = 1
A ( n ; j ) c o m p u t e d u s i n g M a t h e m a t i c a , a g r e e s v e r y c l o s e l y
w i t h s i m u l a t i o n r e s u l t s f o r t h e 1 0 4 ; 5 2 ] c o d e a t s i x d i e r e n t s i g n a l - t o - n o i s e r a t i o s .
S i n c e w e a r e i n t e r e s t e d i n c o m p u t i n g t h e p r o b a b i l i t y t h a t S T E P 3 y i e l d s t h e n e a r e s t - n e i g h b o r
c o d e w o r d ,
Q
k
j = 1
A ( n ; j ) d o e s n o t a c c o u n t f o r t h e c a s e w h e r e t h e t r a n s m i t t e d c o d e w o r d i s n o t
t h e n e a r e s t n e i g h b o r c o d e w o r d . I n t h i s s e n s e , t o o ,
Q
k
j = 1
A ( n ; j ) i s a n a p p r o x i m a t i o n , a l b e i t a
r e a s o n a b l e o n e .
T h e a b o v e h a s p r o v i d e d u s w i t h a h a n d l e o n t h e r s t s t e p o f a l g o r i t h m G A D E C a n d i n d i c a t e s
t h a t a t l e a s t o n e m e m b e r o f t h e i n i t i a l p o p u l a t i o n i s c h o s e n r e a s o n a b l y c l o s e t o t h e t r a n s m i t t e d
v e c t o r . I n ( M a i n i , M e h r o t r a , M o h a n , & R a n k a , 1 9 9 3 ) w e p r e s e n t a s c h e m a t h e o r e m f o r R U X
s h o w i n g t h a t h i g h r e l i a b i l i t y s c h e m a c o n s t i t u t e t h e b u i l d i n g b l o c k s f o r t h e e v o l u t i o n a r y p r o c e s s .
6 C o m p a r i s o n o f A l g o r i t h m G A D E C w i t h O t h e r D e -
c o d i n g A l g o r i t h m s
W e p r o v i d e a c o m p a r i s o n o f a l g o r i t h m G A D E C w i t h p u r e r a n d o m s e a r c h , a s y s t e m a t i c e x -
h a u s t i v e s e a r c h m e t h o d a n d a n A * b a s e d a l g o r i t h m . T h e c o m p a r i s o n p u t s i n p e r s p e c t i v e t h e
e x c e l l e n t r e s u l t s o b t a i n e d w h i c h a r e c o m p a r a b l e i n p e r f o r m a n c e f r o m t h e A * b a s e d a l g o r i t h m ,
a n o r d e r o f m a g n i t u d e b e t t e r t h a n t h e s y s t e m a t i c e x h a u s t i v e s e a r c h m e t h o d a n d s e v e r a l o r d e r s
o f m a g n i t u d e b e t t e r t h a n p u r e r a n d o m s e a r c h .
1 6
-
8/2/2019 Genetic Algorithms for Soft Decision Decoding of Linear Block Code
18/25
6 . 1 S y s t e m a t i c E x h a u s t i v e S e a r c h
T o f u r t h e r b o l s t e r t h e c l a i m t h a t t h e g e n e t i c a l g o r i t h m i s d r i v e n b y t h e f o r c e s o f r e p r o d u c t i o n
a n d i n t e l l i g e n t s e a r c h s p a c e s a m p l i n g , w e g i v e a c o m p a r i s o n o f t h e p e r f o r m a n c e o f a l g o r i t h m
G A D E C w i t h a s y s t e m a t i c , e x h a u s t i v e s e a r c h p r o c e d u r e . T h e s y s t e m a t i c e x h a u s t i v e s e a r c h
p r o c e d u r e d e s c r i b e d b e l o w x e s s o m e o f t h e m o s t r e l i a b l e p o s i t i o n s i n a c o d e v e c t o r a n d a l l o w
t h e o t h e r s v a r y o v e r a l l p o s s i b i l i t i e s . T h i s s e a r c h e x h a u s t i v e l y s a m p l e s t h a t s c h e m a o f t h e s e a r c h
s p a c e t h a t i s m o s t l i k e l y t o c o n t a i n a c a n d i d a t e n e a r e s t n e i g h b o r c o d e w o r d .
A l g o r i t h m S y s t e m a t i c E x h a u s t i v e S e a r c h ( n ; k ; Y ; d i m )
n i s t h e o f t h e c o d e , k i s t h e d i m e n s i o n o f t h e c o d e , Y i s t h e s i g n a l t o n o i s e r a t i o , i n d e c i b e l s , a n d
d i m t h e d i m e n s i o n o f t h e s u b s p a c e t o b e e x h a u s t i v e l y s e a r c h e d .
S T E P 1 : S a m e a s S T E P 1 o f a l g o r i t h m G A D E C
S T E P 2 : S a m e a s S T E P 2 o f a l g o r i t h m G A D E C
S T E P 3 : C o m p u t e s q u a r e d E u c l i d e a n d i s t a n c e b e t w e e n v e c t o r r a n d t r a n s m i t t e d c o d e w o r d
c , c a l l i t d i s t . L e t h b e t h e q u a n t i z e d e s t i m a t e o b t a i n e d f r o m v e c t o r r
S T E P 4 : w h i l e ( c o u n t e r < 2
d i m
) d o
{ S T E P 4 . 1 : S t o r e b i n a r y e q u i v a l e n t o f i n t e g e r c o u n t e r , i n v e c t o r b
{ S T E P 4 . 2 : S e t i = ( h
1
; h
2
; : : : ; h
k ? d i m
; b
1
; : : : ; b
d i m
)
{ S T E P 4 . 3 : E n c o d e i , i . e . c = i G
{ S T E P 4 . 4 : C o m p u t e t h e s q u a r e d E u c l i d e a n d i s t a n c e , d i s t
0
, b e t w e e n v e c t o r c a n d
v e c t o r r . K e e p a r u n n i n g c o u n t o f t h e m i n i m u m d i s t e n c o u n t e r e d s o f a r . F i n d t h e
n u m b e r o f i t s i n f o r m a t i o n b i t s i n e r r o r .
S t e p s 1 t h r o u g h 3 o f t h i s a l g o r i t h m a r e e s s e n t i a l l y t h e s a m e a s t h o s e o f a l g o r i t h m G A D E C
O n c e v e c t o r h h a s b e e n o b t a i n e d , i t s m o s t r e l i a b l e n ? d i m b i t s d e t e r m i n e s t h e s u b s p a c e ( s c h e m a )
t h a t i s e x h a u s t i v e l y s e a r c h e d f o r t h e c o d e w o r d n e a r e s t i n E u c l i d e a n d i s t a n c e t o t h e r e c e i v e d
v e c t o r r
T h e f o l l o w i n g s i m u l a t i o n s w e r e d o n e o n t h e 1 0 4 ; 5 2 ] c o d e w i t h d i m = 1 5 , a n d t h e r e s u l t s
a r e s h o w n i n T a b l e 4 . B i t e r r o r p r o b a b i l i t y w a s c o m p u t e d i n t h e s a m e w a y a s f o r a l g o r i t h m
G A D E C , i . e . , t a k i n g t h e a v e r a g e f r a c t i o n o f i n f o r m a t i o n b i t s i n e r r o r o v e r a l l s i m u l a t e d c o d e -
w o r d t r a n s m i s s i o n s . A t o t a l o f 2
1 5
= 3 2 7 6 7 c o d e w o r d s w e r e e v a l u a t e d f o r e a c h s i m u l a t e d t r a n s -
m i s s i o n . T h i s i s t o p r o v i d e a f a i r c o m p a r i s o n w i t h a l g o r i t h m G A D E C s i m u l a t e d t o p e r f o r m
1 7
-
8/2/2019 Genetic Algorithms for Soft Decision Decoding of Linear Block Code
19/25
S N R ( d B ) S y s t e m a t i c E x h a u s t i v e S e a r c h ( B E P ) G A D E C ( B E P )
1 . 5 0 . 0 6 7 0 . 0 1 6 5
2 . 0 0 . 0 4 5 0 . 0 0 5 6 3
2 . 5 0 . 0 2 8 0 . 0 0 1 8 3
T a b l e 4 : S y s t e m a t i c E x h a u s t i v e S e a r c h v s A l g o r i t h m G A D E C
3 0 ; 0 0 0 c o d e w o r d e v a l u a t i o n s . S i m u l a t i o n r e s u l t s o b t a i n e d f r o m t h i s a p p r o a c h d e m o n s t r a t e t h a t
G A D E C i s s u p e r i o r b y a n o r d e r o f m a g n i t u d e s h o w i n g t h a t s e l e c t i o n , c r o s s o v e r a n d m u t a t i o n
d o p l a y i m p o r t a n t r o l e s i n n e a r e s t - n e i g h b o r d e c o d i n g .
6 . 2 P u r e R a n d o m S e a r c h
T o f u r t h e r s u p p o r t t h e c l a i m t h a t c r o s s o v e r p l a y s t h e m a j o r r o l e r o l e i n a l g o r i t h m G A D E C ,
s i m u l a t i o n r e s u l t s w i t h p
c r o s s
= 0 ( c r o s s o v e r t u r n e d o ) a n d a b i t m u t a t i o n r a t e o f 3 % s h o w t h a t
t h e b i t e r r o r p r o b a b i l i t y r o s e f r o m . 0 1 6 5 t o . 1 2 0 a t a s i g n a l - t o - n o i s e r a t i o o f 1 5 d B , w h i c h i s a
s i g n i c a n t d e t e r i o r a t i o n i n p e r f o r m a n c e .
W e n o w a n a l y z e t h e b e h a v i o r o f a r a n d o m s e a r c h o v e r t h e s p a c e o f a l l c o d e w o r d s f o r t h e o n e
c l o s e s t i n E u c l i d e a n d i s t a n c e t o t h e r e c e i v e d v e c t o r , r . T h i s i s d o n e t o s h o w t h e f a i l u r e o f b l i n d
r a n d o m s e a r c h f o r t h i s p r o b l e m . W e u s e t h e e x t r e m e v a l u e t h e o r y o f r a n d o m v a r i a b l e s t o
a p p r o x i m a t e t h i s b e h a v i o r .
I n a r a n d o m s a m p l e o f s i z e n d r a w n f r o m a p o p u l a t i o n w i t h c u m u l a t i v e d i s t r i b u t i o n f u n c t i o n
P ( x ) , t h e a s y m p t o t i c d i s t r i b u t i o n o f t h e l a r g e s t / s m a l l e s t e l e m e n t , x
( n )
, m a y p o s s e s s a l i m i t i n g
d i s t r i b u t i o n . I f i t d o e s , t h e n t h e l i m i t i n g d i s t r i b u t i o n m u s t b e o n e o f t h r e e p o s s i b l e t y p e s w h o s e
f o r m s a r e f o u n d i n ( D a v i d , 1 9 7 0 ) . I f P ( x ) d e n o t e s t h e d i s t r i b u t i o n o f t h e s t a n d a r d n o r m a l
r a n d o m v a r i a b l e t h e n t h e l i m i t i n g c u m u l a t i v e d i s t r i b u t i o n o f x
( n )
, t h e l a r g e s t o b s e r v a t i o n i n a
s a m p l e o f n , n o r m a l i z e d a s
p
2 l n n x
( n )
?
p
2 l n n ] , i s e x p ( ? e
? x
)
I n p u r e r a n d o m s e a r c h w e d e n o t e t h e s q u a r e d E u c l i d e a n d i s t a n c e b y r a n d o m v a r i a b l e x
i
,
i . e . , x
i
=
P
( r
j
? c
i j
)
2
, w h e r e r = ( r
1
; : : : ; r
n
) i s t h e x e d r e c e i v e d v e c t o r a n d c
i j
' s a r e r a n d o m l y
g e n e r a t e d b i n a r y b i t s . B y t h e c e n t r a l l i m i t t h e o r e m , x
i
i s n o r m a l l y d i s t r i b u t e d f o r l a r g e n I n
t h e c o n t e x t o f n e a r e s t - n e i g h b o r d e c o d i n g w e a r e i n t e r e s t e d i n t h e d i s t r i b u t i o n o f t h e m i n i m u m
x
i
, a n d
p
2 l n n x
( n )
?
p
2 l n n ] d e s c r i b e s t h e d i s t r i b u t i o n o f t h e m a x i m u m , c o n s e q u e n t l y , w e w i l l
c o n s i d e r t h e s t a t i s t i c a l b e h a v i o r o f ? m a x ( ? x
i
)
I n c a s e t h e c
i j
' s a r e r a n d o m l y s e l e c t e d , e a c h s a t i s f y i n g t h e B e r n o u l l i d i s t r i b u t i o n w i t h p r o b a -
b i l t y p = 1 = 2 , e a c h x
i
h a s e x p e c t e d v a l u e
P
n
j = 1
r
2
j
+ n a n d s t a n d a r d d e v i a t i o n 2
q
P
n
j = 1
r
2
j
. H e n c e ,
? x
i
h a s m e a n = ?
P
n
j = 1
r
2
j
? n , s t a n d a r d d e v i a t i o n = 2
q
P
r
2
j
, a n d
1 8
-
8/2/2019 Genetic Algorithms for Soft Decision Decoding of Linear Block Code
20/25
(
? x
i
+
P
r
2
j
+ n
2
q
P
r
2
j
)
r e p r e s e n t s a s t a n d a r d n o r m a l r a n d o m v a r i a b l e . C o n s i d e r a s e a r c h a l g o r i t h m t h a t r a n d o m l y
s a m p l e s L c o d e w o r d s f r o m a c o d e o f s i z e 2
k
. T h e n , b y t h e e x t r e m e v a l u e t h e o r e m , t h e m i n i m u m
d i s t a n c e a m o n g L c o d e w o r d s i s
P
2
4
? x
( L )
+
P
r
2
j
+ n
2
q
P
r
2
j
?
p
2 l n L
y
p
2 l n L
3
5
= e
? e
y
L e t x
= ? 2
q
P
r
2
j
n
y
p
2 l n L
+
p
2 l n L
o
+
P
r
2
j
+ n F o r a g i v e n v a l u e o f e
? e
y
= c a n d a s p e c i e d
t h r e s h o l d x
, w e c a n e s t i m a t e t h e n u m b e r , L , o f s a m p l e s t h a t w o u l d b e r e q u i r e d t o d i s c o v e r a
c o d e w o r d a t s q u a r e d E u c l i d e a n d i s t a n c e l e s s t h a n x
, w i t h p r o b a b i l i t y 1 ? c . T h i s c a n b e d o n e
b y s o l v i n g x
a s a q u a d r a t i c e q u a t i o n i n L
T h e r e s u l t s p r e s e n t e d i n T a b l e 5 , g i v e a n e s t i m a t e o f L f o r t h r e s h o l d x
s e t t o s o m e t y p i c a l
v a l u e s o f d i s t a n c e o b t a i n e d a f t e r S T E P 3 o f a l g o r i t h m G A D E C . W e u s e v a l u e s o f u n c o n d i t i o n a l
m e a n , E (
P
j = n
j = 1
r
2
j
+ n ) =
u c
= n ( 2 +
2
) a n d u n c o n d i t i o n a l v a r i a n c e ,
2
u c
= 4 n ( 1 +
2
) , w h e r e
2
=
N
0
2
( s e e d e s c r i p t i o n o f G A D E C ) i n p l a c e o f c o n d i t i o n a l m e a n a n d v a r i a n c e , a n d
2
r e s p e c t i v e l y . I t i s o b s e r v e d t h a t L i s a s i g n i c a n t f r a c t i o n ( b e t w e e n
1
2
a n d
2
3
) o f t h e s e a r c h s p a c e
S N R d B 1 . 5 1 . 7 5 2 . 0 2 . 2 5 2 . 5 2 . 7 5
U n c o n d i t i o n a l M e a n ,
u c
2 8 0 2 7 6 . 6 4 2 7 2 . 8 2 6 8 . 3 2 2 6 5 . 8 2 2 6 2 . 6
U n c o n d i t i o n a l S t . D e v . ,
u c
2 6 . 5 2 6 . 2 7 2 5 . 9 9 2 5 . 6 3 2 5 . 4 4 2 5 . 1 8
A T y p i c a l x
1 1 6 . 0 1 1 8 3 . 8 2 9 3 . 5 5 1 0 9 . 9 7 9 2 . 3 2 9 1 . 6 5
E s t i m a t e d N u m b e r o f C o d e w o r d s , L
1 0
8
1 0
8
1 0
1 0
1 0
8
1 0
9
1 0
9
T a b l e 5 : P u r e R a n d o m S e a r c h v s A l g o r i t h m G A D E C
t h a t h a s s i z e 2
5 2
= 4 5 1 0
1 5
, f o r t h e 1 0 4 ; 5 2 ] c o d e . H e n c e , i f a r a n d o m s e a r c h p r o c e d u r e i s g o i n g
t o p r o d u c e a n y i m p r o v e m e n t o v e r t h a t o b t a i n e d i n S T E P 3 o f G A D E C , i t w o u l d p r o b a b l y t a k e
a v e r y l o n g t i m e t o d o s o .
6 . 3 A l g o r i t h m A * v s G A D E C
I n t h e A * b a s e d a l g o r i t h m , a l i n e a r c o d e i s r e p r e s e n t e d a s a t r e l l i s w h e r e i n e a c h p a t h r e p r e s e n t s
a c o d e w o r d ( H a n , 1 9 9 3 ) . T h e s u b o p t i m a l v e r s i o n o f a l g o r i t h m A * r e s t r i c t s t h e l i s t o f n o d e s t o
b e e x p a n d e d f o r e x p l o r a t i o n b a s e d o n a l i m i t o n m e m o r y s i z e a n d p r u n e s s e a r c h p a t h s w h i c h a r e
e s t i m a t e d t o c o n t a i n t h e r e q u i r e d s o l u t i o n w i t h a p r o b a b i l i t y l e s s t h a n a n A * s p e c i c t h r e s h o l d
1 9
-
8/2/2019 Genetic Algorithms for Soft Decision Decoding of Linear Block Code
21/25
T h e b i t e r r o r p r o b a b i l i t y v a l u e s o b t a i n e d f o r t h e 1 0 4 ; 5 2 ] c o d e u s i n g a s u b o p t i m a l v e r s i o n
o f a l g o r i t h m A * ( d e l t a = 0 ) w h o s e p e r f o r m a n c e i s s t a t e d i n ( H a n , 1 9 9 3 ) a s b e i n g p r a c t i c a l l y
o p t i m u m a r e c o m p a r a b l e t o t h o s e o f a l g o r i t h m G A D E C a f t e r 1 9 , 2 0 0 c o d e w o r d e v a l u a t i o n s .
0
0.005
0.01
0.015
0.02
0.025
0.03
0.035
0.04
0.045
0.05
1.4 1.6 1.8 2 2.2 2.4 2.6 2.8
175 Generations of GA
120 Generations of GA
A*
Uncoded Data
Bit Error Probability
Signal to Noise Ratio (dB)
F i g u r e 6 : A C o m p a r i s o n o f B i t E r r o r P r o b a b i l i t e s i n A l g o r i t h m G A D E C a n d A *
T a b l e 6 a n d F i g u r e 6 s h o w t h e r e s u l t s o f d e c o d i n g u s i n g a d i s t r i b u t e d p o p u l a t i o n v e r s i o n
o f o u r a l g o r i t h m . T h i s c o n s i s t s o f 1 6 s u b p o p u l a t i o n s e a c h o f s i z e 1 0 c o n g u r e d a s a m e s h ;
s u b p o p u l a t i o n c h r o m o s o m e s a r e m a d e a v a i l a b l e t o n e i g h b o r i n g s u b p o p u l a t i o n s a t i n t e r v a l s o f 1 0
g e n e r a t i o n s . F u r t h e r , e a c h s u b p o p u l a t i o n i s r e i n i t i a l i z e d w i t h g e n e t i c m a t e r i a l u p o n c o n v e r g e n c e .
W e n d t h a t b i t e r r o r p r o b a b i l i t i e s a n d P
b
= M L D r a t i o s a r e c o m p a r a b l e w i t h t h o s e o b t a i n e d v i a
a l g o r i t h m A * ( s e e F i g u r e 6 a n d T a b l e 6 ) . T h e P
b
= M L D r a t i o i n d i c a t e s t h e f r a c t i o n o f e r r o r s
t h a t w e r e a c t u a l l y c o m m i t t e d b y t h e d e c o d e r s i n c e M L D p e r c e n t a g e o f e r r o r s w o u l d a c t u a l l y
h a v e b e e n c o m m i t t e d b y a n y o p t i m a l d e c o d e r . T h i s r a t i o i s w h a t i s u s e d a s a b e n c h m a r k o f
p e r f o r m a n c e , a n d w e n d t h a t o u r a l g o r i t h m y i e l d s P
b
= M L D r a t i o s i n t h e 1 t o 2 3 r a n g e , w h i c h
i s a s g o o d a s t h a t g i v e n b y t h e A * a l g o r i t h m .
A n i m p o r t a n t a d v a n t a g e o f G A D E C i s i t s l o w m e m o r y c o m p l e x i t y o f , w h i c h i s O ( k N )
T h i s i s c o n t r a s t t o a l g o r i t h m A * w h i c h , i n t h e w o r s t c a s e h a s a m e m o r y c o m p l e x i t y t h a t i s
e x p o n e n t i a l i n t h e d i m e n s i o n o f t h e c o d e , O ( n 2
k
) . I n t h e s u b o p t i m a l v e r s i o n o f a l g o r i t h m A * ,
w h o s e r e s u l t s a r e p r e s e n t e d i n T a b l e 6 , t h e s i z e o f t h e o p e n l i s t u s e d w a s r e s t r i c t e d t o 3 0 0 0 ; t h i s
i s s t i l l a n o r d e r o f m a g n i t u d e l a r g e r t h a n t h e m e m o r y r e q u i r e d b y t h e g e n e t i c a l g o r i t h m .
P e r h a p s t h e m o s t s i g n i c a n t a d v a n t a g e o f G A D E C o v e r t h e A * b a s e d a p p r o a c h i s t h e
2 0
-
8/2/2019 Genetic Algorithms for Soft Decision Decoding of Linear Block Code
22/25
f a c t t h a t g e n e t i c a l g o r i t h m s a r e s c a l a b l y p a r a l l e l , s u i t a b l e f o r i m p l e m e n t a t i o n o n a w i d e r a n g e
o f p a r a l l e l a r c h i t e c t u r e s i n c l u d i n g m a s s i v e l y p a r a l l e l o n e s ( C o h o o n , M a r t i n , & R i c h a r d s , 1 9 9 1 ;
M u h l e n b e i n , 1 9 8 9 ; M a n d e r i c k & S p i e s s e n s , 1 9 8 9 ) . T h e d i s t r i b u t e d p o p u l a t i o n s i m u l a t i o n r e s u l t s
m e n t i o n e d i n T a b l e 6 w e r e c o n d u c t e d o n a S u n w o r k s t a t i o n w i t h a 3 3 M h z C P U ; f o r a s i n g l e
t r a n s m i s s i o n , e a c h g e n e t i c a l g o r i t h m g e n e r a t i o n r e q u i r e d a p p r o x i m a t e l y 2 0 s e c o n d s . ( S e v e r a l
o t h e r a l g o r i t h m i c o p t i m i z a t i o n s a r e a l s o p o s s i b l e ) . T h i s i s i n c o m p a r i s o n w i t h t h e A * a l g o r i t h m
w h i c h i n t h e w o r s t c a s e t a k e s t i m e e x p o n e n t i a l i n t h e d i m e n s i o n o f t h e c o d e a n d o n t h e a v e r a g e
t a k e s o v e r 8 m i n u t e s t o d e c o d e a s i n g l e t r a n s m i s s i o n o n a 3 3 M h z S u n w o r k s t a t i o n . F o r t h e
g e n e t i c a l g o r i t h m , i t i s t h e r e f o r e r e a s o n a b l e t o e x p e c t d e c o d i n g t i m e s o f a p p r o x i m a t e l y 1 8 s e c o n d s
o n a 1 6 p r o c e s s o r p a r a l l e l m a c h i n e . O n t h e o t h e r h a n d , a n A * b a s e d a l g o r i t h m i s l i m i t e d i n
s p e e d u p b e c a u s e i t i s n e c e s s a r y t o c o m p u t e t h e m a x i m u m n o d e v a l u e a t e a c h l e v e l i n t h e t r e l l i s
b e f o r e p r o c e e d i n g t o t h e n e x t o n e .
A d d i t i o n a l l y , t h e A * a l g o r i t h m u s e s k n o w l e d g e a b o u t t h e w e i g h t d i s t r i b u t i o n o f t h e c o d e
( a s i n t h e c a s e o f t h e 1 0 4 ; 5 2 ] c o d e ) i n c o m p u t i n g t h e h e u r i s t i c f u n c t i o n ( h ) t o i m p r o v e i t s
c o m p u t a t i o n s p e e d . T h e w e i g h t d i s t r i b u t i o n o f a c o d e ( t h e H a m m i n g w e i g h t s t h a t i t s c o d e
v e c t o r s c a n h a v e ) i s n o t a l w a y s k n o w n a n d i s a s i g n i c a n t r e s e a r c h p r o b l e m i n c o d i n g t h e o r y .
T h e g e n e t i c a l g o r i t h m a p p r o a c h m a k e s n o a s s u m p t i o n s a b o u t t h e w e i g h t d i s t r i b u t i o n o f t h e c o d e
a n d i s a p p l i c a b l e t o a s u p e r s e t o f t h e c o d e s t o w h i c h t h e A * a p p r o a c h i s a p p l i c a b l e .
T h e r e f o r e , w e s e e t h a t t h e g e n e t i c a l g o r i t h m a p p r o a c h o e r s t h r e e a d v a n t a g e s ; a n o r d e r o f
m a g n i t u d e r e d u c t i o n i n m e m o r y c o m p l e x i t y , f a s t e r c o m p u t a t i o n t i m e a n d e a s e o f p a r a l l e l i z a t i o n ,
w i d e a p p l i c a b i l i t y t o l i n e a r b l o c k c o d e s i r r e s p e c t i v e o f w h e t h e r t h e i r w e i g h t d i s t r i b u t i o n s a r e
k n o w n o r n o t .
T h e s e a d v a n t a g e s m a k e t h e g e n e t i c a l g o r i t h m u s i n g R U X a n a t t r a c t i v e d e c o d i n g s t r a t e g y i n
c o m p a r i s o n w i t h A l g o r i t h m A * .
7 C o n c l u s i o n s
W e h a v e i n v e s t i g a t e d a n o v e l a n d r e a l i s t i c a p p l i c a t i o n o f g e n e t i c a l g o r i t h m s . W e h a v e p r e s e n t e d
a n e c i e n t g e n e t i c a l g o r i t h m f o r s o f t - d e c i s i o n d e c o d i n g , a n a l y z e d t h i s a l g o r i t h m , i m p l e m e n t e d i t
o n a l a r g e c o d e , o f s i z e 2
5 2
a n d d e m o n s t r a t e d t h e s u p e r i o r i t y o f t h i s m e t h o d o v e r o t h e r e x i s t i n g
s o f t - d e c i s i o n d e c o d i n g m e t h o d s . W e h a v e p r e s e n t e d a n e w c r o s s o v e r o p e r a t o r w h o s e p e r f o r m a n c e
i s s u p e r i o r b y a t l e a s t a n o r d e r o f m a g n i t u d e t o c o n v e n t i o n a l c r o s s o v e r o p e r a t o r s . T h i s i s j u s t
t h e r s t s t e p i n w h a t w i l l e m e r g e a s a v e r y i m p o r t a n t t e c h n i q u e i n s o f t - d e c i s i o n d e c o d i n g o f
l i n e a r b l o c k c o d e s w i t h i s s u e s s u c h a s p o p u l a t i o n r e p r e s e n t a t i o n , p o p u l a t i o n s i z e , d i s t r i b u t e d
p o p u l a t i o n m o d e l s a n d c r o s s o v e r a n d m u t a t i o n r a t e s c o n s t i t u t i n g i m p o r t a n t r e s e a r c h t o p i c s i n
s o f t - d e c i s i o n d e c o d i n g . T h e r e l a t i o n s h i p b e t w e e n s o f t - d e c i s i o n d e c o d i n g a n d o p t i m i z i n g W a l s h
p o l y n o m i a l s , w h i c h h a s b e e n o b s e r v e d f o r t h e r s t t i m e , p r o v i d e s a n i n t e r e s t i n g a n a l o g y b e t w e e n
2 1
-
8/2/2019 Genetic Algorithms for Soft Decision Decoding of Linear Block Code
23/25
S i g n a l - t o - N o i s e R a t i o , d B 1 . 5 1 . 7 5 2 . 0 2 . 2 5 2 . 5 2 . 7 5
A L G O R I T H M G A D E C
N o . o f C o d e w o r d s
E v a l u a t e d 1 9 2 0 0 1 9 2 0 0 1 9 2 0 0 1 9 2 0 0 1 9 2 0 0 1 9 2 0 0
P
b
, B i t - E r r o r P r o b a b i l i t y . 0 1 5 . 0 1 . 0 0 6 . 0 0 2 . 0 0 2 . 0 0 0 8 3
M L D L o w e r B o u n d 0 . 0 0 8 6 0 . 0 0 4 6 0 . 0 0 3 6 0 . 0 0 1 . 0 0 1 0 . 0 0 0 3 6
R a t i o , P
b
= M L D 1 . 7 4 2 . 1 7 1 . 6 2 . 0 2 . 0 2 . 3
N o . o f C o d e w o r d s
E v a l u a t e d 2 2 4 0 0 2 2 4 0 0 2 2 4 0 0 2 2 4 0 0 2 2 4 0 0 2 2 4 0 0
P
b
, B i t - E r r o r P r o b a b i l i t y . 0 1 5 . 0 0 8 . 0 0 6 . 0 0 2 . 0 1 8 . 0 0 0 8 3
M L D L o w e r B o u n d 0 . 0 0 8 6 0 . 0 0 4 6 0 . 0 0 3 6 0 . 0 0 1 . 0 0 1 0 . 0 0 0 3 6
R a t i o , P
b
= M L D 1 . 7 4 1 . 7 3 1 . 6 2 . 0 1 . 8 2 . 3
N o . o f C o d e w o r d s
E v a l u a t e d 2 8 0 0 0 2 8 0 0 0 2 8 0 0 0 2 8 0 0 0 2 8 0 0 0 2 8 0 0 0
P
b
, B i t - E r r o r P r o b a b i l i t y . 0 1 4 . 0 0 8 . 0 0 6 . 0 0 2 . 0 1 7 . 0 0 0 8 3
M L D L o w e r B o u n d . 0 0 8 6 . 0 0 4 6 . 0 0 3 6 . 0 0 1 . 0 0 1 . 0 0 0 3 6
R a t i o , P
b
= M L D 1 . 6 2 1 . 7 3 1 . 6 2 . 0 1 . 7 2 . 3
N o . o f C o d e w o r d s
E v a l u a t e d 3 2 0 0 0 3 2 0 0 0 3 2 0 0 0 3 2 0 0 0 3 2 0 0 0 3 2 0 0 0
P
b
, B i t - E r r o r P r o b a b i l i t y . 0 1 4 . 0 0 8 . 0 0 5 . 0 0 2 . 0 1 7 . 0 0 0 8 3
M L D L o w e r B o u n d 0 . 0 0 8 6 0 . 0 0 4 6 0 . 0 0 3 6 0 . 0 0 1 . 0 0 1 0 . 0 0 0 3 6
R a t i o , P
b
= M L D 1 . 6 2 1 . 7 3 1 . 3 8 2 . 0 1 . 7 2 . 3
A L G O R I T H M A *
P
b
, B i t - E r r o r P r o b a b i l i t y . 0 1 . 0 0 7 5 . 0 0 4 5 . 0 0 2 . 0 1 . 0 0 0 3 6
M L D L o w e r B o u n d . 0 0 8 . 0 0 5 . 0 0 3 . 0 0 1 5 . 0 0 0 5 . 0 0 0 1 5
R a t i o , P
b
= M L D 1 . 2 5 1 . 5 1 . 5 1 . 3 2 . 0 2 . 3
T a b l e 6 : C o m p a r i s o n B e t w e e n A l g o r i t h m A * a n d A D i s t r i b u t e d P o p u l a t i o n V e r s i o n o f A l g o r i t h m
G A D E C : D e c o d i n g T h e 1 0 4 ; 5 2 ] C o d e .
2 2
-
8/2/2019 Genetic Algorithms for Soft Decision Decoding of Linear Block Code
24/25
-
8/2/2019 Genetic Algorithms for Soft Decision Decoding of Linear Block Code
25/25
L . D a v i s a n d M . K a u f m a n n ( E d s . ) G e n e t i c A l g o r i t h m s a n d S i m u l a t e d A n n e a l i n g , 4 2 0 { 4 6 0 .
H a n , Y . S . ( 1 9 9 3 ) . E c i e n t S o f t D e c i s i o n A l g o r i t h m s f o r L i n e a r B l o c k C o d e s U s i n g A l g o -
r i t h m A * . D o c t o r a l d i s s e r t a t i o n , S y r a c u s e U n i v e r s i t y , ( T e c h n i c a l R e p o r t S U - C I S - 9 3 - 2 9 ) .
M a i n i , H . S . , M e h r o t r a , K . G . , M o h a n , C . K . , R a n k a , S . ( 1 9 9 3 ) . G e n e t i c a l g o r i t h m s f o r s o f t -
d e c i s i o n d e c o d i n g o f l i n e a r b l o c k c o d e s . ( T e c h n i c a l R e p o r t S U - C I S - 9 3 - 2 5 . ) S c h o o l o f C o m p u t e r
a n d I n f o r m a t i o n S c i e n c e , S y r a c u s e U n i v e r s i t y : S y r a c u s e , N . Y .
M a n d e r i c k , B . , & S p i e s s e n s , P . ( 1 9 8 9 ) . F i n e - g r a i n e d p a r a l l e l g e n e t i c a l g o r i t h m s . P r o c . o f
t h e 3 r d I C G A , 4 2 8 { 4 3 4 .
M u h l e n b e i n , H . ( 1 9 8 9 ) . P a r a l l e l g e n e t i c a l g o r i t h m s , p o p u l a t i o n g e n e t i c s a n d c o m b i n a t o r i a l
o p t i m i z a t i o n . P r o c . o f t h e 3 r d I C G A , 4 1 6 { 4 2 2 .
S c h a e r , J . D . , E s c h e l m a n , L . J . , & O u t , D . ( 1 9 9 1 ) . S p u r i o u s C o r r e l a t i o n s a n d P r e m a t u r e
C o n v e r g e n c e i n G e n e t i c A l g o r i t h m s . F o u n d a t i o n s o f G e n e t i c A l g o r i t h m s . M o r g a n K a u f m a n n ,
1 0 2 { 1 1 5 .
T a i p a l e , D . J . , & P u r s l e y , M . B . ( 1 9 9 1 ) . A n I m p r o v e m e n t t o G e n e r a l i z e d M i n i m u m D i s t a n c e
D e c o d i n g . I E E E T I T , 3 7 ( 1 ) .
T a n e s e , R . ( 1 9 8 9 ) . D i s t r i b u t e d G e n e t i c A l g o r i t h m s . P r o c . o f t h e 3 r d I C G A , 4 3 4 { 4 3 9 .
W h i t l e y , D . ( 1 9 8 9 ) . T h e G E N I T O R A l g o r i t h m a n d S e l e c t i o n P r e s s u r e : W h y R a n k - B a s e d A l l o -
c a t i o n o f R e p r o d u c t i v e T r i a l s i s B e s t . P r o c . o f t h e 3 r d I C G A , 1 1 6 { 1 2 1 .