This paper describes a decision theoretic formulation oflearning the graph- ... extract the graphical model of a ##n from data (Cooper & Herskovitz, 1992; ...
Decision Theoretic Foundations of Graphical Model Selection Paola Sebastiani and Marco Ramoni KMI-TR-63 July 1998
!"# $ %& #$('$
)*,+,- * ./10*32 4 5 *365 78 9,: ; < =8 > <? @AB < C,: ; D : EF3B D 8 >3B 8: >3G(F < : < D H < D B H I D < JLK>3D M 8 ; H D < J
N*,O P +RQS*3TR+,65 U>1? VE 8 G3W 8XL8 G,D :Y >3H < D < C3< 8 Z[38\98 >LK>,D M 8 ; H D < J
] 0 2 4 O *3P 4 `^a g n _c h1o` aa3na b1k mec n1b1d g ad k ekn _ f e ddda a gi k elc ` j1h1c#fd a,rc ecc fs f d rd a g c` `c sa jL`d i a jr` c dk j_o ` dcd ilb e b td e k di ` kgc ugl i_i ee imvSl3n l g e o _ ci i kmw`i i a jf` j ci pk l c ko dx#_ c de^jm_ ` ji` apf dl k e o _ c udm`p kd e _uc ibk _ e_ vd q oz c q e {p od i a akab1l in aj1k g d k e ` ` i i j#ebc j1e i fh1c c o h o i ` o u` k as#k c_ adk n1_ a dda i i l,o n mk i` i e j#dpi dlj cd e f c d o1g o ` i a `a i aj#l n b j1e gi k h ` io d j1myac uh ` o k d_Sk ic ki e ~ c d f e dq a q `i m|b k o _ ` dd g fi mmb i o f d d } o ` xk s i l1j kd _ u dg a od c o da ag k i d lfo mi a i af l dn o1j1c g j1k `fi j1k _ a d1g d c e oe o i d ef#i f l1` ga _` j i k i d ap ` ej c ph co d j `i al` kj _ k de i p f e n1c g b d _ f3` g ck io3mc o io i f u(d o kx_ df ` k d _Sg ` ak `_ i ` jagb o e c i a h ao di mlo ik ia aml n c j1k g g _k ` ik _j1da f k d _ g di mi b b1k i ` ma c ch o` o a` ki s q oa n d kc ` e i g j_k a ik e k c _ k dd p f s d x g ` a ` i jb e i h o d mg c jh1dl i n j1fn1a ` j pc jd
g ` d j kh1i k k i mq n b ie s 3 i f ,d o, d ro d c g s k d ` ia `j,c x jrd o ` d ltd k ui e v a rc s d a ` c j3d c e j ` j p1 d g ` a ` i j#^_ d q QS/1 /1O /16P /,UX(D Z8 B [3>,D B : E18 9? ; ¡ ¢ £ ¤ ¤ ¥ ¦ §1¨ ©¢ ª« ¬3¤¢ ®1¡ ¯ « ¤ ¤ §3« ¬°¢ § ª ¤ ¡ ¤ §£ ¤¢ §±§£ ¤ ¡ « ² ¦ §,« ³¦ §´¡ « ¦ µ£ ¦ ² ¶· §3« ¤ ¶ ¶ ¦ ¨1¤ §,£ ¤S¸ KAY 1¹ XL? ; W : >U: C3@ =#: >3>,F3: >X: < 8 ?, I A 1 ]Sºº O /12 2 X(: ; B ?: =? >,D U>3? VE 8 G1W 8XL8 G,D :Y >,H < D < C1< 8 Z[18\98 >K>3D M 8 ; H D < J X(D E < ?1>U8 J3>18 H K>,D < 8 GUD >1W1G1?1=»X(U¼L AA½,¾¿ÀÁÂ#ÃÄ Ä ¸ Å ¹ Æ Æ ¼ Ç1 È ÉÊÂ#ÃÄ Ä ¸ Å ¹ Æ 1 3 Á,ËÉÌ ÍÂÎÏ Ð3Ñ Î,Ò Ó,Ô Õ1Ò Ö3× ÓÏ Ñ3ØÏ Ù1Ú1ÛÜÍÂÝ1Þ1Þ1Öß à1à Ú ÎÔÏ Ò Ö3× ÓÏ Ñ3ØÏ Ù1Ú,à Ö3×1Ò Ö,á ×3à Î,Ñ Ð3Ø Ò,
âã ä å æ å ç èLé,ê3ã ç ë ã ì å äí3ç î è3ï ð ì å ç è1æç ñòSç ï ã óô1ã ó ã ä ì å ç è õö#÷ øRùSúûüýRþLùS÷ ûø ÿ ! #"$%&(' $ ) " " # "*$ & + , - . - - -0/ )1% 2354 671 $ ) - 1 -0+ " . - 7 $ ) $ - " 8. 79$: ; < = >+ " %%? @$A B C(+ " D&E1 , $ ) $ - *F) 7 F" $ & . 1$/ )1. - G ( 1 ' 0) " " . "* $H HH I- "* $ 6$ 1 $/ - ("7 J(- ) F Dÿ7 1$$*$/$1 H 1 7 / 5 F0* 56" 1H 1$/ )1 - *- * H 1 - 5) " " "* $ * ) )$ 7 7" ) + "$0$$F K$) 6 1 0 I $/ 5 $FL ,1 " . & - + ! H - 1DE1 ($ M + I - 1 N$*$ 7 K$ - 1 / )1 - IF $ 5 (# FL & O $ ) PRQ + G 6IS T T U$VQ - F 6 S T T W$V$X5 *$ G 6$S T T Y$V Z[1 6 S T T \ 05 " - F /7 F) $$$ 0 + F - 1 H $/& 8 &F /. ) ) - D ÿ7F$$/# - - 1 N$* 6 F 1 1 + , 1$H + / , 7- $*$) $/H K$) $ 7 / , # 1 , F & 7 ) ) - 7 1H 1$( F) F $. H 1 /() - DE1$ . & ) ) - 1. F $ 5 - $, + + 1$ 0 - ) $ ] S DÿM 7 ) " 0F $ 7 7 $ ! 56 7 1, 1 7) ) " " ) $/( 1 K$) " I ( 1 0 " 1 0F (- ) * 1$0 - H F$$/ 1$0+ " D U Dÿ8 FM F) 5- - - 6$71 - 1 * *$)5 1 ) I) " " I - 1HF $ 5 )$ ) " " 6 "$,* $/ ^E1$ F,D _ED 1 EI1$ 0 F "7 1 1( 1 01 5 / )/ 0$ 1 5) 1$ "F " $ (7 17 1 - /D 5)$ ) " " 1$0F$ , 1 0 / 1 1 0 F) F $D` + 1 F - + $ + - 0) - I 1 7 - 1 - "7* 0) + F + * ( 7 / 65S T a b$V5c + / 6S T W U Dc - 1 0 - , "0F $- - 1 - ) " Fd - /00F 1$" I 5 I) I) " " ( $ F - + "$ 6 1 $ - $) " F * * 7 0 0 Ie > : > A e > A ? : BC < ? A e A f =09; f g B < h / 6S T a b D E1 7 - 1 - F* $ 5 1$F - $) - * " *F 1 7 , / - /0 1 7F 7 1 1$ / )$ I) " " 1 $ *$ H ,$ - $H) " F7 1&,\ i S $ 7 * - $Dj * 1 F 6 77 1 * 7 k $ I * - $ " 7 $ i kH 1 7- $F) K 1$ - (F 1 I - 1 $ /7 0 + i F) ! 0F 6 1$*5 / - - * * 5 1$ K$ - F $ 1 7 0 F) 7 1 0 *$" N$*$ 7* 0F $ I D ÿ7 1$$*$/$165 ,) - ) 6 1$ F0* . . * $, 1 7 - H) " F F7 "0 FF 6 - ,7 1( 1$0) " Fl 1 6 1 0$*F" I+ " - 6 - F) $* F $ F $ $ " 6 1$ F* $ 5 1 $ * - $ - #"( $& J(- * D&E1$,- $F) K & 1$, - 18 & 1 ,F ) - H &H) " F , 1$# / 6771 - 1 ( $) - 8 + - $F O $ ) HPmQ + G 6 S T T U$7"$H *- $/( 1$(F $ I - $.) - 7 H(/ . - 1. + , *$" 7 F $ 71 - 1% .- 7 1% $F, $ ( F /& 1 ,+ " D%Z.. 1$ 1 1 /
n
op q r s r t u,vw p t x p y r q z t { u | } y r t u$s t ~5(t | p $p p q y r t u #
# 0. $$ $ $.
L &, (H l 7 $ H
$ $ 0 $ $ $ $(
R (
7 , ( ( $$ $ $ . $7 ( 0 , 05 . I¡¡¢. $ $
,$ , $ 7$ [ 0 ,£ H $ ( ( $ 5 $, $ ¤ $0 $ , I H
7 .H¥ ¦( $§$ $&¨,$
7 $( $$ & # . & 5I # $.7 . $, 0 $&
0 $ ¤ H H§ ,© ª«¬%H®.¯R°±(² ³&´L¯Hµ&´¶R·I´¶7´¸(±(² H¬ ¹ , $ 7 , $ ( $ $ , , $ $ 0
,
$, $$ $ 00 $0
d
( 5 5 77 $ $ º 7 ( H
,$ 0
I $ »¼ ½M¾d¿(À,Á7ÂÀ,à ÄÅÆ(à ¾Ã ÇHÈÉà ¿Ç ϧ$ $ $ 7 50 0 ¤ 0 , I
5 ¤ 0 0
5 5Ê( Ë7ÐÑ# Ò( Ê( Ì Ó 5, Ê,$ËI$ R 0 ÊÌ 7Íl $I Î& $ ¤
Ñ%Ë7 Ó Ê(Ì ¤
IÊ(Ë Ï $0 ,£ . $ (
l , $,
ÔÕ Ñ#Ò Ö ÔÕ Ñ%Ë Ö 0 ¤
0 $ 7 $7$
5ÔÕ Ñ#Ò × ÍÖ 0ÔÕ Ñ%Ë × ÍÖ ( ( $ $ 7 0
IØ ¤ , Ð ÔÕ Ñ&Ù × Í(ÖIÚ ÔÕ ÔÑ&Õ ÍÙ Û ÖÍÖ Ú ÔÕ Ñ&Ù ÔÖ ÔÕ ÍÕ ÍHÖ × Ñ&Ù Ö 7$ ÔÕ Í(ÖI I $
0 $ $ 0ÔÕ Í,× Ñ&Ù ÖI I $ $$ 5 0 H
, , $¤ I Ü Ú ÔÔÕÕ Ñ#Ñ%ÒË ÖÖ ÔÔÕÕ ÍHÍH×× Ñ#Ñ%ÒË ÖÖ Û L7 . 7 , . ( $ ¤ Ð0 Ü.Ý ¦ IÑ%Ë0 0 5 Ü.Þ ¦ IÑ#Ò 5 . Ü ÚR¦ H $ . $ $ ¤ 0ß[$ ,ÔÕ Ñ#Ò ÖÚ[ÔÕ Ñ%Ë Ö Ü 7 £ Ü Ú#ÔÕ ÍH× Ñ#Ò Ö à ÔÕ Í,× Ñ%Ë Ö
7á â ã â ä á â ä å ã æ ç è å ä ß[á ä é êë 7ì é í æ è î 7 $ $ $â ì ï è
$ 0 0(Ñ# ÒI Ñ% Ë5 $¤ 0 ðñ Ú[ò Ñ#Ò Û Ñ%Ë ó$ 0ã å â ä é ê(á ë$ã å èIô 7 ò õ$Ò Û õ Ë ó$ 7$ õ Ù5 $7 #ö $$$ 7Ñ&Ù ô ÷ $7 Í( ( $(æ é á á ø ï$êå â ä é ê( $¥ ¦ , Ó ( Õ Ñ[Û õ ÖùHðûú Ð Òýõ Ë ü Õ ÑÛ õ ÖIÚ Ñ#Ò õ$¥þ ¦ Ñ%Ë ¦ÿ¥
) !
"
,
) (' , ! # , ,
& ( * % ( & ' ' * $
& ( * $ ! + + + ++ ) ( ( & ! # ' ' ' * %
-/. 0 132 465 78:9 ; < = < > ?@ A 9 9CB > A/@ D9CE9 ; < = < > ?F A > GH 9 IKJ:< @ DL M NOH > = =B P? ; @ < >? Q/D9RE9 ; < = < >?FA > G H 9 IS< =/A 9 F A 9 = 9 ? @ 9 ETGUT@ D9OE9 ; < = < > ?T@ A 9 9R< ?TVW< X PA 9N Y< ?TJ:D< ; DT; < A ; H 9 =/A 9 F M A 9 = 9 ? @/A Z ? E>I[?>E9 = Y = \PZ A 9 =A 9 FA 9 = 9 ? @:E9 ; < = < > ??>E9 = Y Z ?ETH 9 Z ] 9 =O^ G H Z ; _T; < A ; H 9 = `Z A 9a] Z H P9 ?>E9 = bQ/DP= YJ9Rc A = @C; >H H 9 ; @CE Z @ Z"Y3@ D9 ?6P = 9R@ D9EZ @ Z@ >d; D>> = 99 < @ D9 AOZ ; @ < > ? > A b Q/D9RH > = =a< ? ; PA A 9 ET< B@ D9O@ A P9R= @ Z @ 9R> Be:Z @ PA 9OA 9 ] 9 Z H =:@ >G9O&6fZ ?Ed@ D9RZ ; @ < > ?6; D> = 9 ?6< = g < =a@ D9 ?hA 9 FA 9 = 9 ? @ 9 Ei< ?6@ D9H 9 Z B:?>E9 = YZ ? Eh< @R< =RN< B/jlK k m Z ? EhLT> @ D9 A J:< = 9 b6Q/D9> F@ < IRZ H E9 ; < = < >?Y< b 9 b:@ D9n:o p q r s o tio u v s w tY< =:B > P ?ETGUTIR< ? < IR< x < ?XR@ D9C9 yF9 ; @ 9 EdH >= = baQ/D< =:< =:E> ?9 GU6z Z ] 9 A Z X< ?XC>P@ {CZ ? E6z B >H E< ?X:GZ ; _{^ |:Z < }ZC~; DH Z < B 9 A YN N ` bVA >I@ D9/@ 9 A IR< ? Z H?>E9 = Y J9; > IOFP@ 9O@ D9O9 yF9 ; @ 9 E6H > = =aZ @aA Z ? E>I?>E9 = YX < ] 9 ?T9 ] 9 A U@ D < ?X>?T@ D9H 9 B @:> B@ D9R?>E9 Y Z ? ERJ9CIR< ?< IR< x 9/@ D9a9 yF9 ; @ 9 EH >= =Z @/@ D9aE9 ; < = < > ??>E9 = bQ/D9:9 yF9 ; @ 9 EH > = => B@ D9CE9 ; < = < >? f Y Z H = >R_?> J:?TZ =/@ D9R
s r a> B3@ D9OE9 ; < = < >? f Y Z @/@ D9C?>E9 ! # f Y < = `j l N R^ f "R` lO ^ & f ` "R lK ^^ && "R " R`j l L J:D9 A 9@ D99 yF9 ; @ Z @ < >?i< =O> ] 9 AR@ D9T; >?E < @ < >?Z HE< = @ A < G P@ < >?d> Ba&X< ] 9 ?i"biQ/D9TZ U 9 = < Z ? Z ; @ < > ?T< =B > P ?EZ @:?>E9 ! # GU; D>>= < ?X 7 l Z A XIR< ? f R^ f "` J:D< ; Dd< =/9 \P < ] Z H 9 ? @:@ >@ D9RE9 ; < = < > ?TA P H 9CB > P ?EdZ G> ] 9 bOQ/D9OA < = _> B@ D9RZ U 9 = < Z ?6Z ; @ < >?d< = ; Z H H 9 E@ D9On:o p q r s o t6
s r aZ ?ET< @/< =@ D9aF>= @ 9 A < > AF A > GZ G< H < @ UR> BW@ D9CIO>E9 H; D> = 9 ?b Q/D < =aB > A IRZ H < x Z @ < > ?hDZ =a@ D9Z E] Z ? @ Z X 9@ D Z @OJ9; Z ?6X 9 ?9 A Z H < x 9R@ D9E9 ; < = < > ?dF A > GH 9 IGU P= < ?XCE < } 9 A 9 ? @H > = =B P? ; @ < >?= Y J:< @ D> P@IO>E < B U< ?Xa@ D9:FA < > AWF A > GZ G< H < @ < 9 =3> B& Z ? ER& bWQ/D9 L M NCH > = =B P? ; @ < >?RF9 ?Z H < x 9 =W@ D9C; D> < ; 9a> BWZ ?P? ?9 ; 9 = = Z A U; > IOFH 9 yIO>E9 HW^ & < ?= @ 9 Z ER> B3& ` Z =:@ D9O; D>< ; 9O> BZ ?T> ] 9 A M = < IOF H < c 9 ETIO>E9 H^ & < ?= @ 9 Z ET> B& ` b: ?X 9 ?9 A Z H Y J9RIRZ UJ:< = D@ >
¡ ¢ £ ¤ ¥ ¦ § £ ¨© ¦ ª« ª £ ¬ ®¯ ° ± ² :³ ´C³ µ¶R · · ¶ · ¸/± ®¹± º · ® ³µ/¯ »¸ ¼ ¯ ® ¹³ ´± ¸/½ ¯ ®¾C¹¶ ®a¾»¿¸ ± ®ÀO³ ´CÁ  Ãh° ¶ ¸ ¸ Ä ÉÌÍÉÎ Å:Æ ÇÈ ÉÊWË ÇhÌ ÁÐÏ Ì Î ÇiÎ Ï Î Ì Á Ñ Ò ´¿¸ ¼Ï Ó ÔO± ¸/³ ´O° ¶¸ ¸:± ®½ ¿· · ¹T± ÕW³ ´O¸ ³ ¯ ³ O¶ ÕÖ:¯ ³ ¿· O± ¸/· ¬ · ¸ ® ³ ¹T¾»T×O¶¹ ° Ç Ó¯ ®¹d×O¶¹ ° Ç Ôa± ¸/½ ´¶ ¸ ®ØWÙ ®³ ´ ± ¸/½ ¯ ¸ ¼³ ´C· ± ¸ Ú¸¯ ³:Û Ü Ì ¯ ® ¹Û Ü Î ¯ · Ì á ÞÊ Ï Ì ÎãâWËä ÝRÆ É Ó È ÞÊWËKßà ÆÆ Çh i Ç à Î á ÞÊ Ï Î ÌåâWË Á ¯ ® ¹¼³ ´ · Õ ¶ · ¼3³ ´æ¯ » ¸ ± ¯ ®h¯ ½ ³ ± ¶®h± ¸ ÉÎ ± Õ à Æ ÇiÎ á ÞRÊCç Ï Ì Î à Æ ÇhÌ á ÞÊ è Ï Î Ì ¶ · ¼ é¿ ± ê ¯ ° ® ³ ° » ¼3± Õ à Æ ÞTá ÇiÎ ÊçÆ Ï Ì Î à Æ ÇhÌ Ê à Æ ÞTá ÇhÌ Ê Ê èÆ Ï Î Ì à Æ ÇiÎ Ê Ê Ø ë/ì3íîhï3ð ñ6ò à ³/ó Î ¾a¯R¹± ¸ ½ · ³ aê ¯ · ± ¯ ¾° :µ:± ³ ´ô Î ¸ ³ ¯ ³ ¸ ¼ ¯ ® ¹° ³óÜ:¾a¯R¹± ¸ ½ · ³ :ê ¯ · ± ¯ ¾ ° µ:± ³ ´hô ܸ ³ ¯ ³ ¸ Ødõ¶ ·¸ ± ×O¬ ° ± ½ ± ³ »dµµ:± ° °¹ ®¶ ³ ³ ´ ê ® ³ ¸OóRÜ Ë÷ö Ü Ô¯ ® ¹6ó ÎË÷öÎ ø ¾» ö Ü Ô ¯ ® ¹ ö Î ø ØTùT¶¹ ° ÇhÌ ¸ ¬ ½ ± ú ¸:³ ´¯ Ì ³Cý ³ ´³ µ¶dê ¯ · ± ¯ ¾ ° ¸C¯Ì ý · ± ® ¹ ¬ ® ¹ ® ³C¯ Ì ®ý ¹¼W½ ¶ ® ¹± ³ ± ¶ ® ¯ °W¶ ® ÇhÌ ¼µC½ ¯ ®¬¯ · ¯ ×O ³ · ± ² à Æ ö Ü Ô á ûü ÊËû Ôa¯ ® ¹ à Æ öÎ øá ûü ÊWËû þ ø Ø Ò ´¿ ¸ ¼ ûü ± ¸³ ´:¬¯ · ¯ ×O ³ · Ì ÇiÎ ¸ ¬ ½ ± ú ¸³ ´¯ ³/óRÜa± ¸/¯C¬¯ · ® ³/¶ Õ3ó Î ¼ ¯ ® ¹³ ´C¯ ¸ ¸ ¶½ ± ¯ ³ ¹ ê ½ ³ ¶ ·a¯ ¸ ¸ ¶½ ± ¯ ³ ¹³ ¶ Î Çh ý Øù¶¹ ° Îý Îý û ü ¬ ¯ · ¯ ×O ³ ·Oê ½ ³ ¶ · ´¯ ¸C ° ×O ® ³ ¸ û Ô Ë à Æ ö Ü Ô á ûü Ê ¯ ®¹ à Æ öÎ øá ö Ü Ô È ûü ÊOËSû Ô ø ØdÙ ³R± ¸Cµ ° ° Ú®¶ µ:® Æ ¸ Õ ¶ ·W± ® ¸ ³ ¯ ®½ ³ ´· ½ ® ³3· ê± µh¾»Cÿ/ ½ Ú · ×R¯ ® Æ ä Ê Ê ³ ´ ¯ ³3³ ´×R¯ · À ± ® ¯ °° ± Ú ° ± ´¶¶¹ Ø Ø à Æ ÞTá Ç Ó Ê ± ¸W ¯ ¸ ± ° »OÕ ¶ ¿ ®¹¿® ¹ ·³ ´:¯ ¸ ¸ ¿×O¬ ³ ± ¶®û ¸Wü Ó ³ ý ´ ¯ ³ Ä ä
!
" Ç Ó # Ø ! $ % & ' ! ( $ % )' Ø ! ! ! *! + , ¿¬ ¬¶ ¸ W³ ´ ¯ ³ ¼ À ± ê ® ÇhÌ ¼ û -.Æ û Î È È û / 0 2Ê 143dÆ 5Wè ô Ü È È 5Wè ô Ü Ê ¯ ®¹ û þ 67.Æ û þ Î È È û þ / 8 2Ê 1 3dÆ 5Wè ô Î È È 5Wè ô Î Ê ¼µ:´ · 3dÆ 5WÎ È È 5Ñ 9Ñ Ñ Ê ± ¸a" ¯ :a± · ± ½ ´ ° ³C¹±Ñ ¸ Ñ ³ Ñ · ± ¾ ¿³ ± ¶®µ:± ³ ´6´ »¬ ·  ¬ ¯ Ñ · Ñ ¯ Ñ ×O ³ · ¸ Æ 5WÎ È È 5Ñ Ñ 9 Ñ Ê ' i Ç Î û 7 6 Ø ;a± ê ® ¼µO¯ ¸ ¸ ¿ ×O Ñ Ñ aÑ ³ ´ ¯ ³ Ô .Æ û Ô Î È È û Ô / 8 Ê 173dÆ 5WèÆ ô Î ô Ü Ê È È 5WèÆ ô Î ô Ü Ê Ê Ø Ò ´ ¸ Ñ Ñ ¬ Ñ ¯ · ¯ ×O ³ · ± ² ¯ ³ ± ¶ ® ¸ ®¸ ¿· ³ ´ ¯ ³ ¼ ¯/¬ · ± ¶ · ± ¼ ³ ´¬ · ¶ ¾Ñ Ñ ¯ Ñ ¾± ° ± ³ ± ¸ à Æ ö Ü Ô Ê ¼ à Æ ö Î ø Ê ¯ Ñ ®Ñ ѹ à Æ ö Î ø á ö Ü Ô Ê ý ¯ · R¯ ° °3¿® ± Õ ¶ · ×S¯ ®¹d¯ · O¾ ¯ ¸ ¹T¶ ®d³ ´O¸ ¯ ×OO³ ¶ ³ ¯ °3¬ · ± ¶ / ·:8 ¬ · ½ ± ¸ ± ¶ ®T¶ ® ûü Ó ØCà ³ < Æ öÎ øá ö Ü Ô Ê ¾ Ë = ø >3Î < Æ ö Î ø á ö Ü Ô Ê ± ¸3³ ´/¸ ¯ ×O¬ ° Õ · é¿ ® ½ » ³ ´/¸ ¯ ×O¬ ° Õ · é¿ ® ½ »C¶ Õ / 0 Æ ö Î ø á ö Ü Ô Ê ¼ ¸ ¶a³ ´¯ 2³ < Æ ö Ü Ô Ê7 Ë = Ô >3Î < Æ öÎ øá ö Ü Ô Ê ± ¸³ ´O¸ ¯ ×O¬° :Õ · é¿ ®½ »¶ Õ öÎ ø Ø Ò ´ ®Ä ¶ Õ ö Ü Ô ¼ ¯ ®" ¹ < Æ öÎ ø Ê7 /0 @Æ 5WÊ @Æ 5Wè ô ' Ü AB< Æ ö Ü Ô Ê Ê ? Æà ÞTá ÇhÌ Ê Ë Ô >Î @Æ 5 AC< Ê @Æ 5Wè ô Ü Ê /8 @Æ 5WÊ @Æ 5Wè ô Î AB< Æ ö Î ø Ê Ê ? D Ê E ø >Î @Æ 5 AB< Ê @Æ 5Wè ô Î F /0 Ü AB< Æ ö Ü Ô Ê Ê ? @Æ 5WÊ @Æ 5Wè ô ' à Æ ÞTá ÇiÎ Ê Ë Ô >Î @Æ 5 AC< Ê @Æ 5Wè ô Ü Ê /8 @Æ 5Wè ô Ü Ê @Æ 5WèÆ ô Î ô Ü Ê AC< Æ ö Î ø á ö Ü Ô Ê Ê ? D ø >Î @Æ 5Wè ô Ü AC< Æ ö Ü Ô Ê Ê @Æ 5WèÆ ô Î ô Ü Ê Ê G
HI J K L K M N"OPI M Q I R K JSM T NU V R K M NLM WXYM U I Z[I Z I J R K M N \ ]^Y_ `ab\ c a d e \ ] \ f _ e g ]ih]^a j'\k a ]a j \ lnm o pCl g d dq h]f _ e g ]"e d_ gYf `gg d arg^a lsut e q y w vw x y'z{ |2} ~ z{ |2}{ ~ t ~ w B{ t t s z{ |2} ~ B{ z{ |2}{ ~ t ~
{ y t t t u s t v!y z{ |2 z{ |2} ~ B{ { z{ |iB2 z{ |2} ~ t q_ `aa a f _g q_ `a!j e g j` ca j o \ j \ ra _ a j de d]a kl e k e l a q g je ]d _ \ ]f a! `a ] _ `aq j a ha ]f e a d y w { t \ j a!l \ j k a n\ ]^Y { s { sut _ `a ] "e d a he \ l a ] __ gi_ `a!l e a l e `gg^"j \ _ e g"_ a d _ { ba j k a j n \ ]^"_ `ab\ c a d e \ ]ij hl aa f gra d'a he \ l a ] _'_ gY_ `af l \ d d e f \ ld e k ]e f \ ]f a_ a d _ ]u_ `e df \ d a s e d!\ f f a _ a ^e q2l g k ¡ x ¢ £ ¤ ¥ t ¦ ¢ £ § ¥ t ¦ `a j a" ¡ x ¢ £ ¤ ¥ t ¦ ¢ £ § ¥ t ¦ e d_ `a { ¨ |2 © h\ ] _ e l aig q\B ^e d _ j e h_ e g]Cg ] { ~ t¨ª { ~ ¨« ^a k j a a dYg qq j a a ^gr"«¬'`hd `a ] { l g k t { sut ¨l g k t { s ¡ x ¢ £ ¤ ¥ t ¦ ¢ £ § ¥ t ¦ _ `a"^a f e d e g] j hl a de ]Bg _ `C\ j g \ f `a d\ j a e ^a ] _ e f \ l 2'g _ a_ `\ _ e ]Y_ `af l \ d d e f \ l\ j g \ f `_ `aj a k e g]Yg qn_ `ad \ rl ad \ f ae ]Y `e f `"sut e dj a ® a f _ a ^i\ d_ j harg^a l e d\q h]f _ e g]Yg qn_ `a]hra j'g q2d _ \ _ a dg qn_ `a \ j e \ l a d¯"t \ ]^Y¯ ° ±² ± ³"´ µi´¶Y·Y¸«¹nº!¸»"¼½ ºYµ ¬'`aiq j \ ra g j ^a d f j e a ^e ]u_ `aij a e ghd!d a f _ e g ]4f \ ]uaik a ]a j \ l e ¾ a ^_ gC_ `a d e _ h\ _ e g]e ] `e f ` a"`\ a"\id a _g q' \ j e \ l a d¿ ÁÀ ¯"t  à à à  ¯!Ä Å 2\ ]^BaYl gg q g j\ ÆÇÈ_ g j a j a d a ] _ _ `a e ]^a a ]^a ]f a'\ d d hr_ e g]d\ rg ]k_ `a' \ j e \ l a d 2pa _É 7À s  sut   sBÊ Å a'_ `ad a _ g q\ l lgd d e l arg^a l d j a j a d a ] _ e ]k!_ `agd d e l ad _ \ _ a d'g q \ _ hj a ËBa e l l a a _ `ad crg l s _ g^a ]g _ a _ `aÌÍÎ Î rg^a l Ïn_ `arg^a lg qrh_ h\ le ]^a a ]^a ]f a'\ rg ]k_ `a \ j e \ l a de ]Y¿" ¬'`a d aÐ rg^a l d^a _ a j r!e ]a_ `a\ f _ e g ]id \ f a `e f `"e d ]g ªÑ 7À Ò Â Ò t Â Â Ò Ê Å\ ]^"_ `a \ f _ e g ] Ò Ó j a j a d a ] _ d2_ `af `g e f a g qnrg^a ls Ó 2¬'`a l gd d2q h]f _ e g]!e d2k e a ]!c!\ { Ð Ô"{ Ð _ \ l a Ï Ò Ò t Ò Ê s m t Ê t Ê sut t m Õ sªÂ { Ò2 { sBÊ Ê Ê t m Ö `a j a Ó w e d_ `a l gd de ]f hj j a ^!e q_ `a _ j ha d _ \ _ a g q \ _ hj ae ds Ó \ ]^Ys w e df `gd a ]¬'`al \ j k a j ]hra j'g q2gd d e l arg^a l d e ]^hf a d \ ]ia ×\ ]d e g]"g q2_ `a^a f e d e g ]"_ j a a!e ]iØne khj aY 'g^a!Ù t e l l`\ aÐ j \ ]f `a d a \ f ` g q_ `a rÁf g j j a d g]^e ]k!_ gYg ]ag q2_ `ag d d e l a\ f _ e g ]d Ú\ f ` j \ ]f `f g j j a d g ]^e ]k _ g_ `a \ f _ e g ] Ò w e l l _ a j r!e ]\ _ a e ]\j \ ]^gr«]g^a'Ù w f g j j a d g]^e ]k _ g _ `aYÛ j a a l \ _ e g ]Üg q_ `a'_ j ha d _ \ _ a g q \ _ hj a \ ]^!e _2 e l l_ `a ]aa ×\ ]^a ^!e ] _ gÐ j \ ]f `a d j a j a d a ] _ e ]k_ `agd d e l ad _ \ _ a dg q2 \ _ hj a ¬'`hd \ _'_ `al a \ a dg qna \ f `"j \ ]f `Y_ `a j a e l la _ `a"l g d de ]f hj j a ^Ï Ó w nÝ m  Р¬'`a"b\ c a d e \ ]u\ f _ e g ] ÒÞ e d_ `a ]Bq gh]^ cCr!e ]e r!e ¾ e ]k Ê _ `aa ×a f _ a ^il g d d ¬'`aj e d Yg q2_ `a\ f _ e g ] Ò w \ _ ]g^aÙ w e d'ß { Ò w  à 2ªá Ó â Ó w { s Ó à \ ]^ ã
äå æ ç è ç é ê"ëìå é í å î ç æïé ð êñ ò î ç é êèé óôYé ñ å õöå õ å æ î ç é ê
ý
ûYù ý
ûYø
ûYù ý
ý
ý
þÿ þ
û!ø
ý
û ü " ÷Cú û!ù
ý ûYü ÷Cù
þ ý
ûYø
ý
ý
û ü Y ÷Cø
ûYù þÿ þ ý û"ü ÷Cø ù
þ ý
û!ø
! #"$ %&' ( )*+ , - .+/ % 0 1 2+3 4 $56 7 8+9 : ;# =< >? 7 @7 8#A= B ? 7 C? ( ( 7 +7 8 7 ( CA= B C >7 $ D#E F GIHKJML N O PQR Q S T U T L VXWN L Y Z Q []\T O P!R ^ O ^ 2*_ U O ^ O QL `a#^ O bN Qc ' ^ S O T L VU W^ S Qg ' - % ú 1 % ü 1 d d d 1 % e 4 _ \ PQ N Q % , T UhO PQ!S PL T S # Q L `÷ , _ ^ VR+Z L U U ` , , T Vkj l m _ \T O P*n 0h' ;h` L N=o'r p q_ O PQXsh^ t Q U T ^ V ^ S O T L V T U % T ` u / ÷ , v 2*3w u / ÷
÷Cú 1 ÷uü 1 d d d 1 ÷fe 4 _ bVS O T L V R Q iVQ R*^ U 0 v 2+3 ` L N!^ Z Z q ' p o x
y=N L L ` x{z 7* # >)8k7 f 8 |}7 8 7+.+/ % , 1 2+3=~ .+/ % 0 1 2+3* 9 < (* q ' p o $> + 7 8 7 , v , v u / ÷ , v 2+3hw u / ÷ 0 v * < X ( p o @ 7 8
+ . / + . /
u / ÷
u / ÷ 9 # ( ü è à>ò ä ü !H ä ü ð ß ò ô)I ä KJ!ê ü öML è ü ç âNBá õ , - ù>ö O ê-ê ï#ä ü ó&&P ö ó&QSR ä ü ç ê ñ>è â ó N öØ õ , , þ Ú ö)T å4ß æ ä ç è ß àbî&ä â ã-ê>áì ê ü4â ã-äè à=á>í=é â è ê-àeê ìï=ü ê ë#ß ë#è ð è ç â è é à>ä â B ê ü > ç4ì ü ê-îxá>ß â ß öMUV1 4 9&2 9 [ ó\ ó& ù , ]W > Þ ö R ä é ä ü îeß à ó^ ö4Ø õ , -, Þ Ú ö å4ß æ ä ç è ß à_à>ä â B ê ü > çì ê ü&á>ß â ßbîeè à=è à-ò ö_61 0 1U"2 9&2 9 [V1 9&A`9X8 aM5 7 A [W7 62 3 4 8 b 7 > ? ó c ó#Þ , >] õ õ >, ö d ß í-ü è â ä à ó G öØ õ , , Ü Ú öfeM> 1 g$