Exploration and Inference in Learning from Reinforcement Jeremy Wyatt Ph.D. University of ...


    !"#$ !%&  ' ()! '*+

,-./-1032546287 99

NIVER

S

IT

TH E

U

Y R

G

H

O F

E

D I U N B

: ;=@< AB CEDGFIHKJLCEM!NPORQSTUCVBWUX HKYG; Z\[G[^]


 




    !#"%$&!('#)*)*+&+!#,)#-/.01"12.345".0'6175.084"9+:#)#;+75.0'9-?)A@B7.0-?)#7@CD1)E'A45.0+F!>G.0'E.3H)#$)#"I2JK)#.:L!>1+6$*HM+".N1) O +/$11P)#$)#P!>7.3'Q@N)*+5"R#.0" ".3"S;"1"P!T45@D$S)#-U)V:#WXW1".)A"S1) X.0"1.0'Y175.084"Z-?)#[)A\1)A30.0'YX*;50)#7!>.)A]!#+%.0-?^.3N.0-=)#7@N\[!>7.3'I _S.7"1a`S+5.0"1.0'A45.0"/$cbdF^bZ3eW)VbfFX*;g)#7!>.)AWhiXW;5)A.0!>.)AC17!#+hi)>jk!#+Nbf5!> `l1G@mX*;g)#7!>.)A-?)#P-?44dX*;50)A.!>.)A I `no.3"P!>'A4+!>P7!>@N!#D!#"1eW"Pbf7 ..0"f@C)#D!>;;5)#;7.0!>1,1)]@[email protected]"1,.0"f0!>11^@C!#"74#Io`p9;5!>.340!>..0"f!>;;)#;G.0!>1 bfqbZKbd!#F1)r@C;5)st!>7.3' !#'#)#7.5@N"N!#"M;5!>N)#-TK;)W""N)#-u+".'A.0' ! )A1)A0I `p-=)#G@C+t$*v.0"N.3".'AN`N+:#)#;!r*4@Y$N)#-u)V:#,@C!#"74"M)#-TK!>'#wx"]!#"1e eW)Vbf0+'##Iy O 7"1)#-P"1Y.0"^!F@C!#"74D)#-PD;)#$g!>$5.00.nF)#-o!M;5!>.0450!>f)A47"D)#!#.)Ak$.0'MY)#;5.0@N!#l)A47"1/)#-a!#.)A ITza".0@N!>1)#7"Q!>C+:#)#;+K-=)#Q.0"Q@C!#"47 -?)#N$))A!#(!#+v)AWhi$))A!#(;5)*"7"1"Ivy"19!>245"1+v.0(4761){+:#)#;t;)#$g!>$h .00.0cH@N!>75.0'E1G.08*4"D-=)#/'A4.0+.3'9FXW;5)#G!>.)AWhiXW;5)A.!>.)A{17!#+hi)>jSIK|};7))#.0";7"1\1+(5!>N)A2"4Gv@C)W+(bf.00d)A:#'#K.0(%3.0@N./1)H9)#;.0@F!#[;U)A3.0#I _)A00)Vbf.0'D.0"Z`o+:#)#;9!#]1)#;5.0^@C!#"4Q)#-~!#"1ehieW)Vbf0+'##RW$5!#"1+])AF^;7:*.)A45" @C!#"4#Id|Q2!#'#)#G.@.0"E+:#0)#;U+Ebf.0G%'A4.0+"X*;50)#7!>.)A2-?)#-€44TXW;5)A.0ph !>.)A($*6".0'9!#.)Avb^.07(.0"/XW;1+v1) !#+(1)H9'#!>1"N+4.0)A6.3 1)#;#I‚zZ@C;5.G.0!#dbZ)#et.3"C;"11+.0vbf.37t"457q@N)*+5"C)A41;-?)#7@ƒ)#MXh ;5)#G!>.)AH@C)W+",bf.7"1;T1)2X*;g)#7!>.)A-?)#u-€44XW;5)A.!>.)A )A !%:L!>G.c)#$5!#+5.P!#"1eW"IP`nd.0"a!#3"1)Y")VbfM)Vb^@N!#"4"d+:#)#;+F!#M$^4"+F.0C;5)#$5!>$5.03.0"1.0 :#7. O !>.)A9)#- ;U)A3.0." !>7+%-=)A@.0-?)#7@CI y.3"N".3"M!#0"){XW;50!#.0"M)Vb„kXW;5)#7!>.)Aq;)#$50@…!#$E:W.bZ+k‰>Š=‹ŒiŽ#@C)W+"R1)K$F)A17!#"11+6bf.0 X.0"1.0'H‘’GŽ>@C)*+"I]`p6“ !>;1C” "1)A@CY+.0"1!#XW1".)A5")#-S!#2X.0"1.0'CXW;5)#G!>.)A24G.0"1.0Q!>u;7"1\1+~IZyuG!>;1 ;"\"a@C;5.7.3!#7"4"P+@N)A"117!>.0'Tf"4;7.0)# ;-?)#7@N!#5 )#-"747N+5.0"1!#@Ch )W+"IEy5.0"Tbd)#e .'A3.'A\"uM;5)#$5@N"D.0\:#)A0:#+r.0r!>11@C;.0'K1)+7.:#]@C)W+‡hi-? +.0"!#lXW;5)#7!>.0)AK@C)*+"If`•Q.0"Q)A045++E5!>,.3E!#"1",bfYXW;5)#G!>.)AE–]. .0"/)#-,.0@C;)#!#%@C)W+‡hi$5!#"1+(@C)*+"C!>7%")A@C.0@C";7-=7!>$gM1)H.N@C)W+‡hi-? )A41;5!>"I

.0.


 





 U y6".0'A0 @C)A"1".'A. O !#\E!#7e*)Vbf+'#@C\@/4"1E'#)1).043!>f!#"+:#)#1+k!C'#)*)*+K+!#~)#-S.0@NT1)M;g.0' @CD";5!>7!>1Du;)[email protected]".0'C.0+!#"f-=7)A@ D+.3"1.0]"" 5!#E!#-=hi$5!>e#+E)A" g!#"fbZ3 !#" ;)s:*.0+5.0')A47!>'#@CP!> 5!#"e#;5S@NZ'#)A.0'^7)A4'ADd@C)#7[!>G+4)A4""1!>'#"P)#Q;)1I #)A%!#"Z$M!#%.0:>!#04!>$5^"1)A47Q)#-l@N!>@F!>.0!#UX*;.0"Q!#+M7.'#)A4R !#+r.0"u)A@N@N\"/!:#];)A@N;1+ @CM1)E;54G"4N!:#*4"/`,bZ)A450+ )#Y)#bf.0"F!:# )A".3++ R!#+9b^.0795!:#D;5)V:#E-=745.1-?45 I | "1!>G7k;) 1Q.3"f:#T!>7.0+2)A4,.0E)A@N;51.0"1)A0!>.)A~Rg!#+E/@N)#$5.0u7)#$U)#.3" 0!>$ .0zZ+.0$54'Ak!#",;)s:# !9!>1hi)#;5.0@N!#P"11.0'2.0bf.0Gk1)9bZ)#eUI`Q5!:#C'A!#.0+ .0"7.'A\o.3\1)Y;)#$g@N"P)#- )#$)#.0"Z!#+N7.0-?)#7@Ca!>7.3'T)A4'AM)A\:#G"!>.)A" bf.%!C*4@Y$U[)#- ;)#;5#IS`•%;g!>.040!>[`ZbZ)A43+]3.e#,1)N".0'AQ)A4Jk!>.0 H"1!#+E-=)# ;5!>.]+.0"4"7".0'uu@N! p)#G.cM)#- @YM.0+!#"[bf.%@CT!> )A,.0@C,)#f!#)# )V:#f ;5!#"1Y]#!>7"IK`u!:#%!#0"1)K$U O 1+ -?)A@ +.0"4"7".)A"Tb^.! Z.0!>e{“[)A'A"1.01:L!>!#!WR |Q""  !#0e#R*ˆW.0@N)A# eW.0"$R A)A %Q@N.7.0"'R &Q4)D“[5!>'A!#"RˆW!#+G!  !#+5!#)R\zZ+bd!>G+ #)A")R ([.00o“["11G")R (d7.0+'#* Q!#00!#@9+R \!#" ^!#0;UG.0 R!#+  7!#!#, @ %Q!#)A IC^.07!>G+ :#%"1;Y!E*4@Y$u)#-)A47"Y!#"".0".0'E.0 F045.0+!>.)AH)#- )#$g"4]@N!>@N!>.0!# 1XW"Io`o!#@ '#7!>1-€4U1) A)A- %Q@N.07.0"/R .u!#0 7bd'! 1T!#+]|^"7  !#e# -?)#d)A@F@C\"[)A ".3"+7!>-?" !#+2!#""7.0"1!#ub^.%;)*)#-7!#+.0'I `N.0-?)#7@N!#36!>115++7@C\%)#-uJk!>@N!>.0"9!#5+ ˆ*!>.0".0"R#!#+YbZ)A43+D0.e#Z1)^5!#eY“d)A0.0D|^.1e#!##+ (d3 Q!#@Y$5T-?)#S@F!>e*.0'@ $)#  1)VA!>$50/!#+K.0-?)#7@N!>.:##Iyf!#eW"f!#0"1)M'#)M1) (d4 Q!#@Y$5%-=)#,+.0"74"".)A5" )A7.0' bd)#eH.0r“[!>;51" 5IM`,bd)A40+ !#3"1)E0.e#C1)K!#eHy.0@B“[)A0"T-?)#Y0;5.0'9@CF")#u)A4/! 0!>'#*4@D$^)#-a)A@C;541Q;)#$g@N")s:#T/#!>7"R !#+K-=)#,;5!>.2!#"bZ7.3'M"1)A@N !#00M+4@Y$28*4"1.)A"I `f' p)s#+H;"1.0'%;5!>7",)#-Z.3"^".0",!>D!%45@D$,)#-Zbd)#eW")#;5"T!#5+Kbd)A40+H3.e#Y1) !#eW)sbf+'#/-?45+.0'-?)#^"1)A@ND)#-P"1Y-=7)A@# %^;g!>@C^)#-P|^. O .0!#~`•100.'#5#I y.3"["1!>7G2b[!#"!>7.+2)A4 bf.00,.3%.; )#-P!#2z dˆW“"!>77K"14+".;lI _S.0!#00&`2bZ)A450+ 3.e#r1)&5!#e @Y -€!#@N.0#RYbf):#00)A4"‚"4;;)#.:# )A4'A)A4@Y%"4+."IS`[!#@ .05+$1+]1)N@9I

.0.3.

   d
 

`^$k+0!>!>T`^)A@C;)A"1+.0"Q".3",\.7E@Y*"10-Z!#+k!>u.,+"G.$"Q@Y )Vb^9"1!>7G I

#7@DA!>1

za+5.0\$g4'A |^;7.0 R   

.0:


     "!$#&%('#*)+# , - # .!$//$0 3 245768$'09#  3 245A2, >I >IED >EI H >I 5 >EI I >I ” >I  >EI L

 

  21 : :> ? D H I KJ

JK)#$5.0uf)#$U)#" ITIuIuITIuIuIDITIuIuITIuIuITIDIuIuITIuIuITIDIuIuITIuIuITIDIuIuI |^;;50.0!>.0)A"[-=)#^)#$)#GF~!>75.0' ITIuIuITIDIuIuITIuIuITIDIuIuITIuIuITIDIuIuI %Q7.:W.0'M“d)A1)A007"[-=)#^za@Y$U+5++Eˆ*W"11@N"6IuITIuIuITIDIuIuITIuIuITIDIuIuI .3-=)#G@C\7 F~!>7.3'…IuIDITIuIuITIuIuITIDIuIuITIuIuITIDIuIuITIuIuITIDIuIuI o7)#$5@N"[;541.0'N8 F{)A\1)F)#$)#"2ITIuIuITIDIuIuITIuIuITIDIuIuITIuIuITIDIuIuI   zPXW;5)#G!>.)A9.02!>G.0'/-=7)A@ u.3-=)#G@C\ IuIuITIDIuIuITIuIuITIDIuIuI H |Q""4@C;5.)A" !#+2JK)W+)A)#'# IuITIuIuITIDIuIuITIuIuITIDIuIuITIuIuITIDIuIuI H MQ'A!#5.0"!>.)A IDITIuIuITIuIuIDITIuIuITIuIuITIDIuIuITIuIuITIDIuIuITIuIuITIDIuIuI  5

N 609(>%(O$0P @ >5Q#&A# R# ?&S D*I  Jk!>e#)V: a)W""1"YIuIuITIuIuIDITIuIuITIuIuITIDIuIuITIuIuITIDIuIuITIuIuITIDIuIuI ” *D I >I  Jk!>e#)V: %Q.0"7.)A o7)*""" IuIuITIDIuIuITIuIuITIDIuIuITIuIuITIDIuIuI  *D IED JK)*+30.0'C!#2|^'#\phczZ\:W.)A5@C\^.0\1G!#.)A ITIuIuITIDIuIuITIuIuITIDIuIuI  *D IE*D I  yuza:*.7)A@C^IuIDITIuIuITIuIuITIDIuIuITIuIuITIDIuIuITIuIuITIDIuIuITDUJ *D IE*D IED yu|f'# IuITIuIuIDITIuIuITIuIuITIDIuIuITIuIuITIDIuIuITIuIuITIDIuIuITDUJ :



D*IEH MQ;.3@N!# )A0.0." IuIuITIuIuIDITIuIuITIuIuITIDIuIuITIuIuITIDIuIuITIuIuITIDIuIuITD5 D*I 5 o7+.0.)A IuIuIDITIuIuITIuIuIDITIuIuITIuIuITIDIuIuITIuIuITIDIuIuITIuIuITIDIuIuITDI D*IEI “d)A1)A ITIuIuIDITIuIuITIuIuIDITIuIuITIuIuITIDIuIuITIuIuITIDIuIuITIuIuITIDIuIuIT D  D*I ” ˆW4@F@N!> IuIuIDITIuIuITIuIuIDITIuIuITIuIuITIDIuIuITIuIuITIDIuIuITIuIuITIDIuIuIT#H ” 609(>%(O$0P
7: C!$AO$0  *H I  `p\1)W+4.0)AEIuIDITIuIuITIuIuIDITIuIuITIuIuITIDIuIuITIuIuITIDIuIuITIuIuITIDIuIuITHL *H IED y.3e*.3'/!>$)A4 XW;5)#G!>.)A ITIuIuITIuIuITIDIuIuITIuIuITIDIuIuITIuIuITIDIuIuIT H  *H IEH yu"7.0'AT"1!>1/!#"1a$5!#5+.[!#"1eW"IuIuITIDIuIuITIuIuITIDIuIuITIuIuITIDIuIuI 5RJ H*I 5 yu@/4.hc"1!>1D!#"1 ITIuIuIDITIuIuITIuIuITIDIuIuITIuIuITIDIuIuITIuIuITIDIuIuI 5$5 *H I 5I  lF )*!#!#+9+.0"1!#XW;5)#G!>.)AvIuIuITIDIuIuITIuIuITIDIuIuITIuIuITIDIuIuI 5.I *H I 5IED zoX*;50)#7!>.)A9JK!#"4"…IuIuITIuIuITIDIuIuITIuIuITIDIuIuITIuIuITIDIuIuI 5  *H I 5IEH “d)A@Y$5.05.0'JE!#"4"kITIuIuITIuIuITIDIuIuITIuIuITIDIuIuITIuIuITIDIuIuITIUJ *H I 5I 5 JK)*+‡hi$5!#"1+9:W"IaJK)W+‡hi-?uzPXW;5)#7!>.0)A IuIuITIDIuIuITIuIuITIDIuIuITI  *H I 5IEI %Q.0".0)A2f40"ƒIuIuIDITIuIuITIuIuITIDIuIuITIuIuITIDIuIuITIuIuITIDIuIuITID *H I 5I ” yuzPXW;5)#7!>.)A (d)A*4" IuITIuIuITIDIuIuITIuIuITIDIuIuITIuIuITIDIuIuITIH *H IEI ˆW4@F@N!> IuIuIDITIuIuITIuIuIDITIuIuITIuIuITIDIuIuITIuIuITIDIuIuITIuIuITIDIuIuITI 5
7.0"1)A IuIuIDITIuIuITIuIuITIDIuIuITIuIuITIDIuIuITIuIuITIDIuIuI 5I ”*I  y !#"1eW" IDITIuIuITIuIuIDITIuIuITIuIuITIDIuIuITIuIuITIDIuIuITIuIuITIDIuIuI 5I ”*EI D |^'#\"IDITIuIuITIuIuIDITIuIuITIuIuITIDIuIuITIuIuITIDIuIuITIuIuITIDIuIuI 5I ”*EI H JK)W+ ITIuIuITIuIuIDITIuIuITIuIuITIDIuIuITIuIuITIDIuIuITIuIuITIDIuIuI :W.

”#”

”  ”L ” 

AJ 

 

UH 

5I ”*I 5

f"4" ITIuIuITIuIuIDITIuIuITIuIuITIDIuIuITIuIuITIDIuIuITIuIuITIDIuIuI 5 5I ”*IEI %,.0"45"".)A{IuIuITIuIuIDITIuIuITIuIuITIDIuIuITIuIuITIDIuIuITIuIuITIDIuIuITL  5 I  zPXW1".0)A" IuIuIDITIuIuITIuIuIDITIuIuITIuIuITIDIuIuITIuIuITIDIuIuITIuIuITIDIuIuT I LI 5IEL “d)A34".)A"IuIDITIuIuITIuIuIDITIuIuITIuIuITIDIuIuITIuIuITIDIuIuITIuIuITIDIuIuT I LI

@ 5 # #*R# I*I  `p\:#"1.0'A!>.0'ND$U5!:W.)A4 )#-
 IuIuITIDIuIuITIuIuITIDIuIuITIuIuITIDIuIuI I *I I >I  zoX*;7.0@N\G*I I IED zoX*;7.0@N\G*I IED IuIuIDITIuIuITIuIuITIDIuIuITIuIuITIDIuIuITIuIuITIDIuIuI KJ  *I I >IEH %,.0"45"".)A{IuIuITIuIuIDITIuIuITIuIuITIDIuIuITIuIuITIDIuIuITIuIuITIDIuIuI K'J 5 *I IED JK)*+h (d!#"+P7"45"JE)W+‡hc_YJK)W+" IuIuITIuIuITIDIuIuITIuIuITIDIuIuI K'J 5 *I IE*D I  “d)A@N;54!>.)A!#l)A"1; .0e6IuIuITIDIuIuITIuIuITIDIuIuITIuIuITIDIuIuI KJRI *I IE*D IED zoX*;7.0@N\G*I IEH IuIuIDITIuIuITIuIuITIDIuIuITIuIuITIDIuIuITIuIuITIDIuIuI KJ  *I IE*D IEH %,.0"45"".)A{IuIuITIuIuIDITIuIuITIuIuITIDIuIuITIuIuITIDIuIuITIuIuITIDIuIuI K J  *I IEH “d)A34".)A"IuIDITIuIuITIuIuIDITIuIuITIuIuITIDIuIuITIuIuITIDIuIuITIuIuITIDIuIuI  D S
.)A]IuIuITIuIuIDITIuIuITIuIuITIDIuIuITIuIuITIDIuIuITIuIuITIDIuIuI DL  $ (!$'0 

?*N

:W.0.


+
 
 

D*I  y T:W.)A@CI IuIuITIuIuIDITIuIuITIuIuITIDIuIuITIuIuITIDIuIuITIuIuITIDIuIuITDUJ D*IED *ˆ 17454T)#-P!C)AWhc!>G.0'C!>'#I5ITIuIuITIDIuIuITIuIuITIDIuIuITIuIuITIDIuIuITD  D*IEH *ˆ 17454T)#-P!C!>7.3'C!>'#\IrIuIuITIuIuITIDIuIuITIuIuITIDIuIuITIuIuITIDIuIuITDD D*I 5 (d!:W.)A4^)#- !#45@Y43!>.0'N!#+97;50!#.0'17!#"I†IuITIDIuIuITIuIuITIDIuIuIT D  D*IEI yuy%  [!#'#)#G.@9I(IuIuIDITIuIuITIuIuITIDIuIuITIuIuITIDIuIuITIuIuITIDIuIuITDL D*I ” yT;)A0.3M.17!>.0)A2!#'#)#7.5@9I&IuITIuIuITIDIuIuITIuIuITIDIuIuITIuIuITIDIuIuITHUJ D*I  yT:>!#04u.017!>.)A2!#'#)#G.@9IIuIuITIuIuITIDIuIuITIuIuITIDIuIuITIuIuITIDIuIuITHD D*IEL yu!#+5!>;.:#u!#hi.0@CT:>!#04u.17!>.0)A2!#'#)#7.5@9IEIuITIDIuIuITIuIuITIDIuIuITHH D*I  yT;57.)#7..3"1+%"1bZ;g.0'C!#'#)#7.5@9I~IuIuITIDIuIuITIuIuITIDIuIuITIuIuITIDIuIuITH 5 D*I K!#~!#'#)#7.5@9IWIuIuITIuIuITIDIuIuITIuIuITIDIuIuI 5IEI ˆW411)A~wx".0-=)#7@N\)A@C;g!>7.0"1)A9!#'#)#G.@9IITIuIuITIDIuIuITIuIuITIDIuIuI 5I ” yT$g.0)[email protected]!#.01:>!# "1.0@F!>.)A2!#'#)#7.0@9I%IuITIuIuITIDIuIuITIuIuITIDIuIuI 5I  yu)AWhi;5!>7!#@C1G.0T.01:L!#~"1.0@N!>.)AE!#'#)#7.@2I ITIDIuIuITIuIuITIDIuIuI 5IEL ˆW.'A5. O !#+)[email protected]!#a;g!>.0!#)#7+P!#@C)A',!#'#)#7.5@N"l-?)#Py!#"e*" h 5,bf. 'A!>7+E1)F)A O +u.0%u'#7+%;U)A3.0#I„IuIuITIuIuITIDIuIuITIuIuITIDIuIuI 5I  ˆW.'A5. O !#+)[email protected]!#a;g!>.0!#)#7+P!#@C)A',!#'#)#7.5@N"l-?)#Py!#"e*" h 5,bf. 'A!>7+E1)F!:#G!>'#Yb[!>7+9'#7!>1+ I IuITIDIuIuITIuIuITIDIuIuITIuIuITIDIuIuI 5I KJ‚ˆW.'A5. O !#+)[email protected]!#a;g!>.0!#)#7+P!#@C)A',!#'#)#7.5@N"l-?)#Py!#"e*" IsQh L^bf. 'A!>7+E1)F)A O +u.0%u'#7+%;U)A3.0#I„IuIuITIuIuITIDIuIuITIuIuITIDIuIuI :W.0.0.

5

”D ”5

” 

AJ UD U H 

5

UL UL 

 



 !#+)[email protected]!#a;g!>.0!#)#7+P!#@C)A',!#'#)#7.5@N"l-?)#Py!#"e*" IshQL^bf. 'A!>7+E1)F!:#G!>'#Yb[!>7+9'#7!>1+ I IuITIDIuIuITIuIuITIDIuIuITIuIuITIDIuIuI   5I D %,.0"117.0$54.)A"d)#-S@C!#27bd!>7+2-=)#& ([zZ !>'#f)AEy !#"1e D*I ITIDIuIuITLH 5I Hy !#"1e >Id“d)A O +u.0%u'#7+M;)A0.3#Io|f:#7!>'#+E)V:# DUJJN745"IfIDIuIuT I L  5I  5&y !#"1e >Ia|f:#G!>'#Yb[!>7+9'#7!>1+2)s:#^745 IP|f:#7!>'#+K)V:# DUJJN745"ISIuT I L  5I Iy !#"1e D*Id“d)A O +u.0%u'#7+M;)A0.3#Io|f:#7!>'#+E)V:# KJJJN745"IIuIuT I LL 5I ”y !#"1e D*Ia|f:#G!>'#Yb[!>7+9'#7!>1+2)s:#^745 IP|f:#7!>'#+K)V:# KJJJN745"IHT I LL 5I   y !#"1e H*Id“d)A O +u.0%u'#7+M;)A0.3#Io|f:#7!>'#+E)V:# 5RJJN745"IfIDIuIuT I L  5I Ly !#"1e H*Ia|f:#G!>'#Yb[!>7+9'#7!>1+2)s:#^745 IP|f:#7!>'#+K)V:# 5RJJN745"ISIuT I L  5I y !#"1 e 5Id“d)A O +u.0%u'#7+M;)A0.3#Io|f:#7!>'#+E)V:# KJJJN745"IIuIuI UJ 5EI DUJ1/!>$5"1)#$5.3'CJK!>e#)s:9;)W""IIuITIuIuITIDIuIuITIuIuITIDIuIuI #” I*EI D -?y !#)A"1@ e *I u '#7-?)#+7%@N;U!#)A53.0F#)#I~-Iu4IuID)#IT7IuIu1IT+ Iu Iu IT QIDb^IuIuIT{Iu+Iu:WIT.0!>ID.0Iu'9IuIT;UIuG"Iu.0"1IT1IDIu IuI L I*EI H y +!#'#"1e Y*I-=7)A @}-?)#7u@N'#!#+2%)#;-T)A40.05#)#IlIuIu1IT+ IuIu IT  ID/Iub^IuITtIu+IuIT:W.0ID!>Iu.0Iu'IT1Iu)6Iu! IT"ID@NIu!#0Iu I   I*I 5 y !#"1e * I -=)#G@N!#u)#-  GI{IuIuITIuIuITIDIuIuITIuIuITIDIuIuITIuIuITIDIuIuI KJJ I*EI I -?y !#)A"1@ e *I u '#7-?)#+7@N%!#;U)A3u.0#)#I~-SIuIuYID)#ITIuIu1IT+ Iu Iu IT ID IubfIuIT9Iu+Iu:WIT.0!>ID.0Iu'CIuIT;UIuG"Iu.0"1IT1IDIu IuI KJRD I*I ” y +!#'#"1e Y*-I -=7)A @}-?)#7u@N'#!#N+%)#-d;)A0.0F#Il)#7IuIuIT1Iu+ Iu IT ID,IubfIuITHIuIu+IT:WID.0!>Iu.0Iu'9IT1Iu)KIu!2IT"ID@NIu!#0Iu I KJRH I*I  y !#"1e KJWIZ| 5F"1!>1Y!>$g"1)#$5.0'Jk!>e#)s:9;)W""IvIuIuITIDIuIuITIuIuITIDIuIuI KJ  I*EI L y !#"1e KJWI o!#04T)#-ST'#7+%;U)A3.0M.09"!>1
 IIuIuITIDIuIuITIuIuITIDIuIuI  KJ I*I  y !#"1e KJWIZ)*)#f@C!#E"845!>+9)#^.0%T"1.0@F!>1+
^hi:>!#04"IIuITIDIuIuI  KJ .X 5I  tˆW.'A5. O

I*I KJ.)A5" ;-=)#G@C+%!#7K.0eIuI    ”*I  | @C)W+‡hi$5!#"1+9)A45\1Q+7.:#%XW;5)#7!>.0)A2!#'#)#7.5@9IZIDIuIuITIuIuITIDIuIuI  I ”*IED | @C)W+‡hi-?u)A41^+7.0:#%X*;50)#7!>.)A9!#'#)#7.0@9IDITIDIuIuITIuIuITIDIuIuI  ” ”*IEH | +.0"1!# @N)*+hi$5!#"1+9)A411hc+7.0:#9X*;g)#7!>.)A2!#0'#)#7.@9I IuIuITIDIuIuI    ”*I 5 | +.0"1!# @N)*+hi-=u)A45\11hc+7.:#9XW;5)#7!>.0)A9!#'#)#7.@2I ITIuIuITIDIuIuI  L ”*IEI y !#"1e*"  h *H I y7!#".0.)A6;)#$5!>$5.30.."Y-=)#F!#7q!#.0)At1){.0'A\$)A47.3' "1!>1"IrIuITIuIuIDITIuIuITIuIuIDITIuIuITIuIuITIDIuIuITIuIuITIDIuIuITIuIuITIDIuIuI   ”*I ” ˆW.'A5. O !#[+)[email protected]!#T;g!>.0!#)#7+^!#@C)A'F!#'#)#G.@N"[-?)#fy !#"1e*"  h *H I2I D  ”*I  y !#"1e  >IZy.0@N,"1;5"4.0 )A@C;50.)A I ITIDIuIuITIuIuITIDIuIuITIuIuITIDIuIuI DD ”*IEL y !#"1e *D IZy.0@N,"1;5"4.0 )A@C;50.)A I ITIDIuIuITIuIuITIDIuIuITIuIuITIDIuIuI DD ”*I  y !#"1e *H IZy.0@N,"1;5"4.0 )A@C;50.)A I ITIDIuIuITIuIuITIDIuIuITIuIuITIDIuIuI DH

X


+
 5I 

ED 5IEH 5I

5I 5

EI

5I

5I ”

5I 

EL

5I

5I 

I*I  I*IED ”*I  ”*EI D ”*EI H


 =

y !#"1e*" h 5I(d)*)A!#2!#"1eW"I IDITIuIuITIuIuITIDIuIuITIuIuITIDIuIuITIuIuITIDIuIuI AJ y !#"1e*"7!#@C1,"11.0'A"I IuITIuIuITIDIuIuITIuIuITIDIuIuITIuIuITIDIuIuI UI y !#"1e*" Qh L*I (d"1;g!>7!#@C17"f-=)#XW;1+2-€44,;-?)#7@N!##I„IuITIDIuIuI >” y !#"1e*" Qh L*I (d"1;g!>7!#@C17"f-=)#;-?)#7@N!#5u+47.0'/!>G.0'IWIuIuITIDIuIuI >” y !#"1e*" Qh L*I(“d)A O +9.0r'#+6;U)A3.0H)A O !#Z.0e6)#-fG4 Ro!:#G!>'#+ )V:#,!#0745"I IDITIuIuITIuIuIDITIuIuITIuIuITIDIuIuITIuIuITIDIuIuITIuIuITIDIuIuT I LUJ y !#"1e*" Qh L*I&|f:#7!>'#kb[!>7+v'#G!>1+q)s:#]+47!>.)Av)#-,74~RZ!:#G!>'#+ )V:#,!#0745"uIuIDITIuIuITIuIuIDITIuIuITIuIuITIDIuIuITIuIuITIDIuIuITIuIuITIDIuIuT I LUJ y !#"1e * I S!>7!#@C1Q:L!#04" -=)#^|^'#)#G.@”*IdIuIuITIuIuITIDIuIuITIuIuITIDIuIuI   y !#"1e KJWI -?)#7@N!#u)#- ;7.0)#7..0"1+%"1bd;5.0'!#5+
 GI IuITIuIuITIDIuIuI KJRL S!>7!#@C1Q:L!#34" -?)#f|^0'#)#7.@  /)AKy!#"e*"   H*I ITIDIuIuITIuIuITIDIuIuI DUJ (d"1f)#$g"1:#+9;5!>G!#@C1f:>!#04" -?)#f|Q'#)#7.5@  /)AEy !#"1eW"   HIDIuIuI DUJ y !#"1e*"  h H*Id“d)A45\1d+7.:#CXW;5)#G!>.)A IPJE!#M45@D$o)#- "11;5"Z1)u:W.0". !#0~"!>1"I IuIuIDITIuIuITIuIuIDITIuIuITIuIuITIDIuIuITIuIuITIDIuIuITIuIuITIDIuIuI D 

X.


 


   

 y.3" ".0"^.0"f)A57+Kbf.E.3@C;)s:*.0'CXW.0".0'F@C)*+"f-=)#,!>75.0'C-?)A@.3-=)#Gh @CIH`•r;5!>.340!>.Yb^.00oX!#@N.0MnbZ);)#$g@N"Y!>C!>7.0"1].0r"*"11@F"bf.0Gr!>G -?)A@„"47-?+$5!#7egI/y O 7"1Q)#-a"1C.0"Q;)#$5@ )#-Z)Vb !#H!>'#u")A40+k7))A"1 )#f.0g4,D"845u)#- .0" X*;7.0".0%)#7+!>Y!>'#\Q@N!9)A:#'#D7!>;h .0+0 !#+60.0!>$50k1)H%)#7C$!:W.)A4I yf.0"/.0"/17@C+(g‘pŽAŒ€Š€‘r;)#$50@9I yC"1)A5+H;)#$50@ .0",!>T)#-dbf!>u.0-?"T!#{!>'#\/@N!+7!Vb -=7)A@ !9;5!>.0450!> "18*4N)#-[:#" €"!>1"R !#.0)A"D!#+ bd!>G+" ,!#+ bf!>u@C)W+"u!>7N$"1u4"1+H1) +7!Vb "47(.0-=5"Ikyf.0"/.0"D1G@C+6ŠU’Y;)#$g@9I M,%)A04".0)A )#-f bd)#eK;5"11+{.0",!>D"1F!>M.0XW17.0!>$5K0.0e#+ R~!#5+H!>uNG)A"1r"1)A04.)A1) )AD+5.0!>1"T-?)#7@ )#-Su")A04.)A%1)Nu)#I `•S.3".0@N;U)#7!#\ 1)u"1!>1!>70u @C)#.:>!>.)A/-=)#S[bd)#eD;5"11+C#I `nP.0" ;7.3@N!>1h .0T!,+".0a1) O +Y!>7.3'^@CG!#.0"7@N"lb^.07/!>[!>;;)#;57.0!>1a-?)#P!>7.3'f.0Y@D$+++ "1W"11@N"RP!#+6.0{;5!>.043!>D-?)#/!>G.0'E.3{@C)#$5.3C)#$)#"IK|Q)A4'A %")#;F)#- ".3"D+)*"Y)#/.0504+XW;UG.0@C"D)Ar!#o7)#$U)#"R F;)#$g@N"u)#- XW;5)#G!>.)Ar!#5+ .0-?Q!>,)A".0+7+M.01"1.3'D;7.0"1$!#4"1Q.d"1)A04.)A].0"Z!D;7845.0".11) u)A"174.)A%)#-;7!#.0!# 7)#$U)# !>G.0'"1W"11@N"Ioy5.0"[.0\17)*+451)#F75!>;1h -?)#Y)A@N@N"Qbf.E!#K)A40.3T)#-oY;U)#1.0!#l)A"^-=)#Q)#$)#f!>75.0' iˆ*.0)A" >I  !#+ >EI D GIP`p.0" ".0" `l"7!#0*-=)W4" ;7.3@N!>7.0,)A/)A )#-g"1   4"1[)#-g!>G.0'Q@C7Wh !#.0"7@N"u!#"u;g!>D)#-[M;)W""T)#-+".0'A.0'9!27)#$U)#Y)A\1)A3I]`Q-=)#7F;)W+ 1) +.0"74""P,+.‡–]4."P.05a.0F+".'A.0'u)A\1)A37"Z-=)#[@C)#$5.00 )#$)#" iˆ*.0)A >EI H GI `•Z.0"o!>7'A4+F5!>Z.a.30" 4"1o"^+.‡–]4."Sbf5.07N@F!>e#Q!>G.0'u@C)*+"Z!>;;!#0.0'I `p 


 

 

D

;5!>.340!>T`,"!#0P!>'A4N!>D!#+!>;5.:#N)A\17)A07"u!>7F!>117!#.:#]$!#4"1C;)s:*.3+ @C)W+"^-=)#,+".0'A.0'N)A1)A0G"fbf5.07K!>  Š ! ‰]Š {#Œ " / %Š $Š€Œ€I^|Q0~/@C)*+"fXh !#@N.0+v.06.0"".3"C!#v$%+"7.$+(!#"N@C)W+"bf5.07v!>Gr-?)A@ 7.0-?)#7@CI ^D.0Eˆ*.0)A" >I 5'& >I ”F`Z'A.0:#D!C$7.0-l)V:#7:*.b )#-Su"1!>1D)#-S"!>77K.0%.0" O 3+  +"G.$ad:>!#\PG!>7!#17.0".0"S)#-5!>75.0'f-?)A@ .0-=)#7@N\ \@N\.)A/deW)Vbf +.‡–]4."[.0:#)A:#+2.0%.!>;;50.3!>.)A]1)N)#$)#.0" !#+E+@N!>7!>1D@N)#u;.3"1F !>!k-?)#"4+#I_ .3!#0 iˆ*.)A >EI L D`u;7)V:W.0+M!K)A!#+Whc@F!>;6-?)#]@N!#.0+Y)#- ".3"I (*)+(

,







 .-




 U 

M,k)#-/H@C)A"1%+4G.0'{.0@F!>'#"%-=)A@ |^. O .0!#f`p100.'#!#"%$!>9)#-D

#! 41)A)A@N)A4"@C)#$5.0M)#$)#Ikyf%!>])k"4576)#$)#"/#Ik`•C.0"/+.‡–M40R )sbZ:#C1) "1.0@F!>1K)sb )A"EbdK@N.'AN$21)6"47@N!#G.0"I&JK)#$5.097)#$U)#.3"F!#"]4+7'#)A !E"!Lhc7!#'#9+47.0'%M;5!#"1u1r#!>7"I2y5.0"u!#"D'#++6!2'#7!>.)A )#- 7)#$U)#" bf.37 )#;UG!>1k.075!#'A.0'Rf45"11744+t:*.0)A@C"%.0q7!#‡hi.0@C#RG!>M5!#.3 /"1!>.0>R "11744+2:*.0)A@C"f@N;5)V#+k;7:*.)A45"0 /GI ([4,!>^D.0@CY)#-ob7.0.0' :#r"1F7)#$U)#"D!>M"1.30P!#41)A)A@C)A45"Y.0H8*4.1M)A"117!#.0+Hbd!V*"Y-?)#Y0.0@F.1+;7.)W+" )#-o.0@N#I Q!>7+b[!>C.0"Q40.3!>$5#RXW17!#.0'94"1-€4l-=!>47",-=)A@ "1")#,.3-=)#G@N!>.)AE.3" )AWhi1G.:*.3!# RL!#5+:#'A.:#!>P"1[;7)#$5@N"S!> "1)A04$5Z.0S.3" +5.‡–M41),e*)sbt)Vbv1) 10!/)#$)#[bf!>[1)N+)C"1)!> .[bf.005$!:#T!#")A!>$5F!#7)A"" ,7!#'#,)#- ".4!>.)A5" ..0" 3.e#F1)F)A41I `pk"7)#,.Q.3"Q5!>7+E1)2+".'AK'#))W+;)#'#7!#@F"^-?)#T@C)#$5.00D)#$)#"Iuy/!>7@F!#\Kbd!V*" )#-fXW;"7".0'bf .0"C.3"Y2!#"1#I MT%bd!V6.0"1) "7!6!>C%;)#$50@ .3"/)A@N;5X $!#4"1ub^9bdD+".'AE!N@C)#$5.00Q7)#$U)#fbZD!>7D)#f@C79+".'A.3'/!#K!>'#\RU$54!# .017!#.)Ak$cbd!#k!>'#T!#+k!#K:W.)A@CI^yf/)A@N;5X.c9)#-o/.017!#.)A $cbd&:#‚ ".0@C;50"1M7)#$U)#2!#5+$5.0F.0"N'#7!>I a)W""1"].0\:#)A0:*.0'{@C)#$5.002)#$)#"%!>En;5.3!#0t)AWhc3.0!>M!#5+ "11)W7!#".0>IZ`p9D-?!#Y)#-S"7472"*"11@F"D!#5!#.3u!>;;)A!#G2)#-P)A1)A~)#7]$5!>e*" +)sbf Iu`pH)A"18*4CbdC4E!V:#F)9)AT)#K)#-d@N)#$5.0Y)#$)#,)A1)A I 13254+6798;:==@A