! " # $ % &
%'
( $ )* $ + " ) , $ -. $ - / 0
1*22 3
!"#
4) 5
66( 4 $ 7 8(9(: ;; (6 7' 8(9(: ;; 999( < /)) =
= 5 += 50
$% ;(6 $% ;(6 ; 8 +: 1*22>>> 2 3 + 5 $ $ ? = % * @ * ) @ > $ " = " "#$ " > $ ) > > + ) * A 5
+ ) * " 5 * > ) ,) $ $ !
" ? ? 0 4 > A$ % > "
# $ > 0 ? $ $ B
$ $ C $ = > 0 0
5 = > ) $# ) = $ *) $= > ?$ = > $ D $ $ = * ? > $ B 7 * @ $ / E ** $> % $ #$ C & = ) ?$ > F ) , > % $ $ > 0 ) * + $
% ) = #-$ $ $ * $#C ) EA $ " " > > >$= @ # F " > $$ 5 )> #) ? $ 0 ? > " $
+ $ '* > " = > * $ = $ = 50= % )0 ?C 0 > > $ = # E 0 > > ># 0 ,)= + * = " # $# @ E ) B )* ? >$ 5 $ E )* )* >$ 4 >= > 7 *' F $ / 0 #) $ 4* " $
" & E )* B G ) 0 E 0 0 > 0 = 4#-$ + ) 5 $$ > $ C F ) ? # $ 4#-$ * B - ) " > > " E 0 * *$ = > ' $ 5 " > ) # ? > $
> $ & )) 4#-$ " ? $ > $ $ > $ + F > G ' + + $> $ , +
H " & " > 0 > @
$ B $ " '* > ? # ) = #-$ > 0 ? $ $ > = + F 7= I + ? J $ = 4 H " 0 $ &$ >$ + # $ E ) $ = > ' 0 #) > ! > E $ +
@ ) $ + + $ " $ ) E $) * > 0 & $ )> + % ? $ " 0) 0 &$ + + $> " &
> H " F %$ $ ?$ 4* + + @ ' = 0) > @ 4#-$ " = <G 7= > $ $ #$ + F ' =
>$ @ $ # $ > , = 7 K $ = A & # + $ $# $$ F
" ? > $= # " " @ * 7 = > 0 ** = 0 ) 7 # >$ $ >$ @ ) $ 0 = " + $ " = > ** + $ )> 7 = = > / ) 7 > *) 7 > ! = "# $% & )) = +$ L ' ) $ > ) B* 7 " A 0 * $ > = @ # $ B* ) #$ $ 0 7 & $= 0 F < B* 7 6 #) $
? $# ) E ) *
# $ > " B MN= " ?O$ " 0$ = "
$ = "# $ $ +> " P ) ? + "" = $ ,$> $$ F > $ > F < F >
+0 " + M6N % MN $ ) "# $ D 0 "
& $ = " 0 $ $$ 0 + " E M9N= *) 0
7 B * $ *$ $ C * $ ? >
! $ = * > $ + " MN= 0 B 7 * " " & * ) ,$ E > $ - & " 4 MN= 0 E $ = 5 $ "
" + E MN " C + ) > * ? F
& 0) 0 " 0 7 * P M(= = = ;N ) - * > & ) 5 $ = * )* D $ $ 0 7 =
% + M6N I F = '* $ - / J $ D 0 $ & = # $ )> 0 7
> + IE J MN + $ E = # " P ) + $ ) 5 E * )*
@ )* $ $ + #$ $#C$ + # + I5 7 $J " 5 M9N Q " # $ ? " "$ MN= $ + *
> " E 0 + =
" / = " RL MN "$ MN F + " +' 7 MN , * A ?> ' $ C > &
@ = $ " # ? - )> / , ># > ? $ E E > 7' ? * @# $
& ' 6 & - > & S $ " 9 F ?' #) 9 ?' 96 + 7 $ " & ) $ ( ) ' 6 - 6 @ $ 66 B @ $ 6 * @ $ 66 > $> 66 - $ > $> 666 F> 66 @ ) 669 66 B 8'): 66 66 +* 6 F % 6 F 66 < % 6 +* 69 @ 69 + $ 696 + $ * 7 6 F" & 6 & " )> @
; 6 66 66 6 6 6; 6; ( 9( 9 9
66 F 6 @ 69 @ 6 + $ * 7 6 @ $ " )> @ 6 ! # $$= " @ 6 $ >$ @ $ 6 + " $ 66 F " $ 6 @ $ 69 5" $ 6 , " $ 6 '* " $ 6 χ2 @ $ 6 5" $ 6; < @ $ 6( ' > " $ * + ?$ D $ $ + $ % $ 6 D * 0 $ " )$ % ? $ " % 9 - F> ! 6 + $ F 6 ) " $$ %
@ $ 66 ? F$ # 6 * $ F 69 % * @ ) % 9 E % *O ) $ 9 F $ 0 F> 96 % ?# $$ " F$ AC 9 % % F$ AC 99 F % F$ AC 9 +* 9 @ # $ 8+: F $ B - ) " , +! $ 9 $ 96 )$ $ @ $ 96 )) <*
99 9 9 ( 6 6 6 9 6 ( 6 ; ; ( 9 ; ;6 ; ; ; ;
966 )$ $ @ $ @ ;; 96 &$> ) )$ $ " @ $ ( 969 FH (9 96 + $ " & ( 96 & $ $ ( 96 F$ (; 9 EA $ " / $ 6 9 " &$> 6 96 @ &$> 9 9 & $ 99 P0 0 $ > $> 9 / " $ 99 ?$ + $ - ./ 6 0 $ 6 6 #) $ $$ > 69 6 4* 69 66 B 6 - + $ E 6 9 E " # +* F' E F ) $ 9 P)* 6 +* E * $ 0 ; 9 B " F $ 9( E 0 4$ 9 > E 99 & +* 99 B " * $ F* 9 ; B*) E 9 ( @ $ " + $ F < 9; + 0 $ $ " > $ $ $ P @ 6 > @ @ $ $ @ 9 , F ** ' E #) " A * % $ E 6 6 = P $ 6
% P $ 9 9 - / $ 0 A * '*) ? $ ?# $$ " A * * $ 0 ./ ; E / ; A* ; 6 B $* )* E * )* 6 9 + " F' E $ ? > $ " ? $ 6 & F * $ 6 F " 66 F T ( 6 E P$ 6 $ @ $ #)" 1 ./ 0 $ 6 % " 6 ,# $ 66 ?$ % $ 5 ) ; ?$ % ; 6 K 5 ) = % ;9 5 ) ! $ ; 9 ! * > ; 2 ' ;; 0 $ ;; ;; 6 $ F ' " 6(6 7 ' 6(9 9 P$ $ 6( 6 $ " 4$ 6( 6 E 6( 66 # P$ $ 6( 6 D $ $ ) + $ 6( 69 & P$ $ 6( 6 / " $ 6(; 6 P$ $ 7 ' 66 + $ @ 69 / " $ 69
6 F$ " 69 9 @ $ @ 6 % #) $ 0 @ $ 6 $ " * 66( *" 66( 3 $ / 66 ; 0 $ 66 ;6 χ2 7 " $ % 66 ;6 / χ2 @ $ 66 ;66 χ2 @ $ χ2 7 66 ;6 @ $ $ $ F> 6( ;69 & + $ 6 ;6 χ2 7 ? * $ " 6 ;6 χ2 7 69 ; E " # 0 4$ 69 ;9 B$ " " 7 6 ; & " $ 7 + $ 6 ; 7 B$ " " <
"F % 6 ;6 , 5 6 ; $ 6; ;9 L2 7 696 ; $* 7 696 ; @ $ 7" 699 ; ! " @ $ 699 ;6 F" @ $ 69 ; @ $ " 69 ; $ 69 ;6 χ2 B$ " " 7 69 ; $ 69 &4 $ 5 6 ( 0 $ 6 (6 % # $ 6 (6 & $ 69 (66 K $ 6 (6 &" 6 (69 * * $ 6 (6 ? * $ $ % 6 (6 +* 6 ( 4* * = % 6 (9 B-) $ 6 (9 ) 6; (96 , ,) 6(
(9 & $ 6 (99 $# 6 (9 @ $ F 69 && 6 #) $ 6 6 + * 6; 6 0 $ 6; 66 - @ )#) $ 6;( 6 5 $ % #) $ 6; 69 B - ) " 6; 6 @ $ " )> 6; &( 6 6; 6 ?$ #)= ?* 4#-$ 6; 6 ?$ $ " #) $ 6; 66 B B - ) " (6 66 & 0 % ( 6 ' > ( 6 F < ( 66 *'" ( 6 ( 69 5 $" 6 F 69 % 0 + * 9 69 E + * 9 696 T + * 69 B + * $ / 6
& 0 = > * > = )$ E 7 = > = F
) $ ! " +#$ $ & 0 H " %0
'* * & #
& > '* 0 = 5 $ $ #) " > 5 # # 4#-$ ) @ $# $ , = * )* " $ = > $)> $ = 0 F$ AC 5 $ #)> )$ #)> % $ A$ = > 4* ) 0 * 0 $$ F $ $ " '* #) E $ ) " @ > >
% '* & ? > $ A$ @ = * $ 5= * $ = = ) C "= G" ? > $ $ +* & > = ** " ) * EAL " " > $ A = 0 > ** $ 0 = EAL= $ C $ $ * # " 5 $ #) $ # $ " $ AC & A > > F $ * S ) > > * +* ( )* $ $ > )" $ " $$ * 5 =
* # " ?> " " = )" $ ! $ $ )
= > > = > $ $ = )> >" $ > 0 = " 0 $ ?$ ) A ( +* E B >
+ $ " (( # = ! G * ) $ * # " 0 5 " " $ # = > > = '* ?** ) )> 5 $ > $ ( ,* ? ( + $ > $ $ > / ' > #)> 0 # > $ $ F> ) $ ! & > $# $$ @ B* 4 $ F ? = " + $ > $ $ $ $ > = $ 0 = ! & # " + $ $ # + $ " A$ + $ ( -* 0 * 0 > = )> F** $
) > F* ?** " $ 4 > 0 * 0= $ * = '*) $ ( .* ? 7 > > $ " B * @ = > $ = ? E * @ > > = @ $ 0 / # # , 0 ? > $ > + $ L * $ ) " ) + ) $ +$ L * 8F * " 5 : $ +* . > " $ F $ % A$ + $ = ) " 5 ) $ $ C + > F $ $ F " F $ + $ )> +$ L (& + $ 8 : & ?$ 0 * $> = * "
) " ( ) # 8+ $ : * @ $ " '* " ) 8 * := ) #) $ F $ + $ U ? )$ F$
#= )= " F U % ) $ / H>$ & > @
$= * = $$ F $ $$ = H #) $ * = ! / " %# + $ F> ) = %# F $ $ $ ? "
+ $ )> +$ L / @ $ ? = * " ' F $ A$ + $ = @ $ > %0 ! $ > * = > = $ C = > +* 6 = =
L )> / ? > $
, > > C $ C * ) ) ? $ = " $ * = , " 8" 7 5 ): $ #) = > , > = $> = )* B )* $ $ > " > F = ) ?** & $= " > > & $ = 5$ ) ) = '* $ P * = )* = ?' ? @ " > & $= #$ > 7 + > $ +$ L P $ )* %0 & $ > $= +)$ )> +$ L & @ $# $ ) * )* #
/ $ )> $$ #) ?L $ 0 = > & ) " / 0 1 " B + M;N - > $ - I ) $ $ B )*= > -
$ > V5 5 V 0 = 5 )> 4#-$ %$ " @ + @
$ > > $ * ?'
& % $ 5 50 > 0 >$ ) $ & $J
& > ** < > $ # / 2 8 $ : '* " = -) = $ 8I $ J= + $ : - & $ 4#-$ 5 ) $ $ %$ " & $ '* / = $ ( > $ & $ L > > * )* > @ $# $ $ = "# $ = 7 # $> +* & 0 $ $ > = F F "= > $ % " = $ $ B > " &
$* > = $ $ / 0
> 7 > $ = # $ 0 = 0 > I & = > ? = & % " $= $ CJ & ) + & ) $ $= > > *# B* )$ > = P$ $ $ 0 = $ 0 $ $ ? $ # $ 0 " ? A ) * > 4#-$ )* $$ 0 + @ = )#) > ? = $ ,= $ $ ) &$ 7 > $= F $ $ " ? 4#-$ A$= ?$ 0 & 4* ) + ' "
@ / ' H " &
) $ 5 $ 0
> ? > $ / ' * $ C P ! # $$ " B )* / - & $ L= B$ " ?' 0 = > & $ 0 ) A +* 0 & * " $ & # ? ) 0
!
" !
# ! $ ! %& & '( & )*& $ # & + !
! &
,! ! - .$ * "* /*! &
* * 0 1
2
( !
3
+ = = $ #-$ = = >$ B )* > = + B )* ? > $ > / ? > $ $#C $ # C 0 F $ / + > > * C= > > $> "= $ 0 ? 0 = H = P$ = '* > 0 ? &
>
H " $ " F C = > 0 $ - ) F 4#-$ "
! $ = ) $ = " @
7# = $ $ ) = > )+ & &0 ? F$ " )> % B "" @
4 ) BA $ 4 * $ / + $ = > > ? $0 = $ 5 + $)$ + $ > * $ $ A *' @ $# $ = > )>$ &0 ? F> > F $ $ F $ " + $)$ $ = P$ E$ > A . & * " $ $ & ) = >= > > > * & ) H>$ ? 0 $ = " > = $ ) " $ ) * > 0 $ A & P {A} & > $ = $ = $ $ $ C = * & +* &0 $ $ C $ 34 % C 0 * & ># 5$ &0 B$ 4 C $ $ = $ $ A * ) $ A * # $ A - = > $ A $ A ) L= H $)$ $ &0 $
4
34 * # B* # ) $ $ $ & $
$ = = $ = $ & ) Ω ) * # A$ $ = $ > ∅ ) = $ ∅ = Ω > > - 0 > ) @ $ > - A ∪ B A B $ A∪B F $ A $ B " A " B 8 ∪ * * # $ " & $ : - A ∩ B A B $ A ∩ B > F $ A > $ B 8 ∩ * : F - $ +) $ A∪A=Ω , A∩A=∅
>
A∪B = A∩B , A∩B = A∪B .
F $ $ = * = " F $ A$ ) 7 = A$ $ &0 > / * %# $ @ = $ 5 & 8 $ & : / ) / $ $ '* = @ $ $ $> ?$ $= > @ & C P $ " + $ 8 ) $ : / % &0 * $> $ & " 0* 8> % % := B ) F * " $ @ ! " #
&,& 67 $ " & P {A} ) $ A= B = C = $ $ 0 $ ?' 0 = P$ & $ $> > A
" ,5 *&
' & ,5 *& "6
7
67 & 0 ≤ P {A} ≤ 1 & *"= $ • 67 ( P {Ω} = 1 & 0 $ • 67 * P {A ∪ B} = P {A} + P {B} A ∩ B = ∅ & 0 $ A B $ & = A )> B = F A B $$ $ C ? ?' - $ #) = 50$ ? @ $ = ?= * * $ $ = & * *
) %# " •
P {A} = 1 − P {A} , P {A ∪ B} = P {A} + P {B} − P {A ∩ B} .
8:
%0 $ $ P {A ∪ B} ≥ P {A} , P {B} ; P {A ∩ B} ≤ P {A} , P {B} .
4 $ $ A $ B 8 A *) B = ) A ⊂ B := P {A∩B} = P {A}= P {A∪B} = P {B}= > +) $ 8:
&,( #8 %$ - & >$ - P {A | B} & " A
@ ) $= B $ = ) + & = $ KH ) - F P {A | B} =
P {A ∩ B} , P {B} = 0 . P {B}
86:
> ? $ = A | B = ) ? $ = >
B $$ = ># A $ = & ) / ! ) P {A}= $ $ A )= > H) " $= B $ P {A ∩ B} * ! $ A | B A = B $ = P {B | B} = 1 - 5 = > P {A ∩ B} = P {A} × P {B}= $ A B 8$ & 0 : & " = $ P {A | B} = P {A} >$ +) $
8
( &&- , 9 &&
* & A ! B :
*
" & P {A | B}P {B} = P {B | A}P {A}
8:
C + 7 $ 86: & $ 0 & $ / $ +* > = H $ ? ) $$ $ C $ ) )= U $ 0 U $ & ( * * 8 # $$ $ : $ 7 $ & 0 B "# $ = $ $ * > P WBA $X 4/32 = 1/8 8& 0 BA $: P W4 ) X 1/4 8& 0 4 ): P W4 ) ∩ BA $X 1/8 · 1/4 = 1/32 8& 0 4 ) A $: P W4 ) ∪ BA $X 1/8 + 1/4 − 1/32 = 11/32 8& 0 4 ) BA $: P W4 ) | BA $X 1/4 = P W4 )X 8& 0 4 ) > BA $: ( * % 8
$ : ? ? % +"A $= > ? % > $ 7 % P {A} = 0.02 8? +"A $: P {B} = 0.5 8? % +"A $: P {A | B} = 0.018 8? % : P {B | A} S 8? % :
3 2* *
;
P {A | B}P {B} P {A ∩ B} = P {A} P {A} 0.018 · 0.5 = = 0.45 . 0.02
P {B | A} =
$ ! ! # %
F $ " = $ " & ) $ ' ! * = " > $ ) ) = 0 , > = )$= & > F ) " $ $ L > %$ FA$ %$ $ & • 8)+ &0 = F0 )= 4$ # P= +* : • " 8F 5)= 7 = T : • # 84#-$ " # > 5 = F " $: • / # 6 85> + F0 $$ %< BA S: • 8? ? ! > = ( . $ ? S: # $ ) > +* ( * 5" 0 7 & > " F m 7 = )> & m1 m2 $ 8 * = : &
0 = $ AC m0 8> m0 )> m1 m2 $: $ C ># m2 − m0 P {m0 ≤ m < m2 } = . P {m1 ≤ m < m2 } m2 − m1
@ ? 5" $ F L $ = > > $ P F G > = > $ m22 − m20 P {m20 ≤ m2 < m22 } P {m0 ≤ m < m2 } = . = 2 2 P {m1 ≤ m2 < m2 } m22 − m21 P {m1 ≤ m < m2 }
5 / " m * $ / " m2 ? $ ! $ $= > / " = m2 − m1 m= $
<
m22 − m20 m2 − m0 m2 + m0 = × m22 − m21 m2 − m1 m2 + m1 m2 − m0 m0 − m1 = (1 + ) m2 − m1 m2 + m1 m2 − m0 ≈ . m2 − m1
= ? 5" $ F $ $ $ ? $ > )* = F
& " $ " & ) ? +* )$ > ? 6 @ $ &
0 s ?$ &0 &0 / $ $ 63 = 216 " B " s & )> 3 18 " &
s = 6 10 " & > & 0 s = 6 $ P {s = 6} = 10/216 ≈ 4.6% @ $ F> 10.5 / " = # * &
& !
& = & " 8 @ ) : x ) = G -) F x ) B ) $ $ A >
$ @ $ 8 " @ $ $ : F (t) - = $= > > = &
" x ) - = t - F (t) = P {x < t} ; − ∞ < t < ∞ . & ' )> $ $ $
@ $ : F (t) $ t : F (−∞) = 0 = : F (∞) = 1 & -) @ $ $
"&& , * • •
@ $ 8? 66: B @ $ 8? 6:
(&& & $ %$ = > $$ $ ? $ $ > = " = @ $ & 0 ? " )# " " $ = 5 AC $ @ xi $ ) " 1 N = > ? ) N # $ 0
& p(xi )= & xi ) N
p(xi ) = 1 .
i=1
- p(xi ) = P {x = xi } = F (xi + ) − F (xi − )= > ε *" ? ) @ > ( * & " $ 8&0 : + &0 & = k ) > = p(k) = 1/6 0 k = 1, 2, 3, 4, 5, 6 A$= @ $ @ > $ δ % > @ $ ) > >
#-$ % "
*
* (&( 9 & - & " $ f (x)= 777 8 $ && : $ 0 ) > $ C - f (x) =
86:
dF (x) . dx
$ : f (−∞) = f (+∞) = 0 , ∞ : −∞ f (x)dx = 1 . & P {x1 ≤ x ≤ x2 }= " x / " " x1 x2 ) - = $
P {x1 ≤ x ≤ x2 } = F (x2 ) − F (x1 ) =
x2
f (x)dx . x1
( * & 8'* " $:
E 7 $ '* " $=
! =
** *
*
*
0 0 ≤ t , > λ / " E τ & @ $ f (t) = λe−λt
t
F (t) = −∞
866: = 1/λ
f (t )dt = 1 − e−λt
? 69 $)$ & = 7 # $ E τ = P {t > τ } = F (∞) − F (τ ) = e−1 .
( * & 8, " $:
L 0 ? $ $ $ AC ! * $ B , ?
$> * - K 8x, y, z : R H = ) + x= $ # $> , " $ 8 ? 6:= 5C @ $ $ = > ? 6 $ >
*
3
* 5:* (
2 2 1 e−x /(2s ) . f (x) = √ 2πs
86:
+ s = > )$= * * ) & ) & > " F' 5 " % 1/√e $ = " + $ 2s >$ $ #-$ # , " $ # $> +>$ $ " O + = ) C
(&* ' " @ @ $# $ ) *'= @ $ 5 AC $ % ' C / %# > '* = 4#-$ " $ % 4$ $ @ $ @ > $ > $ > # " + $ ,# $ # @ $
4
9>(
%
/ ? > $ 5 AC " @
$ > F> = + ? +" > + $ " 0 = > > $ +$ L > $ > )> > $> E(u) 5 AC u(x)= " " x # $= > = > > " )#$ & xi " x @ $ = H> ui = u(xi) 0
& 0 ' ) 5 ) > > = > > 5 A C > $ O 8 B " $ ) )> 50$ 5) $ C = ? $ 6: , % % >
0 . ?$ " " F > umod= % $ - = @ $ 8@ $ : " u umod= F' % ># " +) $ / T > $> * 5 AC = '* = @ $ ) F ? F 7
$ 5 " + $ " >
*
?
: . 1 ,! 7@
7
$> +* A > 5> $ " $
F 0 5 > $> $= 7* = / & $ * > $> ) P
((& ' ': : - E(u(x)) =
N
u(xi )p(xi )
8 @ $: ,
i=1 ∞
E(u(x)) =
u(x)f (x) dx −∞
8 @ $: .
869: 86:
4 %$ ) > ' ) / $ " = > ?> % u= p= f # ? - > $> $ $ #)= > c B u= v % " x E(c) = c, 86: E(E(u)) = E(u), 86: E(u + v) = E(u) + E(v), 86: E(cu) = cE(u) . 86;: ) E % / @ $ L ? 6= F" & = 0$ > = 0 & " x= y E (u(x)v(y)) = E(u)E(v) 86(: $ & 6( 0 = ) u(x) , v(y)
4#-$ > > $> *) B $ E(u) ≡ u .
> > 0 & > > 0)
((( +: F> > $> " x * > * @ $ F> U >
A A * u = u(v) , E(u(v)) = u(E(v))#
: ,! 7
8
> $> L @ $ $ U )
E #-$ $ + µ - E(x) ≡ x = µ = E(x) ≡ x = µ =
N
xi p(xi ) 8
i=1 ∞ −∞
@ $: ,
x f (x) dx 8 @ $: .
%0 F> '* " $ 866: >
t =
∞
λte−λt dt = 1/λ = τ .
0
@ x ) > 0 * ? ) " N & x1 , . . . , xN @ $= > x¯ ) 1 x¯ =
N
xi .
i
> ) ! $ F> $ $= >$ 86:=86;: 0 > $> = # $$ " N =
¯ x =
1
xi = x . N i
((* / @ ) σ2 8 $ * $ : + @ $= $ = G ?> $ " F > D > > > " 5 AC F> > = = > )> & >
E = 0 $ * = = > ) $ F> " F > @ $ ) 4A >) > (( F = )$ F " $ "= A E ) 7 %$ + 4A " $ & " > &% σ= - & )
@ )= ) < $ " ! / ? $ @ ) 5 = 1 7 #$ F $ $ # $ x ? ! # /& #
! : # B
( * x# y ?
! ! @ & ! !
&&
-
;
" (x) = σ2 = E (x − µ)2 . ? - $
" (cx) = c2 " (x) , σ/µ # $$ " FC " x 4#-$ - > 86:= 86;: $ $ @ ) " ,) σ 2 = E(x2 − 2xµ + µ2 ), = E(x2 ) − 2µ2 + µ2 , = E(x2 ) − µ2 .
D >
86: @ ) " # 7 " x → x − a , µ → µ − a $= $ ) $ $) 0
7 #$ = σ 2 = x2 − x2 = x2 − µ2 .
(x − a)2 = (x − µ)2 + (µ − a)2 ,
> 86: 0 a = 0 $
/ $ / & @ ) σ2 @ $ x " )> & ) x1 x2= & > $> µ1 = µ2 @ ) σ12 = σ22 $ x = x1 + x2 , 2
σ 2 = (x − x) = ((x1 − µ1 ) + (x2 − µ2 ))2 = (x1 − µ1 )2 + (x2 − µ2 )2 + 2(x1 − µ1 )(x2 − µ2 ) = (x1 − µ1 )2 + (x2 − µ2 )2 + 2 x1 − µ1 x2 − µ2 = σ12 + σ22 .
/ " ) > " > = " # $$ $ * > % $ >$ P & > " )> F$ AC = % G ? $ > 0 @ )
N F> N σ2 = σi2 . 866: i=1
<
/ +: . / @ ) σN2 > x¯ N # $$ ) xi = $ & f (x) >
$> µ @ ) σ2 $ = > $ +) $ x ¯=
N
xi /N ,
i=1 2
" (N x¯) = N " (¯x) = N σ2 , σ σN = √ . N
86:
) +* > " * ? > $ = ) + +>$ $ 8 > := L % *O ) $ L 5 0= )
t = 0 K r = 0 = G ? s * *
) & ) ? ) AC= ) & )
& (( KH $= $ E# $ > $ σ = > $ 5# $ $ 10 σ
v / 4#-$ > @ ) σ2 )$ $ @ $ C / C F> @ $ µ = F> x¯ N $ G ?> $ v2 > " >
$> " v2 # $ " @ ) @ $ " 5 AC N # $ 1 (xi − x ¯)2 N i 1 2 xi − 2xi x = ¯ + x¯2 N i 1 2 x −x ¯2 . = N i i
v2 =
+ $ > > ) > 86: 86:=
x2 = σ 2 + µ2 , x) + ¯ x2
¯ x2 = " (¯ 2 σ + µ2 = N
869:
869:
1
v 2 = x2 − ¯ x2 = σ 2 1 − , N
2
i (xi − x¯) 2 . σ = N −1
86:
> $> $ G ?> $ % (N − 1)/N @ ) ? G ?> $ " F> # @ ) )$ $ @ $ #) +) $ 86: > #-$ ) ?#) $ " F "
> = > = & " $)= F $ " $
+: / ; /: & > $> 8F> : µ @ ) σ2 @ $ E f (x) = αf1 (x) + βf2 (x) , α + β = 1 ,
> f1 σ22
f2
> $> µ1 = µ2 @ ) σ12 = µ = αµ1 + βµ2 , 2 σ 2 = E (x − E(x)) = E(x2 ) − µ2 = αE1 (x2 ) + βE2 (x2 ) − µ2 = α(µ21 + σ12 ) + β(µ22 + σ22 ) − µ2 = ασ12 + βσ22 + αβ(µ1 − µ2 )2 .
E1 E2 > $> )0$ & f1 f2 ) # @ > $ " α + β = 1 + # $ 0 " ? F> $ + $ " 5 )# 8µ1 = µ2 = σ1 = σ2 = 0:
/ < /: 5 AC x & g > $ = > @ $ * & h 5 @ ) F> x = L " 6 # $$ " g= h & ? 69 $)$ > = f (x ) % $ $
f (x ) =
g(x)h(x − x) dx
$$ $#C 866: > ? "# @ ) 8>
> $> : # 0 " -)
x2 =
= =
x2 g(x)h(x − x) dx dx (x − x)2 + 2xx − x2 g(x)h(x − x) dx dx 2 (u + 2x(u + x) − x2 g(x)h(u) dx du
= u2 + x2 + 2 x u .
" x 2 = ( x + u)2 $ $ " (x ) = " (u) + " (x) . @ ) @ $ " x $ @ )
@ $ g h
((, $ Y) γ1 FC 0 ? @ $
0 , " $= $* #$ '* " $ -
γ1 = E (x − µ)
3
/σ 3 .
& > $> > $> " ) @ x 0 γ1 = E (x − µ)3 /σ 3 = E x3 − 3µx2 + 3µ2 x − µ3 /σ 3 = E(x3 ) − 3µ E(x2 ) − µE(x) − µ3 /σ 3 =
E(x3 ) − 3µσ 2 − µ3 . σ3
T Y) > 0 > β1 = γ12 ) Y) " > 7 $ @ $
((- 9 ='7/> " = B β2 = ) = > $* #$ ># ) @ $
! ' (
" " C* -
β2 = E (x − µ)4 /σ 4 .
* B Y) ') γ2 = β2 − 3
- = 0 , " $ $ & 8 ? 6:
((0 F> @ $ $ ' ' = > $ 7
@ x → x + a # F> $ &= µ → µ + a=
*- E$ @ $ @ ) )> > $ σ $$ " # + Q $ FC x → cx $ µ → cµ σ → cσ B
7 " # F ) ! + @ $ $ # @ = > '* " $= $ $ * " F> = > $= B @ $ $ & )#) B-) $ @ $ " = C @ @ 5 ) $= @ $ ) $ M6N ? 6 )$ & = F> µ = 0 > $ σ = 1 0 = B B " # $ ># )= > $ $ 4*# = 7* @ $ $ = > E$ * ) + ># F > xmod = > @ $ F' = > F = - H $ & x0.5 = 0 P {x < x0.5 } = F (x0.5 ) = 0.5 $= $ (Z & 0
> > $ xa T K $ a= > F (xa ) = a $ +* 0 @ > $ F 4> ) t0.5 = $= > (Z B , ) ? '* " $ 866: $ 0 $
E τ t0.5 = τ ln 2 ≈ 0.693 τ .
F # > $ F> U I J U A
$ $)= > ! $ " # " $ 7 " = > ? 69 > / y = y(x) 7 = $ 0 * F > y0.5 = y(x0.5 ) & 0 F > 0 F > $ % ? 5 " > +) $ I> & J 0 F > + @ $ I> & J 0 y= ymod ? " " y(xmod ) ? > $ σ > #-$ ) < $
+ ( & 3 8 $ % 6 = 7%777: " > > $ ># ) @ $ / @ > $ 0 * @ $ "= > ) + * @ $ " ! $ > %0 , "
$ $ f.w.h.m.gauss ≈ 2.36 σgauss
F " > P #-$ ) + $ > $ σ $ * $ & +*
? 6= $ @ ) " + 4A
3
= = 0 0 $C @ $ ) $
((1 " ( * &0 p(k) = 1/6= k = 1, . . . , 6=
x = (1 + 2 + 3 + 4 + 5 + 6) 1/6 = 7/2 ,
x2 = (1 + 4 + 9 + 16 + 25 + 36) 1/6 = 91/6 , σ 2 = 91/6 − (7/2)2 = 35/12 , σ ≈ 1.71 , γ1 = 0 .
8 > $> & : ( * E " $ f (t) = τ1 e−t/τ = t ≥ 0=
tn =
∞ n
t −t/τ e dt = n! τ n , τ
0
t = τ ,
t2 = 2τ 2 ,
t3 = 6τ 3 ,
( * , " $
σ=τ, γ1 = 2 .
F> " B O# $ 5C , " $ % 2 2 1 e−(x−x0 ) /(2s ) . f (x) = √ 2πs
F> >$ µ = x0 ? $ 5 %0 @ ) >
1 σ = √ 2πs = s2 . 2
∞ −∞
dx(x − x0 )2 e−(x−x0 )
2
/(2s2 )
& H) = P r0 B " $#C , " $ F> r0 $ 8 > $: s 8 ? # $> 0 r0 s
$= $" P ' : & > $> B O# A(r) = r2 π
4
A = = = = =
∞
dr A(r)f (r) −∞ √ ∞ (r−r0 )2 π √ dr r2 e− 2 s2 2s −∞ √ ∞ z2 π √ dz (z + r0 )2 e− 2 s2 2s −∞ √ ∞ z2 π √ dz (z 2 + 2zr0 + r02 )e− 2 s2 2s −∞ 2 (r0 + s2 )π .
B O# $ %#= P
= $ AC F # $ $ $) 86: A = A = π r2 ( * ) > * $ $= " 0$ 0 B* K1 )> K2 * $= * 5 & = * 86: $> = w1 8w2 : &
= $> = w1 + w2 = 1 .
* $> B* K2 & w1 " K1 & w2 5> > $> " K )0$ >* " $ wi = w1 K2 − w2 K1 %0 * 6 $ $= $ @ ) * $ $ * = 5> H> $ w1 K2 − w2 K1 = 0 .
? +) $ $ w1 =
K1 K2 ; w2 = . K1 + K2 K1 + K2
& ) $> * * ) " 0$ B* ? $ $ AC P * B* FA$ A 5> " ( * L 8 > : 7 >$ )#$ * + > >$ $= > H )>$ $ # $$ " " $$ $ ?$ $$ ? d1 " & ? d2 " $$ 0 $ & 6 & = ) & & 6 ) = w1 w2 + $ " w1 w2 > $ ! @ > $ $ " > $> # = "A$ $ )
7
*
)
*> & :*:* * & ,! " $ = A = > & '*) 0 w1 =
d2 ; d1 + d2
w2 =
d1 . d1 + d2
( * F $ 5 0
5> $ 7 ' P $ vx > ,
" $ 2 2 1 f (vx ) = √ e−vx /(2s ) s 2π
s2 =
kT m
= > k= T = m +) = 7* F F 0 $ kin =
m 2 (v + vy2 + vz2 ) 2 x
> $> E(kin ) =
3m m E(vx2 ), E(vx2 ) + E(vy2 ) + E(vz2 ) = 2 2
8
> ) $ > = 5> $ "
$ * $ 1 E(vx2 ) = √ s 2π
∞
−∞
2
2
dvx vx2 e−vx /(2s
E(kin ) =
)
= s2 = kT /m,
3 kT. 2
( * F$ $ 8 > $:
$
+ $ )$ ?> $ >
' ± 0.5 = " $) ! $ $ + ? > $A $ & ? )$> ) ! @ ) ) = $ > ? )$ > , & 1 > −0.5 < t < 0.5 f (t) = 0 0.5 1 2 . σ = t2 dt = 86: 12 −0.5
√
F$ $ σ = 1 / 12 ≈ 0.29 @ ) 5" $= 0 + a = * σ2 = a2 /12 F A$ #-$ ?#) $ " F $ ? $ +* 7 * K $ * ( * > $ Y) ) # > F + ε = 0.9 $ & $ C " > $ σ $ N1 N 7 S ! ?$ ' ) A = 0 > & " $ ? ) > = + " $ = A > ?# $$ " N 4 +) $ 6
σ
N1 N
1 ∼ √ . N
5* ) A > * )* )= > H )* ) $ $ 7 * F $ 0 ) $ +) $ 8 @ > $ + " $ σ(N1 /N ) = ε(1 − ε)/N = ? 6: ? )= N = " √ # $$ 7* ) ) $ > A = )$ * 1/ N @ 0
" > $
'*& A *
;
! ' !
5 AC " @ $ = F > = @ ) = C > $> $ ) " R) > >
> $> " $ ) " x & " $ p(x) )> f (x) & F @ $ / + $ = > % @ $ E) %
7 & " $
(*& + - n F " f (x)
µn = E(xn ) =
∞
xn f (x) dx ,
−∞
)>
∞
µn = E(xn ) =
xnk p(xk ) .
k=1
, ! * $ )$ $ ? $ ) F = > $> @ $ )$ = " + $ - n µ = µ1 )$ F " f (x) µn = E ((x − µ)n ) =
)> µn = E ((x − µ)n ) =
∞
−∞ ∞
(x − µ)n f (x) dx ,
(xk − µ)n p(xk ) .
k=1
- $#C ) F µ1 = 0 F # $ " - > $> $ C ) F F> )$ µ1 = 0 6 F F> )$ µ2 = σ2 F F> )$ µ3 = γ1 σ3 9 F F> )$ µ4 = β2 σ4
8 6 / % / # 6# 7 50$
>$ ) > # ? * $ % $ $= > " $ > = $ F * = L ' ) @ $ ) $ $ $= F @ $
<
(*( ! < & - % φ(t) @ $ - % φ(t) & f (x) ∞ φ(t) = E(eitx ) = eitx f (x) dx , 86: −∞
)> @ $ p(xk )
∞
φ(t) = E(eitx ) =
eitxk p(xk ) .
86:
k=1
%0 @ $ φ(t) %
7 &
? - $ >$ $
% = ) 0 $ B " + $ 0) φ(t) −∞ < t < ∞ $ *' % |φ(t)| ≤ 1= φ(0) = 1 φ(−t) = φ∗ (t) φ(t) $ = > f (x) = f (−x) $ *) 0 $ @ $ $ limt→∞ φ(t) = 0 @ x → y = ax + b > 7 % $#C φx (t) → φy (t) = eibt φx (at) . 86;: & + 4 0 0 %
7 ) - 7 F 86: $
∞
−∞
φ(t)e−itx dt =
∞
e−itx
∞
eitx f (x ) dx dt −∞ −∞ ∞ ∞ it(x−x ) f (x ) e dt dx = −∞ −∞ ∞ = 2π f (x ) δ(x − x ) dx −∞
= 2πf (x) , ∞ 1 f (x) = φ(t)e−itx dt . 2π −∞
5 $ 0 @ $ = > ) " 86: #$ 1 T →∞ 2T
p(xk ) = lim
T
−T
φ(t)e−itxk dt .
'*& A *
/ ' " %# $ % &
% A$ & +
$ F & "
E " ) %0 @ $ > F φ(t) n ? " φ(t) dn φ(t) = dtn
? t = 0 $ dn φ(0) = dtn
∞
(ix)n eitx f (x) dx .
−∞
∞
−∞
(ix)n f (x) dx = in µn .
866(:
$ 7
> $ " φ(t)= φ(t) =
∞ ∞ 1 n dn φ(0) 1 t (it)n µn , = n n! dt n! n=0 n=0
866:
F @ $ %
7 $ 7
> $ % F $$ = $= > *= F & $ ) F $ $ ) * φ (t) = E(eit(x−µ) ) =
∞
eit(x−µ) f (x) dx = e−itµ φ(t) ,
−∞
7
> $
dn φ (0) = in µn . dtn
φ (t) =
8666: 866:
∞ 1 (it)n µn . n! n=0
8669:
$ 866(:= 866:= 866:= 8669: 0 @
$ $0$ +) $ 8666: $ FA$ = 7
> $ ? $ ) ) =
$ µn
=
n k=0
n n n k (−1) µn−k µ , µn = µn−k µk . k k k
8F = 0 n = 0 µ0 = µ0 = 1 $:
k=0
% z = x + y " )> & y & g(x) h(y) FA$ + $ & f (z) φf (t) = φg (t)φh (t) . 866: +> &$ P 86(: > $> $
" x
φf (t) = E(eit(x+y) ) = E(eitx eity ) = E(eitx )E(eity ) = φg (t)φh (t) .
>$ ! # $$ @ ! $ 7 > & f (z) =
1 2π
e−itz φf (t) dt .
) > 7 8 " : %
7 + $ " f F " ? 69 0 % $ $
f (z) =
g(x)h(z − x) dx =
h(y)g(z − y) dy .
P 866: % $) 0
%
7
$ % L " & )$ % " @ $ + " F F H > $ % E$ = > > ) > K(t) = ln φ(t) = ln exp(itx) = κ1 (it) + κ2
(it)2 (it)3 + κ3 + ··· . 2! 3!
&$ φ(0) = 1 7 - BY) κi C " B 8 $ :
+) $ > $>#= > @ $ " x → x + b κi = ? " κ1 = " " # # κi ? $ ) F µk , µk H> ) K $ i 0 & " ) & $ $ ? = ) > $ " exp K(t)
'*& A *
#= " +) $ 0
i ≤ 6 ) ) F κ1 = µ1 ≡ µ = x , κ2 = µ2 ≡ σ 2 = " (x) ,
κ3 = µ3 , κ4 = µ4 − 3µ2 2 ,
κ5 = µ5 − 10µ2 µ3 , κ6 = µ6 − 15µ2 µ4 − 10µ3 2 + 30µ2 3 .
866: , > $> @ ) ') " 0 κ3 κ4 γ1 = 3/2 , γ2 = 2 . 866: κ κ2
2
) = + $ " # $$ " 0 $ " ) = φj (t)
% Kj (t) = " " " , $
# 0 E " " x = N c x " x @ $= κi= j j j=1 ) xj @ $ = > * κ(j) i ) = $#C N (j) κi = cij κi . 866: j=1
+* 0 +) $ ? 66 0 @ )= 0 i = 2= $$ & >
@ $ 6 ) 0
(** " ( * < % @ $ %0 @ $ Pλ (k) =
λk −λ e k!
% φ(t) =
∞ k=0
)
eitk
λk −λ e k!
φ(t) =
∞ 1 it k −λ (e λ) e k!
k=0
= exp(eit λ)e−λ = exp λ(eit − 1) .
> F dφ dt dφ(0) dt d2 φ dt2 d2 φ(0) dt2
= exp λ(eit − 1) λieit , = iλ , = exp λ(eit − 1) (λieit )2 − λeit , = −(λ2 + λ) .
$ F µ = k = λ , µ2 = k 2 = λ2 + λ
F> > $ @ $
k = λ , √ σ= λ.
> K(t) = ln φ(t) = λ(eit − 1) = λ[(it) +
1 1 (it)2 + (it)3 + . . .] , 2! 3!
- 0 " P κ1 = κ2 = κ3 = . . . = λ ,
> + $ ) ) F +* > + $ " ') 3/2
γ1 = κ3 /κ2
√ = 1/ λ , γ2 = κ4 /κ22 = 1/λ .
( * @ $ " # $$ = * " ) & $ " @ $ P1 (k1 ) = Pλ1 (k1 ), P2 (k2 ) = Pλ2 (k2 )
'*& A *
3
& P (k) k = k1 + k2 ) > % 0 P (k) φ(t) = φ1 (t)φ2 (t) = exp λ1 (eit − 1) exp λ2 (eit − 1) = exp (λ1 + λ2 )(eit − 1)
= φ(t) % " Pλ +λ (k) )> * " $ > @ $ F> = $ F>
)" $ $ > P* "# $ ( * < % F '* " $ ?$ " 1
f (x) = λe−λx
> %
∞
φ(t) =
eitx λe−λx dx
0
λ e(−λ+it)x |∞ 0 −λ + it λ = λ − it =
? $
iλ dφ(t) = , dt (λ − it)2 dn φ(t) n! in λ = , dtn (λ − it)n+1 dn φ(0) n! in = dtn λn
F @ $ µn = n! λ−n .
F>
µ = 1/λ ,
> $ σ=
µ2 − µ2 = 1/λ
Y) γ1 = (µ3 − 3σ 2 µ − µ3 )/σ 3 = 2
2
4
$ = - > $> )$ $ / $ '*) $0 > / 5$ ) ) " $ +* @ $ + ) $ "
@ = $ ? $ " $
( ! !
/ +* B* 6 > > $> $ @ $ 5> $ ,0 0
$> ? > $ " / = > $> = "# $ @ $ $ ) 4 $ @ + @ $ ! $ " & 0 L $ I u & u(xk )J= > u $ % " x = 0 $ &
0 L $ I x & xk J P {u = u(xk )} = P {x = xk } .
+ @ $ $ ! $ & 0 P$ L ) $= > > 7 " F E $ >
(,& 5$ & f (x) $
% u(x) 5 & g(u) 8? 6: $ P {x1 < x < x2 } = P {u1 < u < u2 } u1 = u(x1 )= u2 = u(x2 )
P {x1 < x < x2 } =
x2
x u1 2
=
f (x ) dx g(u ) du .
u1
/ L > |g(u)du| = |f (x)dx|, dx g(u) = f (x) . du
866;:
+ $) $ = & *" & > 866;: $ = > 5 @
$ F (x) = G(u(x))
! *& *
7
)*& *
f (x) g(u) !
u(x)
A6
& = " $)= x(u) $ 8? 6;:= )> % = 0 + #$ ) % # > u(x)
g(u) =
dx dx f (x) + f (x) + ... . du Ast1 du Ast2
86(:
( * + $ @ $ 0 B$"
P " $ 5$ & 0 P r 1/(r2 − r1 ) 0 r1 < r < r2 f (r) = 0 . 5 @ $ g(V ) @ V (r) F dr g(V ) = f (r) dV
, dV = 4πr2 dr
>
g(V ) =
( * @ $
1 1 1 1 −2/3 V = 1/3 . 2 1/3 r2 − r1 4π r 3 V2 − V1
G ?> $
8
)*& *
f (x) g(u) ! u =
x2
"&& A6 f (x)
A6
g(u)
)*& *
9
D
C *&
! *& *
;
%0 $C" " x F> x0 @ ) s2 @ $ g(u) $= > u = (x − x0 )2 /s2
G ?> $ > $> " u = > $> " (x − x0 )2 , " $ $ s2 % x(u) )> Q F 2 2 1 f (x) = √ e−(x−x0 ) /(2s ) s 2π
s dx = √ du 2 u
- >
g(u) =
1 √ e−u/2 2 2πu
+ {· · ·}Ast2 . Ast1
+ #$ Q $= $ 1 e−u/2 . g(u) = √ 2πu
86:
% g(u) $ χ2 / 8<G " $: 0 % $ ( * @ $ $ 5 5> $ 7 ' P $ v
&
f (v) =
m −mv2 /(2kT ) e . 2πkT
$ E = v2 /(2m)= @ $ g(E) $ v(E) > 6 Q & = "A$ ? $ ) $ +* 1 dv , =√ dE 2mE 1 √ g(E) = e−E/kT + {· · ·}Ast2 . 2 πkT E Ast1
+ #$ Q $=
1 g(E) = √ e−E/kT . πkT E
<
(,( " 8 + <* ) #-$ = $$ 5" $ ) $ @ $= )+ , " $= $ > ? $ $ 0 = > > )> " $$ & f (x) g(u) 7 u(x) $ u x f (x ) dx =
g(u ) du .
−∞
−∞
/ $ @ $ F (x)
G(u)
F (x) = G(u) , u(x) = G−1 (F (x)) .
! " G A = > f g $ > A ! " G & $ $ ># = ? $ $" $ f (x) = f (x) = 1 0 0 ≤ x ≤ 1 F (x) = x G−1
G(u) = x,
866: ( * )$ $ '* " $ 5" $ 5$ 1 0 0 < x < 1 f (x) = 0 , −λu λe 0 0 < u g(u) = . 0 $ 7 u(x) > = > $ % = / $ / " u = G−1 (x) .
u
g(u ) du =
0 u
λe 0
−λu
x
0 x
du =
f (x ) dx , f (x ) dx ,
0
1 − e−λu = x , u = − ln(1 − x)/λ .
8& # 0 +) $ 866: ) 4 $ "
> A :
3 '
& > P )$= $" ) x
) +) $ @ u = '* " 8" # 1−x x ) : ? & # ) + E " $ 7 8"$ B*9:
$
$ " $$ $ ? " @ $ 8 @ $ $ : " $ & # % @ $
(-& ) /:
& - > % @ $ F (x, y) 0 & = & " x = y x )> y ) - P {(x < x) ∩ (y < y)} = F (x, y) .
@ $ $ F (∞, ∞) = 1, F (−∞, −∞) = 0 .
& - > * ? $ " F @ x= y 2 f (x, y) =
∂ F . ∂x ∂y
? - $ + $ $
∞
∞
f (x, y) dx dy = 1 . −∞
−∞
H fx(x) )> fy (y) & ? P " $
fx (x) =
∞
f (x, y) dy , −∞ ∞
fy (y) =
f (x, y) dx . −∞
P " $ 8 " : &
$ = & fb (x|y) 0 " $$ & " y x
fb (y|x)
f (x, y) f (x, y) dx −∞
fb (x|y) = ∞
f (x, y) , fy (y) f (x, y) fb (y|x) = ∞ −∞ f (x, y) dy =
=
f (x, y) . fx (x)
86:
869:
$ 6 69 > +V 7 86: ( * D $ $ " )> )> , " $ P " $ $ & fb (y|x = 1) " fb (x|y)fy (y) = fb (y|x)fx (x) = f (x, y) .
f (x, y) =
2 y2 (y − 2.5)2 (x − 2)2 1 x 0.4 − 0.6 exp − − + √ exp − 2π 2 2 3 4 3
fx (x) = fy (y) = f (y, x = 1) = fb (y|x = 1) =
2 (x − 2)2 1 0.4 x √ exp − +√ , 0.6 exp − 2 3 2π 1.5 2 (y − 2.5)2 1 0.4 y √ + √ exp − , 0.6 exp − 2 4 2π 2 1 (y − 2.5)2 1 y2 0.4 1 0.6 exp − − + √ exp − − , 2π 2 2 3 4 3 1 (y − 2.5)2 1 y2 0.4 0.667 0.6 exp − − + √ exp − − . 2 2 3 4 3
fb (y|1) f (y, 1) $ fb (y|1) dy = 1
, $ = %
? 6 )$ D $ $ " )> 5C @ $ = > P " $ $ @ $ $)$
$ )> @ $ B
" )) !
& * %*&
# ,! 43 !
3 '
2
& *
,!!
!
* y x = 2 C
:*:* *
f (y, 2) : & *!
" D D
) ! $ - 0 > $# > = > @ $ - ! > @ $ " P $ G 7 P ) = " = @ $ K O#
$ )$ 85 $ )* 0 * @ $ & : / $ @ $ % " " $ . H L @ $ - F , $ $ 0 $ =
+ $ P> dω = sin θ dθ dφ= θ , φ
?)> & = & " θ , φ P> ∆ω ) - = P {θ , φ ∈ ∆ω} =
$$ = , $
π
f (θ, φ) dω ∆ω
2π
dθ sin θ 0
dφf (θ, φ) = 1 . 0
@ $ ) " θ= φ @ z = cos θ= φ= > - P> dω = dzdφ
$ & = P $ P> B z = φ ) - = > f˜(z, φ)dzdφ $ $ = > f˜(cos θ, φ) = f (θ, φ) $ @ @ )$ )+ + $ " P " $ + 5" $ f˜ = f = 1/(4π) P " $ z = $$
f˜z (z) dz = dz
2π
dφf˜(z, φ) =
0
1 dz , 2
> 5" $= > @ > $ " θ $
fθ (θ) dθ = sin θ dθ
2π
dφf (θ, φ) = 0
1 sin θ dθ . 2
F " > - P " $= "
5 AC P> P $ #$ > f˜z fθ 0 H>$ - z ∈ [−1, 1] )> θ ∈ [0, π]
(-( + ? $ ) % - > F 0 )> @ $ µx = E(x) , µy = E(y) , σx2 = E (x − µx )2 , σy2 = E (y − µy )2 , σxy = E [(x − µx )(y − µy )] , µlm = E(xl y m ), µlm = E (x − µx )l (y − µy )m , µx = µy =
∞
∞
∞
xf (x, y) dx dy = −∞ ∞
−∞ ∞
−∞ ∞
xfx (x) dx ,
yf (x, y) dx dy =
yfy (y) dy , ∞ (x − µx )f (x, y) dx dy = (x − µx )fx (x) dx , µx = −∞ −∞ −∞ ∞ ∞ ∞ (y − µy )f (x, y) dx dy = (y − µy )fy (y) dy , µy = −∞ ∞
−∞ ∞
−∞
−∞
−∞
−∞
3 '
3
E & f (x, y) = const C* ** F µlm = µlm
∞
−∞ ∞
∞
−∞ ∞
= −∞
−∞
xl y m f (x, y) dx dy , (x − µx )l (y − µy )m f (x, y) dx dy .
F σxy $ " x y & σxy " " = @ x y ? B
= > $> " y " $$ & " x " & # $ +* 5> F 5 AC
B
G -) 0 5 AC ρxy =
σxy , σx σy
$ 9 ? 5 > ) ! $ $ $ |ρxy | ≤ 1 ? 66 )$ 4A 0
@ $ & B
Y) = ?$ = @ & " ?# $$ " x= y= > & = $ = $ > 8 : @ $ f (x, y, . . .) P " $ f (x, y, . . .) = g(x)h(y) · · · .
, 86: $ ! # $$ $ @ $ fb (x|y)= fb (y|x) " H> $ 5 AC y= x= > +$ L ! # $$ B* * + 6 @ "# $ % $ $ > = > $ 8* > ! # $$ ? : & " - 0 ? 866 L: 5 $ " #
@ # $$
4
( * B
@
> $$= > P & H> $C" 4A # > )> + ? 66 B $" B
( * ?# $$ @ B
Y) $ + & f (x, y) =
√ 2 2 1 e− x +y 2π x2 + y 2
σxy = 0 8 E f = const. B := x y # $$= $ @ $ fb (y|x) " y # $ " x / ' % $ ! # $$ " " > $ ) > $$ FC 0
$ '* ! # $$ = )+ $ + $ = " > + ? $ / A ? ?# $$ 8 E L : > + ? $ " " > = " $)= H> P , >$ O0 F 87* = E := ) B
?# $$ 0 A 7 ! # $$ 8 7= F < = @ $ " F* : 7 '* ?
(-* & f (x, y) g(u, v) 0
u(x, y)= v(x, y)= $ ) " % g(u, v) du dv = f (x, y) dx dy , ∂(x, y) , g(u, v) = f (x, y) ∂(u, v)
0 + $ % ( * 7 , " $ )> , " $ f (x, y) =
1 −(x2 +y2 )/2 e 2π
9>(
!
# r > 0 |φ| < π &
3 '
7
x = r cos ϕ , y = r sin ϕ
> % ∂(x, y) =r. ∂(r, ϕ)
& g(r, ϕ) =
P " $
gr =
0
gφ =
2π
1 −r2 /2 re 2π
g(r, ϕ) dϕ = re−r
∞
g(r, ϕ) dr = 0
2
/2
,
1 . 2π
@ $ P " $ 8? 6: F x= y r= ϕ # $$
(-, 4#-$ = $$ & f (x, y) @ $ g(u) @ u(x, y) A$ > & A 0 7 ) 0 0 = > )> @ v = v(x, y) - = 7 f (x, y) −→ h(u, v) 0 C P " $
∞
g(u) =
h(u, v) dv −∞
/ %# )> #C$= v = x ) ># > A >
∞
g(u) = −∞
f (x, y)δ (u − u(x, y)) dx dy
86:
%0 @ $ u = x + y " )> # $$ @ x= y = f (x, y) = fx (x)fy (y)= $ / $ 0 y
g(u) =
f (x, u − x) dx =
fx (x)fy (u − x) dx .
% $ $ = % $* ) = $ fx fy ( * @ $ L ) " )> $)
8
)*& *
& * %*&
* ( /*** - ?@ GH I !@ D
I @# @ D
/*** > t1 , t2 $ @ $ 1 0 |t1 − T1 | , |t2 − T2 | < ∆/2 f (t1 , t2 ) = 0 ?> T1 = T2 5 & " t = t1 − t2 ># > ?> T1 = T2 = 0 8? 69: & @ $#C t = t1 − t 2 , t1 = t1
% ∂(t1 , t2 ) =1. ∂(t1 , t)
@ $ = h(t1 , t) = f (t1 , t2 ) = 1 ,
3 '
;
= t *
2
t1 t2#
' + = ? 69 )$ % P " $ A > / $
? $ ⎧ ⎨ ( t − T + ∆/2)/∆2 0 t − T < 0 g(t) = (−t + T + ∆/2)/∆2 0 0 < t − T ⎩ . 0 ( * @ $ /*G 87 * : H /* " = f (px , py ) =
1 −(p2x +p2y )/(2s2 ) e , 2πs2
@ ) p2x = p2y = s2 %0 T /* 0 > ? 0 ) $ q = p2 & @ $ " q &
√ px = q cos ϕ , √ py = q sin ϕ
1 ∂(px , py ) = ∂(q, ϕ) 2
h(q, φ) =
P " $
2π
g(q) = 0
1 −q/(2s2 ) e 4πs2 1 −q/(2s2 ) e dϕ 4πs2
1 −q/(2s2 ) e , 2s2 2 2 1 g(p2 ) = 2 e−p / p .
p =
3<
$ '* " $ p2 = p2x + p2y ( * T )> $C" @ " x, y # $$ " = 2 2 x +y 1 exp(− ). 2π 2 @ $ g(u) T u = y/x & u = y/x , v = x )> x = v , y = uv f (x, y) = f (x)f (y) =
& = ) >
h(u, v) = f (x(u, v), y(u, v))|D| ,
% D=
∂(x, y) = −v , ∂(u, v)
g(u) =
h(u, v) dv ∞ v 2 + u2 v 2 1 )|v| dv exp(− = 2π −∞ 2 1 ∞ −(1+u2 )z = e dz π 0 1 1 , = π 1 + u2
> z = v2 /2 ) > g(u) < @ $ 8 ? 6;: %0 @ $ T )> 5C @ $ # " # ? 0 8 >0
F < = B* 9: E $># )$ & $ & , $ F ! + ) = > T " 5C @ $ )= @ $ , ! * $ " #$
(-- " 8 + F < @ " / = 5" $ " $$ @ $ ) )$ & 0 >
) / $ / " 0 &
) *) +*= $ > B* 9 A$ ( * )$ $ )> , " $ 5 " $ r1 r2
3 '
3
& $ $ " ) 0 " >
$ g(ρ, ϕ) dρ dϕ =
ϕ
ρ
2 1 dϕ ρ e−ρ /2 dρ , 2π
& % ρ(r1 )
0
ρ
2
ρ e−ρ
dρ = r1 , ρ 2 −e−ρ /2 = r1 , /2
1−e
0 −ρ2 /2
= r1 , ρ = −2 ln(1 − r1 ) .
* > ϕ(r2 ) ϕ = 2πr2 .
C > x y
−2 ln(1 − r1 ) cos(2πr2 ) , y = ρ sin ϕ = −2 ln(1 − r1 ) sin(2πr2 ) .
86: 86: @ # $$ " " !
* $ @ ) x = ρ cos ϕ =
f (x, y) =
1 −(x2 +y2 )/2 e . 2π
8& A 1 − r1 r1 ) = 1 − r1 $" :
(-0 /: %0 " @ $ = 0 & " N @
= +) $ = > > 0 )> " $ = " $ F @
> )> #C$ x = {x1 , x2 , . . . , xN } .
F * " " = N P " > A
) & f (x1 , x2 , . . . , xN ) = f (x) .
3
': : 9 7 > $> % u(x)
∞
E(u) = −∞
···
∞
u(x)f (x) −∞
N
dxi .
i=1
@ / $ B" ) ' C Cij = (xi − xi )(xj − xj ) = xi xj − xi xj .
& *) + $ % ∂(x1 , . . . , xN ) . g(y) = f (x) ∂(y1 , . . . , yN )
(-1 .? + #) $ , @ $= ) + # $$ F $ ti '* " $ E τ &
f˜ 0 N & 8 $ & : f (x) " @ 8 777= $ 777: xi $#C - f˜(x1 , . . . , xN ) =
N
f (xi ) .
i=1
) % (
(0& & $ C & = ) &0 $ )> F ) S ? > + " $ 10 B1/6 (2)
=
10 2
2 8 1 5 . 6 6
& = 6 &0
&0 " 0 ) = ) + Y)
10 2
=
10! 2! 8!
4
3
$ = > " FA$ ' = )> ( &0 ) " $ 45 ? $$ % > & " > 0.29 + $ n )#$ $># KH 8 P " n # $$ @ := H> & p= 1 − p $ 8 $ : A= A¯ = & Bpn (k) 0 = k KH " $ Bpn (k) =
n pk (1 − p)n−k , k = 0, . . . , n . k
7 K $ pk > $ " [p + (1 − p)]n = 1 . 86;: $ & $ p = >
P$ n @ E(k) = np .
F $ D $ $ A > @ ) %0 n = 1 - ? 66 k = p Bp1 (k) = pk (1−p)1−k 0 k = 0, 1 σ12 = (1 − p)2 p + (0 − p)2 (1 − p) = p(1 − p) .
866: $ 0 @ ) " n " ) σ 2 = nσ12 = np(1 − p) .
% %
n φ(t) = 1 + p eit − 1 .
869(: F # = > > $ " 86;: k k it k 7 p p e ) ? 866: $ = " = P* ) + " $ $$ > @ $ " k = k1 + . . . + kN @ $ Bpn (ki ) > + " $ Bpn (k) n = n1 + . . . + nN ( * > $ " + $ #
# ? * > " ;( Z 8p = 0.9: > " ((( 7 8n =√1000: F ;(( 8np = 900: $ > $ σ 90 ≈ 9.5 ( * 5 $ F < / $ F F < / $ π > ) > T %# 4 2 = B * $ $ = $" n $>0
i
3
= ? " > $ 1 " ! * $ = F k = np p = π/4 ! 5 $ " 1% ) = $ σ np
= 0.01 ,
np(1 − p) = 0.01 , np n=
(1 − p) (4 − π) = ≈ 2732 , 2 0.01 p 0.012 π
n = 2732 ) * $ ( * ? )* )> $ $> $ ? )* ) *' > F < 0 & $G
H $0 > = > 0 > ) $ $> %0 N " $ $ )$> wi = i = 1, . . . , N ? )* ) εi 5 )* )
wi εi εT =
. wi
@ ) 0 H ) + $ ) # wi2 εi(1 − εi) > @ ) σT2 " εT $ σT2
=
wi2 εi (1 − εi ) .
2 ( wi )
(0( + & )" = " )>= N A$ ?$# $ = & p1 , p2, . . . , pN = & n @ H> k1 , k2 , . . . , kN @ )$ ?$# $ 1, . . . , N ) = $ n! Mpn1 ,p2 ,...,pN (k1 , k2 , . . . , kN ) = N
i=1
N
ki ! i=1
pki i ,
> " # pi = 1 ki = 0, 1, 2, . . .= + $ "
ki = n $ F " $ = $ ) $ ) + " $= > F (p1 + p2 + . . . + pN )n = 1 .
) " pi = "$ 86;: ? + Y) F Y) = ? ) ? $ " n KH N B ) k1 , . . . , kN $
4
33
> $> E(ki ) = npi
B" ) ' Cij = npi (δij − pj ) .
B
$" & ) + 0 * * " $ 8ki : B i 8 F > := kj 0 H B j F > $> E(kj ) +* 0 F " $ " $ & ) +"A $$ ** F " $ * $ " 4$ P @ x & = / " i $ = 8xi < x < xi+1 := > F $ " # 8x → x : $> & x / " $ 4 $ D $ $ " F " $
(0* P 4#-$ λ $ k P " $$ " @ $ 8? 6: Pλ (k) = e−λ
λk . k!
> $> @ ) > 8 : E(k) = λ , " (k) = λ . % " > +* ? 66 φ(t) = exp λ(eit − 1) , κi = λ , i = 1, 2, . . . .
')= 1 1 γ1 = √ , γ2 = λ λ
)$ = @ $ $ AC λ $C $ > = 8"$ ? 6: @ $ 5 ) + " $= > np = λ $ n $$ 8n → ∞: $ 0
34
/* *(
4
37
$$ +> 5 )0 $ $ % + " $ 869(: 0 p = λ/n $ $ % p
lim
n→∞
1+
n λ it (e − 1) = exp λ(eit − 1) . n
+ @ $ > $ = @
* @ (n) $ C / " %# > @ $ " > = > " $ $ + " $ $= @ $ C ( * 5 ) + " $ $ C @ " 1 1016 & Y " / √" " 1 µ3 λ = 10 > $ σ = 10 ≈ 3 $ P $ 0 + " √ $ $ >0 @ ) % 1 − 10−15 # ? " # " $$ " $ @ $= > B $ C &
0 ) B @ $ * B * $ P= F 8P :=
K* 5 $* 5 $ 0 + $ %
' k = k1 + k2 " * " k1 , k2 >
$> λ1 , λ2 > * " > $> λ = λ1 + λ2 = P* "# $ = $ $ ? "# " ( * > $ " # ! $ > S $ $ ! $ B > √ > $ 8 > $: k S + B > $ " k − B %0 $ S = 100 > ! $ √ B = 50 > > F 150 $ > $ " 150 , ! $ > $ 0 √
$ F 100 > $ σ = 150 ! A = > > $> B ' & " * " k0 > $> λ0 * + " $ F + ε $ = $ k @ $ > $> λ = ελ0
38
Pλ (k) = =
∞ n=k ∞ n=k
Bεn (k)Pλ0 (n) n! λn εk (1 − ε)n−k e−λ0 0 k!(n − k)! n!
= e−λ0
∞ (ελ0 )k 1 (λ0 − λ0 ε)n−k k! (n − k)! n=k
(ελ0 )k . = e−ελ0 k!
? $ * > $= "
$ $ P % ε 8,0 >0 > P = > + " k0 $ > : @ / $ / # k
dλ Pλ (k) ,
λ
i=0 k λi i=0
∞
Pλ (i) =
i!
e−λ =
∞
λ
(λ )k −λ e dλ , k!
A$= & P {i ≤ k}= i
$ k ) - = 0 / $ ) - ? > $ #) $ " / "$ ) 8 B* :
: ' & > # ? "# β = ? * " A$ % $ & A # " # #) = > ) + $ / " ,>> > &
" $
$ ? = # $> @ $ > = F )> " $ @ $ > A $> $ * / $
F < F #) $ P= > $> + $ % " 4$ " $ & > % = F λ1 + $ & ε1 λ2 + $ & ε2 $ > &
$ @ & 5> w1 = 1/ε1 w2 = 1/ε2 !
@ ) $= + $ * " =
4
3;
/* *(
?G *&&@ (
*! ?/ @#
' * 9
! λk11 −λ1 e , k1 ! λk2 Pλ2 (k2 ) = 2 e−λ2 , k2 ! k = w1 k1 + w2 k2 ,
Pλ1 (k1 ) =
> 0 λ # @ ) " (cx) = c2 " (x) λ = w1 λ1 + w2 λ2 , σ 2 = w12 λ1 + w22 λ2 .
, 866: $ $ 0 "
869: @ $ " k $ % $ # $> F 8 " : > H 0 ? > $ ) *) F $ = # $>= = @ $ (1)
κi = w1i κi
(2)
+ w2i κi
.
˜ k˜ ˜ = λ e−λ˜ Pλ˜ (k) ˜ k!
> ) ># > > $> λ˜ * # " @ $ = @ # " + ) F> $ $ C > $> + $ & σ2 1 = 2 , ˜ λ λ 2 ˜ = (w1 λ1 + w2 λ2 ) , λ 2 2 w1 λ1 + w2 λ2
4<
> > " * λ k = k˜ ˜ λ 2 λ1 + w22 λ2 w . = k˜ 1 w1 λ1 + w2 λ2
,# $" $ " k B $ + = > " ' @ $ 5 AC k˜ C : 5 (& ? )* )"
$ k " + $ $ $ - ) > k˜ $> + $ 8F $ - ) ) > @ # " F> ) > $ µ/σ : + " ') γ1,2 " 869: ˜ $#C 866: @ $ 1/ λ , 1/λ˜ FA$
> B ( * @ $ $> = * " + $ & > F λ1 = 20 + $ = & ε1 = 0.1 8w1 = 10: $ > λ2 = λ1 = 20 + $ ? )* ) ε1 = 1 > $>
$ λ = 220 @ $
$ k ** ' ˜ > = > @ $ F> λ, 2 ˜ = (10 · 20 + 1 · 20) = 24.0 , λ 102 · 20 + 12 · 20
" > = @ $ " k˜ $ - ) " $ 40 + $ * " 24 $> + ˜ λ ˜ = k˜ · 220/24 $ ,# $" $ " k = kλ/ ˜ > = > @ $ " k )$ & 0 k k˜ $) ? 6 )$ @ $ )> #G" @ ˜ B F $ @ $ " kλ/λ > @ ) 0 ? B %# # $ U k $ ) U $ ! @ $ $ @ ? " )> $> @ $ "
2 ˜ = ( wi λi ) , λ w2 λi
i2 w λi . k ≈ k˜ i wi λi
%0 " N )#$ 5> = @
$ g(w) $ = > * > $> λ = k = N g(w)w dw
4
4
?/ @ &
/* *(
?G *&&@ 9
2 g(w)w dw ˜ λ=N , g(w)w2 dw g(w)w2 dw . k ≈ k˜ g(w)w dw
F = H) λi = 1 $ / ? 6 @
$ $#C$ " 5> )>
* @ $ " $ D $
$
(0, 5" $ ? 66 + $ $
F $ ) > = "
" = $$ / " $= 0 $ & $> / % / " E# $ α F> ξ @ $ 1/α > |x − ξ| < α/2 g(x|ξ, α) = 8696: 0 . F> @ ) x = ξ σ2 = α2 /12 # %
4
φ(t) =
1 α
ξ+α/2
eitx dx =
ξ−α/2
αt iξt 2 sin e . αt 2
869:
! + ) $ ) > $ % # 869: 0 ξ = 0 $ ) F 8 $ " > " # : µ2k =
1 α 2k , µ2k−1 = 0 . 2k + 1 2
5" $ ?$ $* 0 @ ) $ >0 @ $ " " U % $ 0 $" r )> ( U > ) P P$ * ! $ $ 5" $ $ ) % 7 r → x = α(r−1/2)+ξ F 5" $ $ ) H> ) " ) x= y 8696:= # x y $ A $ $ T B # $ α F* x0 = y0 = ξ 5 x + y = z " * ) , $ = z / " 2ξ − α < z < 2ξ + α " 0 z 0 8 * @ $ $ : 2ξ +# $ b = 2α 5#C 866: @ ) @ $ " (z) = " (x) + " (y) = α2 /6 = b2 /24 $$
(0- % 5C , " $= > ? 66 $0 = f (x) ≡ N (µ, σ 2 ) = √
2 2 1 e−(x−µ) /(2σ ) , 2πσ
$ ) + 5 0 = $ # $$ " " )> " $ > ,
" $ 8P* "#: 6 + @ $ > χ2 @ $ 5 ) $ C n= λ )> $ C " % $ $$ , " $ 8"$ @
* 5" $: 6 J !
µ σ2 ' (
4
4
@ , @ $ $ ,# $ , " $ & +* ) $ 5> $ 8$ B* : " 5 0 = L = + > +>$ $ " F
$ $ ,# $ , " $ 9 5> @ ) * $ ) % *O ) $ $ $0$= > * @ $ $CA $ 5 0 6 5 % F> $ C N " " = 2 # $$ " $ @ $ @ ) σ0 $ = $ # $> , " $ @ ) σ2 = σ02 /N ,0 ?$ ) * #) & > + > " ) )$ > ? 6= > " , " $ $ # > ? 6 )$ @ $ F> " $ " )> '* " / %# ? # $ , " $ %0 '* " $ 8 ?: ? # $ , " $ $ 0 5" $=
0 0 ) $ , " $ 0 % , " $ # ?0 8 ,$ : %
7 1 φ(t) = exp(− σ 2 t2 + iµt) 2
0 µ = 0 $CA $ " = C
κ1 = µ κ2 = σ 2 = " > = > $ ) F = ># $ µ2k = 1 · 3 · . . . · (2k − 1)σ2k $$ = > L ) " φ(t) 80 µ = 0:
% , " $ )> F' B * $ $ % 2 x 1 1 xy y2 G(x, y) = exp − − 2ρ + . 2(1 − ρ2 ) s2x sx sy s2y 1 − ρ2 2πsx sy
8699:
> 8699: $>#= F 2 x = s2x , 2 y = s2y ,
xy = ρsx sy .
4
* 2 9 ' * n
! 5:*
2 6 *> n %*( &
A n = 5 %*&
&
4
43
)*& *
A : !
D* * C** $(
&
? +> 0 +* $= '*) + $
> $> = " ) > / $ " 8699: 0 y P " $ " x= > , " $ + sx %0 y $ * > < @ $ = !
(ρ = 0) ! # $$ $= @ $ G(x, y) , " $ 0 x y
B " & > = > > '* ) 5 $ 1 1 − ρ2
x2 xy y2 − 2ρ + s2x sx sy s2y
= const
* ) * %0 *) & const = 1 * ? 6; $ ? $ % * &
√ $ & G(0, 0)/√e= " F' % 1/ e $ @ 8P : A > B
) @ > $
44
x = x cos φ + y sin φ , y = −x sin φ + y cos φ , 2ρsx sy . tan 2φ = 2 sx − s2y
4 = @ ) sx2 y 2 2
x
s2 x,y =
sy 2
@
s2x − s2y sx + sy ± . 2 2 cos 2φ
, " $ @ % 1 1 x2 y 2 G(x , y ) = exp − + 2 = f (x )g(y ) . 2πsx sy 2 sx 2 sy
)> , " $ F' x → x−x0 , y → y−y0 $ @ $
$ & " ) > $ P $ $ $ @ > ) @ x ) F 4 8 *" - " $) : B" ) ' C A > (x0 , y0 ) > 8699: , " $ n
1 1 exp − (x − x0 )T C−1 (x − x0 ) . G(x) = 2 (2π)n det(C)
4#-$ / " B" ) ' V = C−1
> 5> ' $ = > @ ) Cii B * xi ) $ C 5> Vii 0 , " $ n % 1 T G(x) = exp − (x − x0 ) V(x − x0 ) . 2 (2π)n det(C) 1
/ )> % F ) C
s2x ρsx sy , ρsx sy s2y 1 − sxρsy 1 s2x V= ρ 1 1 − ρ2 − sx sy s2y C=
det(C) = s2x s2y (1 − ρ2 )
V
4
47
5:*
*6 * 9 6 (00 '7" ? '* " $ " * # ?C E " $ 8 7 $ $ # : @ $ / " )> * "
@ 8 )> # = E0 # $ + * : 4#-$ " $ " 7 = F L '* " $ 0 ) I5 # J= 0 ?#= @ $ O ) + & 0 7 # $$ " ? C> 0 5 0 ) * t # $$ " t ) C " * & 0 7 )
t1 + t2 $ & f (t2 ) *)
& 1 − F (t1 )= t1 0 f (t1 + t2 ) = (1 − F (t1 )) f (t2 )
f (t1 + t2 ) t1 ) f (t1 )
t2
= % * *
869: c $ 869: '* f (t) = aebt & > " $ = & = $ 1 − F (t1 ) = cf (t1 ) , f (t1 + t2 ) = cf (t1 )f (t2 )
48
f (t) = λe−λt .
% A > = > 869: L ) * L $ $ f = −c df /dt A < % F '* " $ > +* ? 6 $
(01 χ2 < T @ $ 8χ2 @ $: * P @ $ " F $ @ $ 8$ - )= B* ;: 7 A$ = F ) = )> $ + $ 7 ) G -) " > 7$ AC χ2 ) 5 AC >$ χ2 @ $ % $ f = + $ *# > % f = 1 ? 69 $$ 7
" @ x > $> χ2 = u = x2 /s2 = > s2 @ ) = g1 (u) = √
1 e−u/2 2πu
(f = 1) .
8 G > >$ ) > " + u > 0 χ2 : F> @ )
@ $ E(u) = 1 )> " (u) = 2 & > f # $$= " = @ ) 5 AC = u=
f x2 i
i=1
s2i
,
u * χ2 @ $ 0 f % $ 869: " +> $ $ ? 0 5" $= χ2 @ $ *) # ? 66 )$ $ + * & f = 2 '* %0 $ C & " f > # $> , " $ ? @ $ - 0 f > 2 F' F > umod = f − 2 > $> E(u) = f " u = χ2 $ - " u= @ ) $$ & 0 f = 1 $ >
gf (u) =
1 uf /2−1 e−u/2 Γ (f /2)2f /2
umod = f − 2 , E(u) = f ,
" (u) = 2f .
4
4;
0 (K
A
& - + v " N xi , 0 8"$ ? 66: v2 =
N 1 2 x −x ¯2 N i=1 i
= x2 − x¯2 .
& @ xi , " $ F> x0 @ ) s2 $ = $ N v2 /s2 χ2 @ $ " f = N − 1 % $ & > +> )$ $ $ ? 66 $ > $> 2 N −1 2 s , v = N " ! N v2 = N −1. s2
< : G ?> $ v2 " F> F> x¯ 0 " > $> µ= + $ " x¯
7<
F> $ F> x¯ F> $* + F> v2 0 + B " * $ F* xi $C F σi F T 8 66: 5 AC χ2 =
N 2 (xi − xt (λ1 , . . . , λZ ))
σi2
i=1
,
> xt B " > 0 Z )* λk χ2 % G ?> $ F> " @ $ 5 C & " χ2 D $ " F> B " & B " * " # $ = $ χ2
? * $ Z χ2 @ $ f = N − Z % $ F * " Z > $ $ $ / % > 5 AC= F> = $*= Z = 1
(02 " $ ? @ $ = '* > χ2 @ $= *)# 5" $= & f (x) ≡ G(ν, λ) =
λν ν−1 −λx x e ,x > 0 Γ (ν)
- > λ > 0 * = ># ν > 0 %
@ $ $ '* " $ $ 0 ν = 1 ν H $ ))$ & # = 0 ν = f /2 λ = 1/2 χ2 @ $ f % $ = "$ 6 5" $ > $ ) ) + $ " "
= = > $ *)# = *" & # ?$ A @ = x0 = @ $ x → x − x0 > = % %
φ(t) =
1−
it λ
−ν
869:
># @ $ # $ φ(t) → φ(t) exp(itx0 ) )
%$ > $> = @ )= ? $ F = ') L ) " φ(t) ) F #
x =
ν , λ
" (x) = λν2 , µi = Γλ(ii Γ+(ν)ν) , γ1 = √2ν
, γ2 =
6 . ν
4
7
@ $ F' F > xmod = (ν − 1)/λ= 8ν > 1: 5" $ * ) = > " $ " " xi * λ > # 0 % * ν=
νi .
? $ 869: $ > / $ $$ P 869: 0 χ2 @ $= G(f /2, 2) $$ ( * F> " ) & x¯ = xi /N = '* " xi =
% 8"$ 6: φx (t) =
1 . 1 − it/λ
+ $ N = + $ $ $ 0 %
7 86;:= φx/N (t) = φx (t/N )=
% 5" $ * N λ % * N −N it φx¯ (t) = 1 − . 869: Nλ + 5 )> $ C N A > " 50 $ 5) $ C )> 5 )> ) 0 )$ ? 869: $ it ln φx¯ (t) = −N ln 1 − Nλ $ # 2 −3 it 1 it , ≈ −N − + N − − Nλ 2 Nλ 1 1 2 −2 1 φx¯ (t) ≈ exp i t − t + N . λ 2 N λ2
F 0 7 '* #
% , " $ N (µ, σ2 ) µ = 1/λ = x σ 2 = 1/(N λ2 ) = " (x)/N = > 5 )> ) * F 7 $ % * " $ δ(1/λ − x¯)= @ $ N → ∞ ) ) ? 5) $ C
(03 ! # E ) + &$
@ $ 8? 666:
7
E* (
& '
Γ/2 = √2 f (x) =
1 Γ/2 π (x − a)2 + (Γ/2)2
) x = a # 5 "= $
$ ># ) @ ) = > F> E$* a @ $ C A = > $ $ C E )" $ P )L = > Γ + P ) " * # / 7 * $ F " $ )$ 7 E ) + &$
@ $ < @ $ * *) & a = 0, Γ = 2 % exp(−|t|)= L t = 0 L ) = > ,' ) " F % 0 F> N F> = x¯ = N1 xi /N = $ P$ 86;:= 866: φx¯ (t) = (φx (t/N ))N = φx (t) .
? @ $ * ) ?$ $" $ = > $= $$ ) + $ E$*
(0&4 '7 : @ $ f (x|x0 , s) =
x−x0 x − x0 1 exp ± − e± s s s
5 & " 0$ G:
a
4
7
$A ) % ' > " $ > ** '* " $= E$ & = 5 @ $ $ # $ " E$* x0 = E$ F' $= xmod = x0 = * s > 0 F> µ @ ) σ2 # $ 0
µ = x0 ∓ Cs , B C = 0.5772 . . . , σ 2 = s2
π2 6
) F $" @ ) '* / , f (x|0, 1) = exp −x − e−x
? 66 $ F 4 / $ $ Γ % - % φ(t) = Γ (1 ± ist)eix0 t ,
$ ? $ > " @
$ $ κ1 = x0 ∓ Cs , κi≥2 = (∓1)i (i − 1)!si ζ(i) , ∞ P ζ(z) = Σn=1 1/nz 8@ $ ) M6(N: ')
) γ1 ≈ 1.14 γ2 = 12/5 + $ C " + $ = , " $= '* " $ " > @ $ 8" '* 7*: $ = > )> $ AC & ' > " $ *" )> $" @ )
7
E*(
!(
*& A*&
/ ; & < '
E $
*
! F " > > '* = " = 8 & $ L : ! $ $ ! F> " F $ $ F * &
" > +$ L
+ $ " F " / )* F> $ " 0* + $ ! * $ )) = > B* = > & > *# ) 0 / B* ) > = ' >$ 0 = ,# $ 4Y) * $ ) %
$ M6N ) - $ "
*&& < , > " $ @ $ " G " 4* '* % 7 @ $ A > " F> 0 * 0 = > > @
$ " 5 $ F> ? F $ "A$ ) ,0 > > $ " '* "
$ F $ F 0 -
74
'
> = A$ , A > >$
$ 0 * 0 = 5 AC= > ) + * 5 " = # C 0 & " > $ " F 7 #= 5 $ @ # ) 0 $ ) $$ % $# = 0 A $$ 0 ) @ > $
*&( ;" / < / %# 0 A$ ) = F> % $ ) +* 0 @ $ " $ & (◦= E " $ 0 / '* 7 * A > $ /* $ ) & > B " = ) + 5 = F* * = % = 50 ? * $ ) !# = > ? * $ = > > + $ " $ $ " > % ) $ " + $ $ - ) 50 > B* ; $$ *&* 6 < / #$ E " > > >$ F> % $ "= > > $ $ @
$ " 5 $ ? $ & FC FA0 $= #) " > 1
$ " )> # > $ > 1 $ $$ / , > $$ ' *) % $ " ) > = > > > A = H F #) ?C F $ #-$ > $= *$ [ " ?$ '* [ 0 0 >$ " $ C > / = ) > = > $ 5 " $ = ) = F &$ " Q* 10 $ 20 $ #$ $ $ # ? = F> !
)$ = " > >$ $ +* " 96 ! $&& A ! # x = 10.3+0.7 −0.3 # * C: 7 *! !
!
, &
L!
77
t = (34.5 ± 0.7) 10−3 t = 34.5 10−3 ± 2 % me = (0.510 999 06 ± 0.000 000 15) F@/c2 me = 0.510 999 06 (15) F@/c2 me = 9.109 389 7 10−31 $ ± 0.3 ppm
? 0 ) $ ppm 0 = 1 &$ = 5 $ ? $ 0 F> % 0 ? $ > x = 3.2 ± 0.01 x = 3.02 ± 0.1 $ 0$ " $ ? $ F . )> $ - ) H % = ? 7 = > % G ) O #) #) A $ $ " > ?** ' % " x ) > δx δx F "= " % δx/x )$ = % *O ) $ U U 0)
*&, +: F> A " F $ 8> $$ AC : $ 5 AC = > )+ $ $ C= P= $$ AC
> & # " $$ AC $$ AC A > I+ $J= )#$ ?> x @ $ > & xw ) 5 AC L F* ) $ 7* @ $ = > & 0 '* P = @ $ *)-) *= > F> ! #)> > & > $ F> " $ / > $ + $ $ 0 F> F > & 0 = > & $ F> > $> x
F> " $ 8 > " F>
= 66: F $ " # $ 8I J: 6 $#) F # $$ " F> $ = $ ? ( * $
FC > F
$ E# $ ) + * $ " Z
78
'
>0 > % > Z #) = > ># ( * & > " #* , F) > + P
= % 5) F> > & " $ 8 6: )
? $ R = 1 ± 1 $ $ $ > = R = 0 F $ $ = R = 4 " #$ / B* = # > > = > ># = * ' %# % %
$= F> " # $ = 0 > = > % # $$ " F> = " , - F > $ @ $ B " A$ $ #= > F' = + 4A= B - ) "= ,= $$ 0 $ %
$ F$ AC 8% *O ) $: +
*(& $ / < P" F $ * = $ 5)#C$ $ +* 0 F $ " # 8 @ $:= ? * " A$ ,>$ # 8+ " $: + $ " E 7 8'* " $: F > $ > $ H> " 7* " $) @ $ $>#= > $> F> 0 ( * " # √ P$ > ( # F> Z = (150 ± 150) ≈ 150 ± 12 ( * $ $ 85" $: F $ > t √= 237 $ ! $ % δt = 1/ 12 ≈ 0.3 = t = (237.5 ± 0.3) ( * ? * " A$ ,$> > N = 45 " N0 = 60 7 =
G ? * " A$ ε = N/N0 = 0.75 % + " $ δε = δN/N0 =
ε(1 − ε)/N0 = 0.75 · 0.25/60 = 0.06 .
< 0 F* ) = √ " % N & $ F $ % N >
&& '
7;
*(( 6 +. & > F$ #= ) + $ * FC = 0 > F$ $ #) #) $ )> > H "= H #)> ' * ) $ > = = > % #) $ = (Z $ ((Z= "
# ! $ $ >= 0) *(* ' " ' + $ # F ) H " % #) $ = F $ ) > % > $ )
@ $ F #) $= $ B* > )#$= > > $ ,
% " $ = F> " # $$ & ** > $ $ $ > = > $ )> F$ $
> = > ** ) 0 ) *# $ ! ) ) $ # %$ P)* > $> %0 )> xi ) >
F> xm = x ¯=
N 1 xi , N i=1
> $ ) $ δx F> δ¯x $#C 1 (δx) = (xi − x ¯)2 , N − 1 i=1 N
2
8:
(δ¯ x)2 = (δx)2 /N , 1 (xi − x ¯)2 . N (N − 1) i=1 N
=
86:
+) $ + + $
G ?> $ ) $ (δx)2 , F $ N ? N − 1 *= * F> x¯ F $ $ F # F> $ > > & / $# " N $ & δx = 0 0
N = 1= ># " N − 1 $ ? $ " 86: $ 86: 5 AC (δx)2 8: >
8<
'
* @ ) $ ? + $ > B* 6= ? 66 ( * F $ + $
' !
'
M
,!
xi (xi − x ¯)2 2.22 0.0009 2.25 0.0000 2.30 0.0025 2.21 0.0016 0.0004
2.27
2 xi = 11.25 (x − i
x¯) =2 0.0054 2 x ¯ = 2.25 (δx) = (xi − x ¯) /4 = 0.0013
$ x = 2.25 ± 0.02 √ > " > = %
F> % √ N ) $ ! P)* δ¯x ∼ 1/ N = % > $ = > F $ N $$ ? $ > > = B
"A$ " δ¯x # @ $ 0 O0$ ?> N ) $ C $># >
*(, < " / F $ % $ 0 F$ AC= ! $ $ + @ $ F = )+ + $ ?OA $ F$ #
E * / %# * @ ) $ ! $= % $ -' A & $ $> C % % ) " ((δx)2 ) (δx)2 ) @ $= = > % $ C N " = ) > x¯ >
$> x = µ > N
− 1 N - x˜i ≡ xi − µ=
˜ xi = 0 m2 ≡ (δx)2 = x ˜2i /N $ 8& * @ ) ) @ $ +) $ H) m2 $ : , -
@ ) ) F 86: µn = ˜xni $ m2 = µ2 "
(m2 )
%
=
2 & 1 2 − µ22 x˜i ) N
⎛%
1 = 2⎝ x ˜4i N i
"$ & A &
% +
&⎞
8
x ˜2i x˜2j ⎠ − µ22
i=j
1 [N µ4 + N (N − 1)µ22 − N 2 µ22 ] 2 N 1 = (µ4 − µ22 ) , N > !
x˜i > @ ) $
+ $ % δm2 ) > µ x¯= F µn * ) F 1 n mn = x ˜i N
=
) & ) $ % G + δs2 % δs + $ % *O ) $ 8 # ? 9: +) $ 1 δs2 δs = . s 2 s2
+ & @ $ +) $ )> F ) √%0 , " $ $ )+ µ4 = 3µ22 86:= > δs/s = 1/ 2N $ > $ = , " $ >$ A$ ! #) $ " ># )
0
, '
T# * % L $ = # $$ % ) $ ) #) = ! = > ? #-$ ' ) & % & $ 5 AC & N√ $ = % F> σ 1/ N % $ > @ # $ F 8 $ & := # $$ " + $ N N → ∞ " > ? > " % $* U * $ = > C / + $ *# B* ? $ 6 " < 0 % > = > $ ) 5 $ @ $ $ % = > F$ # = 5 # $ 7*
# $$ $ ) > $ > ,* , ! @ " F$ # #-$
8
'
$ B " $ 5 #= ) + ? )* ) ? * " A$ = * )* ! $ ) ! $ = ) % $ F OC ! + $ O $ $ $= $ F " / = % ) )#) & B )* '* " = % > > A$ ) " B $ ) 0 & > % ? S $# $$ F = ?# $$ F $ % ?> ) $ > =
! $ )> 7 L >
A = > $ AC > $ > = % = " 5 AC $ % = ) " = @ ) ? #) $ % $$ $= $ L )*0 ! % )#) = 0 > = L " # & > # $$ A O0 > 7) A !
$ > = *- = B * A P ) & > ? A P = > O= > + = $ > * " = 4#-$ $ % ? 7=
?> " % " #$ = > $ = % " 0 0 ) !
#) $ % 6 Q $ F $ ! $ F* > $ % 0 ) D #) $= 0 > $ 0 $ / " '* $ AC U * ) U ! & > " $ 5 AC $ = * - > " I5) $ C J 8 ? $ 6: + G ? % *
@ ) ) ) 5 $ @ $ P &
0 % % " $ ?$ > $ = % $ ) *)-) = & * = > 5 " F $ 0
>$ % * > / H % + #$ ) F $ $> >
E A *:N
8
- '! ./ #
*,& + +: &$ F $ > 0 > " '* *
$0 > >$= $
) $ ) = A$ $ C 5 $ ) > & = ) F> " # $$ ! $ @ ) $ U @ # $ F > > $ U A > = > F $ 5 AC ' = F> $ $ % ? +* > )> F $ F> x1 = x2 % δ1 = δ2 & > ? 6 $ = $ 0 @ ) δ2 $> x = w1 x1 + w2 x2 , δ 2 = w12 δ12 + w22 δ22 .
, ># > 5> = % $> A$ > = > F " δ2 , $ $ w1 + w2 = 1 $ wi =
>
1/δi2 1/δ12 + 1/δ22
1 1 1 = 2+ 2 . δ2 δ1 δ2
?$ $ 0 N F $ x=
N N xi 1 / , δ 2 i=1 δi2 i=1 i
1 1 = . 2 δ δ2 i=1 i N
8: 89:
4 N F $ $ % = > % F √ > % N ( * & " 0$ = > K $ %0 )> P $ " 1 3 2 )> 12
$ P (2+12)/(1 h+3 h) = 3.5 h−1 % " ±0.9 F $ 8: >0 ) $ & 3.2 h−1 $ =
5 $ $ ># P % ) * @ %# ? E$ E = > B* * > * ? K $
8
'
E A *:N *,( < 6. +@A & > = > F 5 AC > = % F> $ > " =
F = % " + A$ @ F> 5 ** ' > & ) % y(x)= F> xm ± δx F δx * ) & 5 AC y= ) ym = % δy & > & f (x) = A > @ " y $>0 > $> %0 # $> % A$ 7
> $ " y xm y = y(xm ) + y (xm )∆x +
1 y (xm )(∆x)2 ... . 2!
& " #$ G A 7 = ) ym $ > $> " y(x) (δy)2 $ > $>
G ?> $ , - > $> " ∆x = x − xm $ > $> " (∆x)2 $ (δx)2 8/ " > , * 5 AC = δ ) >
= > $> *" = ># ∆x " : &
! *
'* (0*(" & *
E A *:N
83
ym = y(x) ≈ y(xm ) + y (xm )∆x = y(xm )
(δy)2 = (y − ym )2 ≈ (y(xm ) + y (xm )∆x − ym )2 = y 2 (xm ) (∆x)2 = y 2 (xm )(δx)2 , δy = |y (xm )|δx .
$ # > ? A $ +* 0 % *O ) $ $ 7 ) $
2 A *:N A *
y y y y
A :
δy δx = axn =| n | |x| |y| δx = a ln(bx) δy =| a | |x| δy = aebx =| b | δx |y| δy = tan x = |cos xδxsin x| |y|
*,* < < +@A 5> $ $ > P$ E# $ $ ) 0 $0 + $ ! " v = s/t 0 > % " s t 0 $ & ) # $ % y(x1 , x2 ) " )> F $ AC = & x1m , x2m % δx1 , δx2 7
> $ y = y(x1m , x2m ) +
∂y ∂y (x1m , x2m )∆x1 + (x1m , x2m )∆x2 ... ∂x1 ∂x2
$ > $ K $ ym = y(x1 , x2 ) = y(x1m , x2m )
84
' (δy)2 = (∆y)2 ∂y 2 ∂y ∂y ∂y 2 ) (∆x1 )2 + ( ) (∆x2 )2 + 2( )( ) ∆x1 ∆x2 =( ∂x1 ∂x2 ∂x1 ∂x2 ∂y 2 ∂y 2 ∂y ∂y =( ) (δx1 )2 + ( ) (δx2 )2 + 2( )( )R12 δx1 δx2 , 8: ∂x1 ∂x2 ∂x1 ∂x2
B
Y) R12 =
∆x1 ∆x2 . δx1 δx2
/ %# 5 AC x1 +) $ 8: R12 = 0 ) (δy)2 = (
x2
"
∂y 2 ∂y 2 ) (δx1 )2 + ( ) (δx2 )2 . ∂x1 ∂x2
$ G ? " # $$ F $ > 0 - F > $ / " %#
% 0
F$ AC " 0* / % U $ +* U )> #C$ > " %
z = xn y m , 2 2 2 δz δx δy = n + m . z x y
& A $ % y(x1 , .., xN ) " N F$ AC " $ $ N ∂y ∂y (δy) = Rij δxi δxj ∂xi ∂xj i,j=1 2
=
N N ∂y 2 ∂y ∂y ) (δxi )2 + Rij δxi δxj ∂xi ∂xi ∂xj i=1 i=j=1
B
Y)
∆xi ∆xj , δxi δxj Rij = Rji , Rij =
Rii = 1 .
E A *:N
87
9 / 7 > >= > > B" ) ' C ⎛
⎞
∆x1 ∆x1 , ∆x1 ∆x2 , ... ∆x1 ∆xn ⎜ ∆x2 ∆x1 , ∆x2 ∆x2 , ... ∆x2 ∆xn ⎟ ⎟ , C=⎜ ⎝ ⎠ : : :
∆xn ∆x1 , ∆xn ∆x2 , ... ∆xn ∆xn Cij = Rij δxi δxj
" > = $ % ' $ > B" ) ' / % " )> @ $ % > 8699: ⎛ 1 1 G(∆x1 , ∆x2 ) = exp ⎝− 2 2 2πδ1 δ2 1 − ρ
C=
(∆x1 )2 δ12
δ12 , ρδ1 δ2 ρδ1 δ2 , δ22
2 − 2ρ ∆xδ11 ∆x + δ2
1 − ρ2
(∆x2 )2 δ22
⎞ ⎠
.
% δy # $$ @ y ,#
$ ? (δy)2 =
N ∂y ∂y Cij ∂xi ∂xj i,j=1
$$ = > @ A (δy)2 = ∇y T ·C·∇y .
*,, + < +@A & > 5 )> F* $ = >
P$ $ $ ? % 5 AC
B
> A$= > ) + C * 8 % :
5 5 > / $ % > K % yk (x1 , .., xN ) " N @ " $$ F> xim % ' C ) 5 % ' E & yk & - >
∆yk ∆yl =
Ekl =
N ∂yk ∂yl
∆xi ∆xj , ∂xi ∂xj i,j=1 N ∂yk ∂yl Cij . ∂xi ∂xj i,j=1
8:
88
'
F ? 0 ) $ Dki =
∂yk ∂xi
> * $ Ekl =
N
Dki Dlj Cij ,
i,j=1
E = D C DT .
*,- " / $ +* " > > > $ %
4#-$ > % F> $ ( * % % " F> 5> $ * 5$ s = (100.0 ± 0.1) = t = (10.00 ± 0.02) = $ δv
δv v
2 2 δt δs = + , t s - 2 2 0.1 δv 0.02 = + = 2.2 10−3 . v 10 100
2
( * % % " F> %# $ 7 5$ a= b ? δ1 δ2 = A$ $ * $ FC
0 5 % δF %# F = ab & - (δa )2 = (δ1 )2 + (aδ2 )2 , (δb )2 = (δ1 )2 + (bδ2 )2 , Cab = ab(δ2 )2 , (δF )2 = b2 (δa )2 + a2 (δb )2 + 2abCab ,
δF F
2
2
= (δ1 )
1 1 + 2 2 a b
+ 2(δ2 )2 .
+ $ ? > $ C %# " #$
$$ ( * 5 )> F* 5$ )> F* (x1 , y1 ± δy1 )= (x2 , y2 ± δy2 ) 5 y = mx + b= > K F > 5 % ' 0 ?
E A *:N
8;
b = (x2 y1 − x1 y2 )/(x2 − x1 )
$ $
m = (y2 − y1 )/(x2 − x1 ) .
* +) $ 8:
> 0 %
(δy2 )2 + (δy1 )2 , (x2 − x1 )2 x2 (δy1 )2 + x21 (δy2 )2 (δb)2 = 2 , (x2 − x1 )2 x2 (δy1 )2 + x1 (δy2 )2 . E12 = ∆m∆b = − (x2 − x1 )2
(δm)2 =
% ' E 0 m 1 E= (x2 − x1 )2
b
(δy1 )2 + (δy2 )2 , −x2 (δy1 )2 − x1 (δy2 )2 2 2 −x2 (δy1 ) − x1 (δy2 ) , x22 (δy1 )2 + x21 (δy2 )2
.
B
' R12 R12 =
E12 , δm δb
=−
x2 (δy1 )2 + x1 (δy2 )2 1/2
{[(δy2 )2 + (δy1 )2 ] [x22 (δy1 )2 + x21 (δy2 )2 ]}
.
%0 δy1 = δy2 = δy " $ ) 2 (δy)2 , (x1 − x2 )2 (x21 + x22 ) (δb)2 = (δy)2 , (x1 − x2 )2 (x1 + x2 ) E12 = − (δy)2 , (x1 − x2 )2 x1 + x2 . R12 = − 2 2(x1 + x22 )
(δm)2 =
( * + $$ & ?) B
) @ > $ > ) $ ! * $ B \> * \ xs @ $= > xi & / " K = 1/(δyi)2 = $> > xs =
1 xi / . (δyi )2 (δyi )2
;<
'
( * %
$> F> + $ " $ ) "= $ 5> ) > = )+ " ? )* ) ) 0 $ ? F < > = > > *# > = 5> " > = @ $ > )$ 8 96: $ 5> ( " ) $ 5> + N $ 5> w1 . . . wN $> $ ) s=
N
wi .
i=1
& % δs = " (s) $#C % *O ) $ $ 8 ? 9: % ) # $ $ 5> wi = w s = wN , " (s) = w2 N , = > $>A = $ ) " $ $ 0$ # $$ " @ > " 8"$ 6:= # s " N " " ki > $> 8] @ ): λ = 1 0 s=w
N
ki , P (ki ) =
i=1
> $ 5> s=
si =
1 −1 e , ki !
wi ki
0 $ $ % $#C " (s) =
wi2 " (ki ) =
wi2 .
& " % % δs/s = 1/ 0 N L " $ ) ˜ = N →N
wi
√ N
$ =
2 / wi2 ≤ N
) > * %= N˜ = N = $ 5> $ C @ 5> > $ C %
( *
@ $ " s > # " " $ )> * N → ∞ > , " $ = H 5> 0 G " & 0
E A *:N
;
') γ1 γ2 8 669= 66:= '*) = % F $ @
$ $$ > A F - = $#C 6= 4 " 8 66: γ1 =
i
wi3 /( wi2 )3/2 , γ2 = wi4 /( wi2 )2 . i
i
i
*,0 . = > + @ F> xi > " $= " # $ 8+ : = 0 $ AC > & ? $ = F $ 0
" F> % > 8 := += @ # $= %$ A$ > ?> $ F> = " $
! & > =
F> " F $ > & F $ $ = > F $ $$ IJ @ # $ A = > ) + F$
# $ $ '* # $$ " P *) 8 : + + > #-$ 0 = F $ F> xi / " % G δi2 $> > = > > $ # 34 xi /δi2 > , > '*) $ = %
" F> # $= ' % $ #-$ "
)= > 4 +* # > ( * + F $ " F> + F $ > 5 AC x0 # F> xi % δi ∼ xi )= ! F ) * * ) F> + $> F x 0 " F $ 1 δi2 1 1 = / xi x2i ≈ 1/x / 1/x2
x=
xi
δi2
/
> $> ) & " = > 7 > $ > $> )$
x − x0 =
1/x − x0 ,
1/x2
;
'
E - C* A & (
* # - A
* σ * ! C* & * ,!
& * C* ( & * σ <48 <; <;; <<;< <3< <47 8 3 8 σ <;3 <843 <7; <3; <;< 43 3< 7; σ <;;7 <;8; <;7 <;; <;3 ;4 3 7; <8 σ <;;; <;;7 <;; 37 < 7 4 ! " ! " ! " 1 ∆x ∆x2 1 δ2 1 1− + + .. ≈ (1 + ), = x x0 x0 x20 x0 x20 ! " ! " ! " δ2 1 ∆x ∆x2 1 1 = 1 − 2 + 3 + .. ≈ 2 (1 + 3 2 ) , 2 2 2 x x0 x0 x0 x0 x0 1 + δ 2 /x20
x − x0 ≈ x0 − x0 ≈ x0 (1 − 2δ 2 /x20 ) − x0 , 1 + 3δ 2 /x20 δ2
x − x0 ≈ −2 2 . x0 x0
+ F " 6(Z + Z / ' 0= ? " + )
$ F $ * B
$ 0!#
! ? = & 0 F> % 5C" $ + # $$ " > $> = $ U " $ $ F $ U > & 68.3 % %# % $ ) F + [x − δx, x + δx] B - ) " 8 @
": B - ) " " 68.3 %= H $ 1σ−B - ) " / > %# > " > & @ A $ AC = )+ 90 % 95 % & @ ) $= % & " $ $ = * 5 ) &
$ 0 5C" $ $ 5 ) > $ 7 > & @ $ χ2 @ $ @ ) $ 0 + $ B - ) "= >
) = %# $ 0 $ > $$ ) B - ) " $ G" " = > > > & ) >
3 C*
;
C* : # "!
(
@ ? $ " @ " $ * 5 ) # $ " ># ) @ $ & #)= ) "A$ 0 & )+ '* % * F U > # U > = "A$ A$ )"
#$ ;; Z B - )$ ) ) $ $ % ! $ ? )* ) P$ $ C 5 $ % + ? $ " 5 ) B - ) $#$ " $$ $ > / ) + ? )* ) & " Z " #$= 0 A$= 5 ) ;Z B - ) )$ @ > 0 = @ $ & = @ % $ ) $ = @ ! FC ) = # $$ " B
= B - ) %# )> @ = " % * % * $ > $ & 0 $C" % 7 9 ) $ + $ F 6(Z + $ 1σ / " ? 6 )$ B - )* & 0 )> @
%
FA$ = P ) ) = EA $ " = > $ $ ) C 5 0 > L * > ?& & @ F < F $ $ = # P > E) > " <* 0 & ) $ +*= @ F = 5 ) +* / $ $ = > A A = A )$ = > F ( )* %# B d > B ?$ '* A = + $= > π =
# @ $ F $ B T B # $ d $#C$ B 0 + B = B $ = B O# T O# @ )* F ? $ * %$ 0 $ ( +* B$ $ 7 5 " EA $ > = > T = " C= $#C$ " %0 H > = BA * $ @ # ) 5) FC 0 @ # $ @ ) T " $ +* F* )= O $ F$ AC >
;4
'* (0*(" & *
( ,* 7 > $ $ = > ! ) $> F') # 5 E 7 $ > > $ ) ?OA $ ! > +$ ) $ F) " # 0
$ > ) B
> 8 ) > > *# * : ( -* / ) % > $ $ $ 7 )$= > K O# 7 O' " PO' * F $ )$ * # % " 8 * # $ * $ $ % = % # $= B 0 $ % = P$ K O# : > 4 EA $ / $ " ' > $ & $ C " F $ 0 = ?>$ F < ?C > @ * ) ( .* / +# - F 0= " $$ 7* * 7 P >$ $ 0 O > + C F 0 - = > > * $ = ! > $ = C )$ $ F 0 5 ) $ 5 " $$ + $ ) ? ) " 7 A + 7 = AC P ?)# $ $ > / +* ) / $ $ ) A / +* / $ " U !# $ ' F U ) +* 9 A F ) = @ 8 +* K 5> $ F 0: ) $ C ! # $$ " % $ 0 F < B 7 * ) > % "
$ $ > $ > = " 0$ P H %# $ > A + P $ 5 ) P *)# U 5 C + $ * F $ A$ $ $ H / +* A 0 +>$ $ F 0 $ ) F >
;7
/ H0 $ > #-$ F < $A '* %
$ 0 = *' ? $> > = > $= G = * '* ? ) % @ $ $ G '* ) " > $ A > = > > = / " & ) $ AC / $ ? > " @ $ = 5 $ ) 5 *' @ $# $ @ @ " $ %# (
@ $ 5" $= > " F = > %$ # $ = $ @ $ )$ A F >
B* 6 ? 69= 6 $ 7 )$ 5" $ $ E$ + = ? )> $" ) " $ + ? " 0 $ ,# $ 5C @ $ / %$ > > ) @ ) " ) $>0 @ $ " P = A > ) #$ = * $ = 0 * ? > $ $ = )> $ $"
,(& / / ! " P $" )) + )> / $ ) P 8 : = 0 5 $ $
218 ≈ 8 · 106 " & A = )> P = * ) G ) )$ > = + ) $ ?$ $ " = ) 218 ? $ > ) $) + ) FA$ = ' $ G ) ) > = $ G ) > >$= " # $$ $ > A
;8
'* (0*(" & *
/ %$ * > " ) = > > )) $ @) " ?$ ) )$ $ ) )* F 0 K* "
> " $ ) $ - & = )$ @ xi+1 = n (λxi ; n), ) xi ) )> λ n 0 + $ $ λ n +* > & x1 = 0.7123= λ = 4158= n = 1 x2 = (2961.7434; 1) = 0.7434. I#$ J $ ? $ - F K* " $ ) $ ) = > '* )$ = B
)$ ) $# $$ $ 5 P$ $ = >$ + $ T# ) 0 * 0 + 5 $ > = $ = 5 $ = $ ) " ) ) @ 0$ $ / ? 9 & " )> $)$ ) < P $$ $ $ KL B
4# $ ) 4$ $
5" $ " #$ G " ?$ 0 A$ ?> $ A > ? > $ " $ - ) 8B* : " = ) 0 * 0 = G ) " ) > = )* ) + $ $ C ? $ 5 $ ) )#$ * & $ $ $ / )* A 0 > ) $ P ? * * ) L P R + <* > A @ $) > = ) $** >0
E 4 > $ = * > $ > A 8" ≈ 103 <*:= $ # >0 > O 0
@ # " > 5 0 O0$ %0 ? > $ @ = > ) G )
* ) = ) + " @ $ ) "
$ % )
;;
C* *
* 2 ?*! @ /*J * ? @ ,(( '/ 9 F P A > * # $ 5" $ 1 > (1 1 u(r) = 0
<<
'* (0*(" & *
@ *
* !@# /
)$ 8/ %$ > > +) $ u 0 5"
$ r 0 (0, 1) $" @ " > : +$ " @ $ f (x) A @
$> > = > r(x) % 8 B * 6:
x
−∞
f (x)dx = u(r)dr, r(x) f (x )dx = u(r )dr = r(x), 0
F (x) = r, x(r) = F −1 (r) .
@ x
! F −1 ) $ @ $ F (x) $" ) r EA $ A$= > & f $ > @ $ " @ $ * ? 96 $ F ># ) r )> K @ $ )$A $ & ) x ? & A )+ $ @ $ @ 5" $ )$ > • E @ $
<
f (x) = 2x 0 ≤ x ≤ 1, √ x(r) = r •
)" $ f (x) = (n + 1)xn x(r) = r
•
0 ≤ x ≤ 1, n > −1,
1/(n+1)
'* " $ f (x) = γe−γx, 1 x(r) = − ln(1 − r) γ
•
, " $ > )> # $$ " ) x, y )> $" ) r1 , r2 $> = 86:= 86: 2 x + y2 1 exp − , 2π 2 x(r1 , r2 ) = −2 ln(1 − r1 ) cos(2πr2 ), y(r1 , r2 ) = −2 ln(1 − r1 ) sin(2πr2 ) f (x, y) =
•
+ &$
@ $ (Γ/2)2 1 , πΓ/2 x2 + (Γ/2)2 1 Γ x(r) = tan π(r − ) 2 2
f (x) =
•
E$ & @ $ f (x) = exp(−x − e−x ), x(r) = − ln(− ln r)
/ % 1 − r r ) > = 0 1 − r $" ?$ % @ $ > 7 $ " $
" $ D $ $ " )> @ $ $> > B
$C" ) > " x y $ P B & D $ $ " @ $ > = > ? 96
<
'* (0*(" & *
/* *(
,
2
&
*
/* *(
2 * ? $ " > @ $ F " > +* & )$ ) n=
@ $ P (n, 4.6) > $> 9 * = ? 9 $ + " 8/ $ :
i=k # @ $ S(k) = Σi=0 P (i, 4.6)= ? $ $)$ $" ) r H $ & n )= S(k) * = S > r 0 n $ $>0 @ $ # @ > $> = > * @ $ % 4$ " $ <* > ) + j P r − S(j − 1) > " > = + ) * 4#-$ = + 5" $ ) = ,# $
<
& * / 6
& & ( ! D / *! ! C * + )> 4$ hij H = gi =
hij ,
j
= $ ) i 0 $$ i $ & j C 0 H & " i "
$ 0 j & > * = A$ > 0 H @ H > )
,(* ' ): / '/ / %# A$= @ $ )$ ) " ? +* 0 @ $ > )$ $ " = 5) $ > ) BA * $ $$ % G ) x $
@ $ x3 f (x) = c x 89: e −1 , $ c % ? 99 $)$ &
# % G ) " $$ F' G ) F = @ $ ) )$ = = )> $" ) r1 r2 ) ># = > r1 )>
<
'* (0*(" & *
& 'J* 9 : 'J* E
2 # 'J* 6 # *! ! A *#
* F'> " x r2 )> F'> " f (x) $ * P (r1 , r2 ) * ? $) P F )$ " " > = B " f (x) $ @ $ " r1
" $ 0 $>0 @ $ , @ = $" ) * A$ > = @ $ $ ) / +* @ # " $ ) @ > ( & ) $ % G ) )$ = ># 0 * >
,(, + B " &$> FH 8 $ : & $$ % m(x) $ • m ≥ f 0 x= x • x = M −1 (r)= M (x) = −∞ m(x )dx "
= ' 8 ? 9: $ x * m(x) " > )> + $ = @
# [m(x) − f (x)]/f (x) * %0 H $ > )>
<3
) )> m(x) )$ $ " > = > $ AC f (x) @ = FH = ) )$ % $= %# ) )$ $ $ )> ) A$ > ?C A & @ $ $ > = !
= > > @ $ & @ +* 8? 9: ( * FH & )$ f (x) = c(e−0.2x sin2 x) 0 0 < x < ∞ FH m(x) = c e−0.2x .
& % * @ $
x
1 −0.2x e dx 0 0.2 = 1 − e−0.2x .
r=
@ " $" ) r1 ) x 1 x=−
0.2
ln(1 − r1 ) .
F > ) r2 = )> $= > r2 m(x) 0 * 0 = $ AC = % f (x) 0 r2 < sin2 x → x= 0 r2 > sin2 x → " > x . @ )$ $#C$ @ $ " )#$ FH "= > " H $ > = ) )$ % $ / F > +* > " ) * $ A$= ? $ 4# %# *" $ % $$ $= FH = ># 7 ** ( * )$ $ @ $ F @ > $ $0 FH " ? +* > FH 0 @ $ 89: %0
& " x < x1 A > FH m1 (x) = 6 c ># %0 $ AC & x > x1 )> FH m2 (x) $ " &$ x3 7 #
<4
'* (0*(" & *
/(": & & 'J* 10000
1000
y 100
10
1
0
5
10
15
x
20
9 /(": & > $ e−x & ># 0 m2 '* = x x1−ε ) F > 0 & ε = 0.1 ) >
m2 (x) = 200 c x−0.1e−x
0.9
.
@ x−0.1 O * @ = A$ / $
x
M2 (x) =
<7
m2 (x )dx ,
x1
0.9 200c −x0.9 = . e 1 − e−x 0.9
% # x OA = m2 0
$" ) )$ > & " ) P $ ? 9 )$ @ $ FH $ $ ? 9 $ *
,(-
) 4#-$ & "
7 & % )> = f (x) = f1 (x) + f2 (x),
S1 =
∞
−∞ ∞
S2 =
−∞
f1 (x)dx, f2 (x)dx,
S1 + S2 = 1 .
& ># & S1 8S2 : )= f1 8f2 : " %
F1 (x) = F2 (x) =
x
−∞ x −∞
f1 (x )dx , f2 (x )dx
" > A = > = $" ) r= $#C f (x) " @ x= x = F1−1 (r)
)>
0
r < S1 ,
0 r > S1 . @ $ $ )> " ( * )$ $ '* " $ !
$ )$ $ & x = F2−1 (r − S1 )
<8
'* (0*(" & * f (x) = ε
># > 0 r < ε
λe−λx 1 + (1 − ε) −λa 1−e a
0
0<x
−1 1 − e−λa x= ln 1 − r λ ε
0 r > ε x=a
r−ε . 1−ε
& ) &$ ># A$ $> = / " @ $ F (x) > * "= > ) 7 > +* @
> A
,(0 ) ' %0 " > "= $> $ ) $ 5> w * w $ 5> 1 + / * $ " = % $= @ $ 5> 0 $ = 9= ) +* / > $)$= wi2 "
wi = $ P" " % " 5> = 0
? ) $
w2 δ ( wi )
= i . wi wi
" 5> 0 ) $ C > $ " > @ $ f (x) xa < x < xb A > / " [xa , xb ] $" $ xi 5> wi = f (xi ) * # / +* " $ ? >0 $ $#C FH " $ $ sin2 x > 5> wi = f (xi )/m(xi ) / P$ > = > A$= " @ > $ $>
$ = %
$ A$ ) *) > $ )
<;
$ #-$ " = " $$ @ $ $ $ " $ = @ $ $
$0$$ # A / % 0 & $ "
$ $ > A = ) )$ 5> $ A %
,(1 + F F$ A @ $
% @ $ $ # > F$ - " ? > $ &
> ** 7 0 E $ *) " > 8 # + / 7 F 0 $ ?$ $) [ > " C $$ L > [ 5$>"
$ ) %0 D $# $ $ )* 5$> / F F 0 )> A$ # $= 5$> P D $# $ " 6 $ P D $# $ " 6 %0 +) $) N1 )> N2 5$> D $ $> * F 0 W12 )> W21 + )$ $ N1 W12 = N2 W21
$ F = W12 = W21 $ > = > # % ) , 5" $ N1 = N2 0 $ )+ 0
? $ $ = > +) $) +) @ $ e−∆E/kT ) 8∆E ? $ $ $= k +) B = T 7* : / 5$> = ) + * # N1temp N1 = $ F > $ D $# $ ) 6 ) 5$> F 0 > > = 5$>
D $# $ $ = > H +) $) , > > & > = " )> # = # = @ x $ ) = ) >
+) $) " $ f (x) @ x / # $ * f (x)W (x → x ) = f (x )W (x → x).
<
'* (0*(" & *
G ,*&
& C 9
/*J * 5( (
!
%0 & P (x → x ) 0 D $ $ " ) x ># >
x
W (x → x ) W (x → x ) + W (x → x) f (x) = . f (x) + f (x )
P (x → x ) =
& A Q $ # P = > )#$ F 0 i ># x & P (x → x ) x 0 0 8x → x : $># ? $" $ " x @
$= x $ > = 0 5> $ B " $ )= 0 * $ " F$ $ ) + " F > G @ $
% " 5 $ =
5$> F$ " $ $ > # $>0 5 AC * @ * F $ )+ $ 5 " > $ F 0 = - B ) $0 F $
$
& > G > F$ "
+ + $ > $ 0 $ > = >
I'* J=
6 & M ,! ,*& A( * * & <<<< &
( * F ? " 5 0 5 B = > - = $ & N ? B0$ " $$ P R ? > # $ $ #C$ 5 $ & 0 0
** ? * * ) e−αz = > z " B '* * +) @ $ 0
* $ ? > )#$ $># (x, y, z) )> B > $>0
) " > > $" ) % ? " > $ 2R > ?= > $ ? $># / B (x , y , z )
$ = > @ # w = e−az /(e−az + e−αz ) $ F
> ) r )> > = r w = > # $0 > $ 5 AC= G ?
? 9; % / $)$ * & " +>$ $ = $ C $$ ? ? 9; )$ ? * H) ' = 0 (( " ((( ? 6(((( +>$ $ ? > $ A √ $# " ? * 1/ N % $ >
'* (0*(" & *
$ : F$ F $ = * @ $ 0 $$ " + $ ) )$ = ) + F ) + * @ $ $ P= " FA$ > > # @ F$ ) " $ " F" $ " > > & > > @
B* -1 ! 2
5 " @ $ ) ) = / $ ) / $ ?)# )$ F $ )$ $ " @ $ &
" / $ / $ " @ $ $ @ = @ )0$ F $* #$ = > @ ?#) $ 5 $ 0 @ %
$ ?> 0
0 / $
,*& ): / $ = / $ @ ) >= ) $ > 7 $ 0 / "= / $ > *"
$" $ 0$ = %
xb
I=
y(x) dx xa
y>0
896:
) & $ > $ % )$ $
@ $ = P $" #)> 0 %# I > @ # $ N U = % y(x) $ U )
@ N0 = *) %# I0 P N I. = I0 . N0
! / $ > + " $= > > $> ε '* & ) ε = N/N0 #)
EH * Teilchen
a Photon
R r x
9 *& /**! K ! A ! N0 ε(1 − ε) , δI δN 1−ε = = . I N N
δN =
89:
& > = 5 $ & )
$ ε ) R $ $ ?> $ B " " P = > ! ( * ) $ $ $ %
/ 7 O$ ) % 8? 9(: )$ # * & " $ = K O# L = > O = > & ) %# $ AC β0 = 60o & A > = > $ $ " $ $ 7 # $ 7 O$ y P $ ? x " * ) z ? " % & 0 $ • ) %
R = 1, >0 O x, y $" 0 < x , y < 1, • r2 = x2 + y 2 = " > $ 0 r2 > 1, • ># ?)> φ 0 $= ? * )
%
$ x= y= 0 < φ < 2π= φ $" = • * H) & α ) % O# 8sin α = r sin φ:= • ># > ϑ 0 $= 0 < cos(ϑ) < 1, cos(ϑ) $"
= • + & β ) % O# = cos β = sin ϑ cos α,
'* (0*(" & *
/** ! A * * ":# *&
/**# !
& )
& 2 & A ! " > @ 0 β < β0 = $ x 0 " @ ? 9 )$ $ %0 $ C & " x * # $ = $ )* ) $ C= ? x ) P % $
• •
,*( ): > C/ @ %#= > 0 FH = ? 9= " > = A > 5 $ $> & 89: = " % * * ) & ) L ) " @ $ ( * + $ π %# B P π + N0 $" @ T %# 4 8? 96: $ N F
N =
#)> π. 0 π
π N0 . 4
EH *
3
/
!
K
C
N6 :*:* * 2 / ! C
4N , N0 1 − π/4 δ. π = , π N0 π/4 1 . ≈ 0.52 √ N0 π .=
P )O# ? = > % > % )> > @ $ A >
= > @ B + )> @ ) + $ )
> + B ' FH m(x) ) % y(x)= / $
xb
I=
y(x)dx xa
899:
4
'* (0*(" & *
) = 0 >
x
M (x) =
m(x )dx
xa
" > = A > x & xi $ = m(x) " 8FH = : H & xi )$ > $" ) yi / " 0 < y < m(xi ) & >
" y(xi ) " > N " $ / $ I = M (xb )
N . N0
,** ) > ) $ xi > / " xa < x < xb $ % > $ y=
N
y(xi )/N .
i=1
#)> 0 / $ 899: I. = (xb − xa )y .
F * / $ = ! = 0) $#C$= )#$ " @ ) 7 %
)> / $ F < F Y ) ? @ 0 $ > H / $ @ $ @ > )#$ ) > ! $ $ #)> $ G ?> $ + $ > y(x) / "= > & > > $> ?> $ 0 $ @
$ $ @ ) F> $ " $># 0) N (δ y¯)2 =
1 N
xb
xa
2
(y(x) − y) y(x)dx/
xb
y(x)dx . xa
5 $ = H $ $ % % > $> + F < / $
EH *
7
* A * $ !
A * ? @ ! = ? @ & '* ( 0*(' * $ 0 ) @ 0$ $ & #) > F> (δ y¯)2 ≈
1 2 (y(xi ) − y) , N (N − 1) i
89:
δ y¯ δ Iˆ = . y¯ Iˆ
> $ @ $ 5 $ A >
= > > $ / $ ) & > % y/(x) = $ > > $ " y(x) >= A > / $
xb
xb
y(x)dx = xa
xa
y/(x)dx +
xb
(y(x) − y/(x)) dx .
xa
& %# ? 9 ) =
> $ "
8
'* (0*(" & *
,*, C ': : / " %# "= / $ % y(x) = f (x)y1 (x) ) ? f (x)= ) $ &
* = )> % y1 (x) 0 f (x) 5" $ $$ . 0 L " @ > f H A$ y $># $ / $ # % > $>
xb
xb
y(x)dx =
f (x)y1 (x)dx
xa
xa
= y1 .
/ % $ > & xi = * / $ I I. =
i
f (x) "
=
y1 (xi ) . N
/ $ > > $ = H > $ y1 & > = H # % y f % $ $ $ ) 89:
,*- / $ > 7 / H 7 > $ $ / = @ $ " $#C$ > % " > F 8 $ 2 : > * 5 F < F = > 5" $
0) # $>
? # " +
@ > / $ 0 " / "= H> $ / $ A / %# F < F " & )> 80 > I $ \ $ : * = ?> L = $># / " * = / $ " $ $ P > ? & $ " # > & > ) + 7 #$ F " $ > = A > BA * " B
* * F
, &
&
;
= F= > * 7 #$ = )$ $ ? = ) = > 7 BA * &$ * > A , > @ ? )* ) $ ? + * > ># $ & = % # > G )# $$ 5 = O $ @ $ ) &$ * > % G ) $ $ % = " %
O# % G )$ % $ " = $ > 0 + #-$ 0
F> = > ? " ? = * $= 0 5> $ & $ = & = ># 0 / $ " H> " " $ > C > >$ @ F < / $ = = > ># = % $#) >
!
$ %3
& " H) ? > $ & $ > ) 5$ * " + $ = $ $ + $ $ 7 ! * x1 , . . . , xN " > P $ " N & # $$ " 8": "
x= $ @ $ * $ / P$ * * F 7 "# $ $ = A " 7 ) & =
7 $ 0 $ > +* ? 7 $ * )> BA $= = = ? 5A B ) * ) < *S 6 5 > " 6 0 9;( 0 / 7 ? " #$= I FJ $ " F# R $ 5 S %0 0 # 7 > E $ & $ C E 7 > $ S / +* > " * ** =
B > > > ! ? = B )#$ * $ = A > "
/ $ C ) & = B < * B ) - = LK = (5/13)8 = 4, 8 × 10−4. 0 * LS = 1 5 AC ) > $ E
3 /& 6
E $ = > $$ 4* + $ $0) > %0 $ )> ? " *
>#$ $ P= " )) 4* ) # $ E$ B >) R$ = ># $ $= * * ) = > 4 $ B * - & A 4* 5> = $ > = " = )#) / = # $$ " + $ $ = G -) & $ 0 = 0 > > 0 @ $ " U )> < * >) 4 $ > = $ ? $ @ $ ) -) & G -) %$ $ + $ H> P " $) F ?= > = ? $ FC 0 $G $$
4* F Q $ ? * +> $
4* C Q $ F # $ $ # $$ = > >
P$ ?# $$ " > " / A$= $ 0 $ > * $ $ $$ > , > & + $ " $= )> " 7
> $ $ " #$ = A > & & 0 50$ 7 %0
? )* ) * " # B = > ? "# B*# 0 F $ = P )#) $ A > 0 " ? * & 0 $ > = H " H " @ # $$ ># , %# $ > $ 0 G " > "
0 $ > @ $ R > '* ?> $ " 5 " $) ?# $ @ )> " 4* = H1 I ,> 5 " $) ' J= H2 I + $ 1/r2 ) ,> 1/r ) J= > )> ? > " #$ 7 ) A P$ 5 " $) $)> 5 0 $ = G-) @ = ) + ? = , $) / )> $ ) $0 = 1/r2 4* " > > > 0 $ $= * 4A > $ ,> 5) ) " AL = > > A$ ?$ ) # H " E ) 0 >$ )*
3
> 4 $ " $ @ $ # $$ P. @ > $ A$ & > *# = O " 8 H " : ? ?$ " # / )> +* 0 = >
4* > ? " $ > ?> $ " 4*= # ? ! $" $ 5 = = $ ?> $ " 5" $ > " FA$ = ?> $ + $ " @ $ $$ ) G -) F > $ 4* )* = > ?> $ $>A $ C & " B* ;= I$ - )J / % 4* R
> = H E = * @ $ + $ " / " # >$ % ) 0 0 $ ) # & > & $ > = > > $)> $ = ? * & U % 0 ) U ) & > %# " # " $ = > A H " " = > ? $ $$ %# $ 7 ) $ ! ) $$ , $ $= " 4* Hi $ " & 0 50$ Hi ! + $$ 4* H0 $ ?$ 0 50$ " H0 ! ,* $$ $0$ 4* H(λ)= λ ] ) " = $ I J & 0 λ ^ %
@ > > ' + $ 7 "
$ = # / % ) * @ #$ @ $ + $ ) 0
* 0 = > % 6 > % L ) B 6 = > 4* H(λ) $$ 0 * 0 > = + $ & % ? 9 0 E " # 80 % * # $$ 4* : & > ) P ) ( & $ B* " = > + 0 . >
3 /& 6
A$ & )> & " " & )= B 0 > *$ $ " # 4!
& " = $$ & 0 4 * )> & 0 ) & " $= #) $ 4 + 7 A$
-(& #" / B* > $)$= $ & 0
? " )> $ 0
'* )$ $ F $ $ + $ $ 81 ( : 0 P {A ∩ B} = P {A|B}P {B} = P {B|A}P {A} . 8: & P {A∩B}= $ A B ) - = $ & P {B}= $ B ) - = *) $ & P {A|B}= A ) = B
7 $ +) $ )> 7 $ & > +) $ " k 4 * Hi 4* ' > " * , > = # $$ $ C 4* + $ k > 0 H 4* & P {k|Hi} $ P {k|Hi }P {Hi } = P {Hi |k}P {k} , P {k|Hi }P {Hi } P {Hi |k} = . P {k}
86:
P {Hi} $ & 0 50$
4* i " + $= ? * & = $ / ? > +) $ 86: $ * $ @ $ = > $># +* " 4* $ R 4* + = !
&
* * ! #
! ( && C !
3 "6 !
! / *
3
K ( && A6 !
(
! && C*&! * * G$:* Hi
kj * , 5: & 5 AC * * ) & = k1 = k2 )> k3 ) & + $ ) + & k2 8$ : = $ @ # $ %# " & 0 50$ 4* ># 4* H3 > = H1 > + $ " P {k}= P " $ 0 k= & + $= 0 4* =
$ P {k} =
P {k ∩ Hi } =
i
P {k|Hi }P {Hi } .
i
& ) = P {Hi|k} = & 0 50$ $ 4* $ & P {k|Hi }P {Hi } . P {Hi |k} =
j P {k|Hj }P {Hj }
8:
/ & & 0 50$ 4* Hi + $ $ " Hi = *) &
= k ) = > Hi 0 = " ,
$ / D $ > P {k} = > > " & 0 )> 4* Hi Hj 0
*) F $ k
4
3 /& 6 P {k|Hi }P {Hi } P {Hi |k} = . P {Hj |k} P {k|Hj }P {Hj }
( * + 7 B ) S
F > $> B ) S > P {µ|π} = 0.02 )> P {µ|K} = 0.10 4#-$ " B " > 3 : 1 & 0.10 × 1 5 P {K|µ} = = , P {π|µ} 0.02 × 3 3 P {K|µ} 0.10 × 1 = = 0.625 . P {K|µ} + P {π|µ} 0.02 × 3 + 0.10 × 1
B * > * / &
0.625
-(( 9 & > + $ %=
θ B ) 4* $ > ? " & > & + 7 f (x, θ) = fx (x|θ)πθ (θ) = fθ (θ|x)πx (x) 89: +) $ 86: ? 6= > fx = fθ $ @ $ πx (x)= πθ (θ) P " $ " f (x, θ) & f (x, θ) " x, θ $ $ & fx(x|θ) 0 x= > θ $= *) & πθ (θ)= P " $ 0
θ & > > $ ) 0 + $ x fθ (θ|x) =
fx (x|θ)πθ (θ) , πx (x)
)> , $ fx (x|θ)πθ (θ) . −∞ fx (x|θ)πθ (θ)dθ
fθ (θ|x) = ∞
8:
/ & $ 0 C + F $= & x =
> & 0 θ & & fx (x|θ) 0 x= *) &
8 : πθ (θ) 0 θ " F $= " , $ $ 5 AC fx(x|θ) $ > = > θ + $ x $0) > = > E " θ $
3 * E **
7
? & & fθ (θ|x) 0 $ #)> θˆ % " = 0 > $> > $ ) ˆ ># #)> % + $ = θˆ = θ(x) ( * )* '*
F F$ # ?OA $ > t= ) B F ) = FOA $ $CA $ ? A $ σ & > * θ = ) 7 # ) E τ " B & 0 $ " + $= = π(θ) = e−θ/τ /τ = θ ≥ 0 & 0 t $$ > θ 5 " B % A > >$ = > %0 F> t >
+) $ 8: & f (θ) = f (θ|t) 0 $ θ= 2
2
e−(t−θ) /(2σ ) e−θ/τ , f (θ) = ∞ −(t−θ)2 /(2σ2 ) −θ/τ e dθ 0 e
? $ 6 $)$ / $ '* $$ 0 + $ " & & & fx (x|θ) 8: > # θ " π(θ) U %= > + $ # U
+ # $> $ > $ fx (x|θ) . −∞ fx (x|θ)dθ
fθ (θ|x) ≈ ∞
/ ,# $ * & fθ 0 E / * ? > $ fθ $ ,# $ %
, " $ & = fθ % e1/2 #= * > $= $ ! # #) $ " θ $ & ! + - !!
/ , > > @ $ " L A * *! !
? #
* : " # @ " : "6
/&
> "6 * * "6 ? @
8
3 /& 6
2
& E ! ( # ! *! 3
( * E " # V + A V − A P S
5 > $ E F 7 τ − → µ− ντ ν¯µ ) = V − A V + A F ' * & * & f− (E)= f+ (E) A @ # RL = f− (E)/f+ (E) = > ># > > 0
4* S ># $ +* " = $ @ 0
4* ) G -) & ) *) # > = @ # RL =
f− (E) f+ (E)
)$ 5 AC RL C E " # - E Li 0 4* Hi = & fi(x) ≡ f (x|Hi ) & " $ Wi (k) ≡ P {k|Hi} * = $ + $ x )> k= $ Li ≡ L(i|x) = fi (x)
)>
Li ≡ L(i|k) = Wi (k) .
3 * E **
;
> 4* ' i # $$ @ $
) θ ) * # $$ )> & fx (x|θ) )> W (k|θ) > + $ x )> k= $ * L(θ) ≡ L(θ|x) = fx (x|θ) , L(θ) ≡ L(θ|k) = W (k|θ) .
E 50$ 4* 0 $ $ + $ ) # $= ) & " $$ 4* %$ $ > $># > = H> 7 $
$ " 7 $ " 5 AC %0 & 5 AC % > E & )> & $ + $ E = > 4* $$ = / ) $ ) 4# $ E " = * " E E 0 $$ 4* $ C= > + $ 4* > $ = > 4* $0) > & + $ ' >
= 50$ 4* )> = > " 4* ) @ 0$ $ = E $ AC
D > '* N # $$ & xi = # $$ " @ $ f (x|θ) $ = " θ # $ 8"= ? 6: & f˜ $ N ) f˜(x1 , . . . , xN |θ) =
N
f (xi |θ) .
i=1
* $ 0 " ˜ (k1 , . . . , kN |θ) = W
N
W (ki |θ) .
i=1
% > " f˜ 0 x1 , . . . , xN $ '
˜ L
' ! # Li ! L(θ)
!
(
i ! θ & * & *!
! *&
<
3 /& 6 ˜ ˜ L(θ) ≡ L(θ|x 1, x2 , . . . , xN ) = f˜(x1, x2 , . . . , xN |θ) =
N
f (xi )
i=1
=
N
L(θ|xi ) .
i=1
+) $ $ 0 " ˜ ˜ L(θ) ≡ L(θ|k 1 , . . . , kN ) =
N
W (ki |θ)
i=1
=
N
L(θ|ki ) .
i=1
%0 " @ * = E$ ln(L) ) C ' ' ˜ ln L(θ) =
N
ln [f (xi |θ)]
i=1
* 0 " @ $ " E " ? 0 % " )> 4* %0 E > = % > = 0 )> 4* * & $$ + * = > C$ A E & E 0 " " @ @ / %= # $$ '* A, B $ 5 AC = & x1 = )> x2 - H> E LA (θ|x1 ) LB (θ|x2 ) & 8 , : 0 )> '* LA (θ) = fA (x1 |θ) , LB (θ) = fB (x2 |θ) , f (x1 , x2 |θ) = fA (x1 |θ)fB (x2 |θ) , L(θ) = f (x1 , x2 |θ) ,
3 E ** 6 (
:
E **
*!
G$:* & (
L = LA LB , ln L = ln LA + ln LB .
5 ) $ $ 0 ' & (& 6 7 ' ' * L= ln L =
Li ln Li .
$ & - !!" +.
& > )> )> 4* 5 " + $ > = " > > E " # , E " , $ = " ># C= > B-) $ 5 E " # A$ " % $
A 8 ? (9: 4 > )> 4* ) ?>= $ 0 " # $$ T
3 /& 6
( * E
" + > # & " & 0 4* @ $ H1 @ $ > $> 6 = H2 H3 * > $> ; )> 6( E Pλ(k) L1 = P2 (5) = 0.036 , L2 = P9 (5) = 0.061 , L3 = P20 (5) = 0.00005 .
& A " E G / >
) + 0 4* 6= = L2 /(L1 + L2 + L3) = 0.63 ) & )> F $ $ 8 # > = > L1 = P2 (5)P2 (8) = P4 (13) = 6.4 · 10−3 , L2 = P9 (5)P9 (8) = P18 (13) = 5.1 · 10−2 , L3 = P20 (5)P20 (8) = P40 (13) = 6.1 · 10−7 .
E " # L2 /(L1 + L2 + L3 ) = 0.89 80 H1 H3 * 0.11 10−5: > $ - & Li $ = * P= H 4* ) L & > $ @ 4* & ( * E 5C @ $ & " $ )> " 5C @ $ "
> $> @ ) 8? 9: 2 1 e−(x−1) /2 , f1 = √ 2π1 2 1 e−(x−2) /8 . f2 = √ 2π2
: $ x = 0 8H> > $ " F> @ $ 8? 9: : $ $ 9:
L1 e−1/2 = 2 −4/8 = 2 . L2 e x = 2= F'
L1 e−1/2 = 2 −0 = 1.2 . L2 e
@ $ 6 8?
: & 0 $ = @ $ f1 8? 9: )> @ $ f2 8? 9 : %0 E "
# - >
3 E ** 6 (
:
E ** 6
9>
O!
*!( # 3 *! L1 /L2 = 30 8? L1 /L2 = 1/430 8?
9: , 9 : . )$ = @ $ C ? > % : # ) 0 @ $ = > F> F' @ $ 6 $ / ? $ 66 )$ > > +*= ?> $ + $ " > = $ > $= $$ FC 0 ? " > ( * E " '* " $ 5$ N ) ti = " tmin < t < tmax $> > F $ > 84* : '* " $ f1 (t) ∼ e−t/τ = 84* 6: 5 " $ f2 (t) = const. * & > H1 = H2 S & 0 ) & f1 (t) =
e−t/τ 1 , τ e−tmin /τ − e−tmax /τ
" ? C: ;@ 2 "!
* C &
3 /& 6 f2 (t) =
1 . tmax − tmin
E > N
−N L1 = τ e−tmin /τ − e−tmax /τ exp − ti /τ
,
i=1
L2 = 1/(tmax − tmin )N .
F F> t¯ = ti /N > 0 E " # W1 L1 = = W2 L2
tmax − tmin −t /τ − e−tmax /τ ) min τ (e
N
¯
e−N t/τ .
! & W1,2 )$ = 0 > L1,2
& *) $$ & - !! ! # 4
/ " $$ $ +* > " 4* " $ = &
= $ @ $ * & > @ " 4* ) = = ) ># = E A$ $ C > %0 $ D $ $ $ > " = E $ L ) /
$ F' * > > , D $ $ $ F' E F 8FE F : $ P @ ) * $ 5#-$ " F T = " 5C $0 > # = > > ? )$ = FE F ) 0 0 = > ?> $ " E$ F' P$ >
! + $ ) " = > " ,# $ 0 # $$ $ = > ) + P$ = 0 F ' * ) EA $ 0 F 0 O0$ F $ # < % " $ * F' > = " $)=
+ $ $ C , # $ " $$ $ B* # > ) = > FE F * $> > *# >
33 '5 &&(E **(' * /& ! &&
3
E*(E ** * B
# # "( !
+$ 0 $ $ = )$= #) $ 0 E " / )0$ $ " A*
--& C/" & $ $ P)* " %0 " $$ " N " & xi = @ $ f (x|θ) θ * = > E = )> E$ L(θ) =
N
f (xi |θ) ,
8:
ln f (xi |θ) .
8:
i=1
ln L(θ) =
N i=1
4
3 /& 6
/ %# E # $> % 5C 5 " * ln L(θ) # $> L G 8 ? : / $ 0 $ C ! F' " L ) - = 8ln L L F' $ := > E$ E ) ? $ $ H $ & θˆ= 5 $ 0= FE #)> 8'= $ 6 : 0 θ. d ln L |ˆ = 0 8: dθ θ 0 + $ #)> ? $ E P *= A % E E$ E = " θ # $ = >$$ > #)> θˆ % * > xi = % $ ) 0 #)> $ > * - - 5 ) 0 " $
> = 0 & " L % e1/2 $$ 0 F' "
$ %0 )> " % e2 e4.5 %0 E$ E * L ) " 0.5 0 = " 2 0 )> " 4.5 0 "= > ? $) & $ " " = 5 ) - ' & ? 66 ># = A > @
) $ " $ = & " $ 0 0 $ C N # $> * * ) E > 8"$ ? $ 6: / E $CA $= * 5 ) 0 $ ) 5C @ $= & ) @ ) - > $ / $CA $= # 0 > @ # % $ )
--( " ( * + $ E
5$ N ) ti 7 E τ %0 '* " $ f (t|γ) = γ exp(−γt)
γ = 1/τ E G
*
E*(E ** ! E ** ,!
"&& ! M & ,!
/*
33 '5 &&(E **(' * /& ! && L=γ
N
N
7
exp(−γti )
i=1
= γ N exp(−
N
γti )
i=1
ln(L) = N ln(γ) −
N
(γti ) .
i=1
#)> γˆ 0 d ln(L) |γˆ = 0 , dγ N − ti , γˆ i=1 N
0=
τˆ = γˆ −1 =
N
ti /N = t¯ .
i=1
E #)> 0 E $ $ F> t¯ ) / ' " ) $ C ) @ 0$ $ & / " 0 < t < tmax $ > = " # & = > f (t|γ) =
γ exp(−γt) , 1 − exp(−γtmax )
ln L = N (ln(γ) − ln(1 − exp(−γtmax )) −
N (γti ) . i=1
F' $ #)> γˆ= $ +) $ 0
0=N
1 tmax exp(−ˆ γ tmax ) − γˆ 1 − exp(−ˆ γ tmax )
−
N
ti ,
i=1
τ) tmax exp(−tmax /ˆ , τˆ = t¯ + 1 − exp(−tmax /ˆ τ)
$> > % " ) ) 8tmax > τ := " + $ B
> ,# $ " #$ + $ / > H> 0 + $ & 0 τ " $ / $)
8
3 /& 6
/ = #)> 0 E >
0 F> t¯ " ) # $ 5 AC t¯ 3 & > +$ L $ # % 5 ) tmin 0 t A > @ t = t − tmin " $ ) 0 0
( * F> , " $ 5$ N F> xi = , " $ + σ= F> µ (x − µ)2 1 exp − f (x|µ) = √ , 2σ 2 2πσ
(xi − µ)2 1 √ exp − , 2σ 2 2πσ i=1 N 1 (xi − µ)2 ln 2π + ln σ − . ln L(µ) = −N 2 2σ 2 i=1 L(µ) =
N
8;:
? $ $ µ ,) N (xi − µ ˆ) i=1
σ2 N
=0,
xi = N µ ˆ,
i=1
µ ˆ=x ¯.
E #)> µˆ 0 > $> , " $ $ F x¯ ( * + , $ 5$ N F> xi = , " $ + σ= F> µ= L(σ) =
N i=1
(xi − µ)2 1 √ exp − , 2σ 2 2πσ
N (xi − µ)2 1 ln L(σ) = −N ( ln 2π + ln σ) − . 2 2σ 2 i=1
? $ $ ,)
33 '5 &&(E **(' * /& ! &&
;
N (xi − µ)2 0=− + , σ ˆ σ ˆ3 i=1 N
σ ˆ2 =
N 1 (xi − µ)2 . N i=1
& > $ G ? > $ > #)> 0 + , " $ +) $ 0= " $ # $$ #) $ @ )= > > $>
--* 5 " & A B )* ? * $ λk > = > ) @ λ = {λ1 , . . . , λK } ) L(λ) =
N
f (xi |λ) ,
8(:
ln f (xi |λ) .
8:
i=1
ln L(λ) =
N i=1
! F' E ) - = ) > * ? $ $ H $ & λˆk = 5 $ 0 = E #)> 0 λk
( * F>
86:
∂ ln L |ˆ ˆ = 0 . ∂λk λ1 ,...,λK
+ , " $ 5$ N F> xi = , " $ + σ F> µ & E$ E 0 @ $ (xi − µ)2 1 ln L(µ, σ) = −N ( ln 2π + ln σ) − . 2 2σ 2 i=1 N
? $ $ ,) > $ µ ˆ=
N 1 xi = x¯ , N i=1
N 1 σ ˆ = (xi − µ)2 = (x − x ¯)2 . N i=1 2
<
3 /& 6
)$ ! = + $ #)> @ ) $ #) $ F> " > > / B* > + $ " F F # $$ F $ 0 + $ @ ) N " = N −1 / 7 E ) + = > F> $#) $) > $ " # ? $ # " # & = > 0 µ $ > = P $ > 8 ? : ( * $ ? $$ P $" $ 5$ P $ " N * P " ek / P $" $ )0$ ? u *
@ $
3 (1 + cos2 α) . 8 5 P $ ? ? u(u1 , u2 , u3) >
P $ ui 8 )> # $$ u1 , u2= u3 = 1 − u21 − u22 " u1 u2 # $$ : f (cos α) =
E
ln L =
n
* E$
ln(1 + cos2 αk ) ,
k=1
> cos(αk ) = u · ek " $ = P $ # $ F' " ln L $ u1 , u2 & " ) P $ +* = EA $ F T 8 : " *)
--, 9 + & # $$ '* = > = > # = $#C - E E 0 '* F* E ) '* L(λ) = ln L =
Li (λ) , ln Li .
E A$ C * $ '* $ A F> $ ) " $ '* =
: & * E E$* PQ *&&
33 '5 &&(E **(' * /& ! &&
@ ) $ 0 & fi ) '*
$ > = C = # $$ " + B '* $ )> #C$= $ $ ) " > & E$ # $ > 8G % : = ? >
--- 5 + $ C Y) = ? " 4$ )0 = E 0 " ) $ ) ) + $ > B 84$ ": $ & " $ % ? ) / " 8+ : * # $$ @ $ #$ di * + i $ F " $= > 0 H + 7 L > pi(θ) θ
%0 5 ) N " + $ > $> ti 0
+ $ + i ti (θ) = N pi (θ) .
/ P$ #$ ) @ $ ) 5) N & A G @ $ > E ti > di #$ @ $ e−ti tdi i , di ! ln Li (θ) = −ti + di ln ti − ln(di !) . Li (θ) =
% = " θ # $ = E P * 8 ? := A > % # 7 >$ E$ E 0 $ 4$ B + ln L(θ) =
B
(−ti + di ln ti ) .
8:
i=1
# $$ 5 AC ti F'
% > F $ + + $ F' 8: H @ > > 0 + = 0 ) #$ > E " = E > " ) $ > 0 = + $ 0
4$ " $> ( * E * $ @ $ 4 $
3 /& 6
E G6
& : 9 ? @ E ( ** * ? @ < u = cos α & α " f (u|λ) =
1 (1 + λu) , −1 ≤ u ≤ 1 , |λ| < 1 . 2
5 λ= @ $ " 500 # $ ni 20 + 8? : / ,# $ > > ti #$ 0 + i= ?) ui = −1 + (i − 0.5)/10 )$ ti =
500 (1 + λui ) . 20
E > ) ? FE EA $ @ $ $)
& + $ ! $ = F> b $= 0 > ? 8: 0 E$ E * -) ln L =
B i=1
[−(ti + bi ) + di ln(ti + bi )] .
33 '5 &&(E **(' * /& ! &&
Y
X
χ (,:
C :& ' : 2
> ! $ >0 0
! #) > @ # $ ?
= > > $> " bi ! $ $ & 0 > $ * E E
6/" / +. & + $ ? )* )" F $ $ " # = P$ @ $ '* + $ F <
@ $ $ $0 + ti(θ) $ , > E F' $ E H Q $ 0 >0 A$ P ) % $ " *) " Ki #$ + i " θ # $$ 5> wik (θ) ti =
Ki k=1
wik (θ) .
3 /& 6
! 5> Q $ ) A = 0 " @ 0 H $ $* & *> 5 % f (x1 , x2 |θ0 )
$= > 0 + $ @ x1 , x2 / x1 , x2 $* 5> w = f (x1 , x2 |θ)/f (x1 , x2 |θ0 ) $)
--0 ': 5
& > N # $$ + $ {xi} $ = @ $ > ) θ #) = =
P = P λ(θ) %
N $# ) = " > xi & )> &
) *) & = N + $ ) - = $= & = @ $ F> ) & & 0 + $ f (x) = > $ 0 E e−λ(θ) λ(θ)N f (xi |θ) N! i=1 N
L(θ) =
0 E$ ln L(θ) = −λ(θ) + N ln(λ(θ)) +
N
ln f (xi |θ) − ln N ! .
i=1
) 7 = H " θ # $= A > 0 >
E >$ & *> & $G 0 )$ $ P $ g(x|θ) = > , $ f (x|θ) =
g(x|θ) g(x|θ)dx
& )$ $ λ $ ,
$ = *) E # S = B
λ(θ) = S
g(x|θ)dx .
> E > P M66N 0
--1 ) " ( * E * $ $ ! $
33 '5 &&(E **(' * /& ! &&
3
& > , " $ ! $ $$ * 8 @ 0 B " A K $ # $: & f (x) = θ1 x + θ2 + θ3 G(x|µ, Γ ) .
, " $ F> µ > $ Γ 0 $ # $$= f $$ / " xmin < x < xmax & A & = , " $ C / " " #$ , D
G
D=
1 θ1 (x2max − x2min ) + θ2 (xmax − xmin ) + θ3 . 2
& $ f (x) =
1 2 2 θ1 (xmax
θ1 x + θ2 + G(x|µ, Γ ) , − x2min ) + θ2 (xmax − xmin ) + 1
θ1 = θ1 /θ3 θ2 = θ2 /θ3 E > 0 & ) > ln L = ln f (xi |θ1 , θ2 , µ, Γ ) ' ? > " $ S 5) " + $ N −1 1 S = N 1 + θ1 (x2max − x2min ) + θ2 (xmax − xmin ) . 2
( * E * $ % =
% = > P ) 8 $ $ : 0 * ! $ ) + @ $ % $$ & $ , / $ > = $ > $
C " & @ $ f (x|θ 0 ) 0 * θ0 $)$ , D0 = f (x|θ0 )dx &
F < yk , k = 1, . . . , K > 0 E ' $ ln L0 = i [ln f (xi|θ0 ) − ln D0 (θ0 )] , > θ " E N + $ H # $ > >
> !> F < + $ ln L =
N
[ln f (xi |θ) − ln D(θ)] ,
i K 1 f (y k |θ) . D(θ) = D0 K f (y k |θ0 ) k=1
4
3 /& 6
4 )$ > @ F < / $ $ 5 $ 0$= > > ) " $ ? * $ % $ ? * $ " ? $" $ >= @ > ) = F < > $ AC
F* = K N ( * E 0 @ $ F < + $ & > " $ +* % " $ = + $ ? )* )" F $ $ >
= F < 0 $ > A & '* + $ $ C = $ > " $ 4$ * F < 4$ % > *# / + $ = ** ' > $ @ $ F < 4$ = > > = > $ " #$
--2 9 " +" & H) #-$ %= > F* $ $ = B " $$ > = "
# $= > ? $ B " y = t(x, λ)= & yi (xi ) B xi $ %0 F ) > , " $ @ ) δi2 " %0 H F* A > * 8;: E $ ln Li = −
(yi − ti )2 1 − ln(2π) − ln δi . 2 2δi 2
) 7 # $ > " λ A >$ $ > "# $ E 1 (yi − ti )2 . 2 i=1 δi2 B
ln L = −
" 0 8 ? 6: > χ2 ) χ2 =
B (yi − ti )2 i=1
δi2
.
F' $ E #G" F $ " χ2 = G ?> $ > % #)> λˆ Q $ % > 1/2
= # χ2 + > $
33 '5 &&(E **(' * /& ! &&
( *
7
+ χ2 @ $ 0 B % $ σ = √ 2B = 50 F* $ 10 + $ C > $ χ2 & " ) + * '=
> > $ ) A = Q $ " χ2 = ># Q $ " χ2 ( @ $ * L 5 0 $ OA $ # $ 7 ) = $ C > $ " ) # $$ " > &0 > @ $ Q $ > H> # $$ " $ = A > $ $ ) F = F $ χ2 % = C F T $ 5C ) 0 > $> = > G ?> $ = %
" $ 5> $ F' E F * H " % ? $ = % ># $" = > $ F $ = >0 > "A$ E = ) F T 0 F T > # $$ "
E F U @ ) $ $C ! U * *$ ? > $ ) $ $ 0 = $ +* ( * 5$ * ) F T $
$
%0 $ $ # > $ " $ ? )$ % 7) ? * $
F T F ? $ % 0 = $ B > F T $* 5 " + 0 F* = F $ " #$ & F T = χ2 F $ > = ? 66 ) 0
--3 9 "/ 5 & E !$ $ F'> " , " $ >= ) + $ - F' >= )> #C$= F' % $ ) ) * / " % E $$ > B )$ ? ; $ $ $ > = > F $ $0) > ! !# = )> = 0 H E >
8
3 /& 6
χ −A ? @ ' : A ! 2
'5 & * 9 & 6 # A
/
E **(GH
33 '5 &&(E **(' * /& ! &&
;
--&4 +! $ % $) , > *' > $ F** = 0 * , # = # ,>> = F
7) A F $ O L A ? )* ) α(x, x ) > = $= >
& * 5 AC x ) x > ? )* ) > @ > F # 4#-$ " $ h(x) $ % $
? )* ) 0 @ $ h (x )=
xmax
h (x ) =
α(x, x )h(x) dx .
xmin
L A " %# 4 " > $ F <
$ > $ 0
) B 7 * & > F $ ' > = A > )> " & " $ % α >
C @ $ & $ B* 6 @ $ > @ $ " $ = >
" > $* > )> F H % " )) = $ > ) $ 0 ? 0 % @ $ $ > 0 F > F < * # #) $ $ $ @ $ " '* 4$ & 0 M + $ N '* %0 cn = N/M mi F < $ + i > 0 E " 8: ln L =
B
(−cn mi + di ln(cn mi ) ,
89:
i=1
> " $) > = % " #$ > = M N $ & #$ + $ C $ $ = @ $ , "
$ ) ** ' = A > * χ2 ? χ2 =
B (di − cn mi )2 i=1
cn m i
8:
3<
3 /& 6
0 ? * $ " > & > $ ) 0 $ 2 $> + $ "
$ = > ? 0 0 89:= 8: *) P M6N ) - * * $ > )> $ 7 * )=
" # $= )> , > F** + 7 $ C $ * = $ $ $ E) A$ P$ # P *)# + # $ P ) 0 )= > $ " #$ > A
) +! + * $ > Q $ 0
F < @ $ -) , > > H $ > 0 $ ? $ P > > = $>$ 5 + χ2 % - > % $* = >
Q $ " χ2 ) & > F * " $ = > > + $ ) χ2 " 5 AC $ 2BN/M B + 8 ? : * = $ AC F* = & " 5 AC $ = & $ > $ & " χ2 = # $ ) > $ A > ) = > $ F < 0 > " > & 0 & $ + $ * ? !> )$ > )#) > $ $ = > 5> ) " / = ? $ $ = 0 * 0 = @ #)> 4 $ F < + $ $ #)* ) %0 H F < + $ x > > & x " * & f (x|θ0 ) 0 θ0 , 5 " > > + Q $ > > $ H + $ w(θ) = f (x|θ)/f (x|θ0 ) $> @ $ x $#
@ $ )> $ H # $ 4 $ $ F < + $ > $
33 '5 &&(E **(' * /& ! &&
3
L! *
'* (0*(
# @ N !@
# ' : Y) F 7 > $ &
) & )> +* ( * E @ $ F < B
& f (x|θ) =
1 + θx , 0≤x≤1. 1 + θ/2
& $ + $ x $" / " 0 ≤ x ≤ 1= '* ?OA $ ? )* ) $ @ x + i ) m0i $ + $ >
x $> ) 4$ m1i @ $ )$ ? (= $* 4$ * @ $ " @ $ 5)$
3
3 /& 6
,: E ! : G *&& !@
L!
G *&& @ & * ∆γ !6 9 $ @ $ ? ( $ D $ $ mi F < @ $ di ∼ mi = m0i + θm1i .
θ > * = @ $ di ,
$ A$ $ D $ $ 4 $ > ( E $ F < B
& > @ $ f (t|γ) = γe−γt
34 * 2!
3
7
P #)> γ0 f (t|γ) = γ0 e
−γ0 t
∆γ 2 γ02 t2 ∆γ ) + ... . (1 − γ0 t) + ( ) (−γ0 t + 1+ γ0 γ0 2
F < 5 $ $ @ $ f0 = γ0 e−γ t > (1/γ0 − t) )> (−t/γ0 + t2 /2) > @ $ f1 = (1 − γ0 t)e−γ t = f2 = (−t + γ0 t2 /2)e−γ t 0
0
0
f (t|γ) = f0 (t) + ∆γf1 (t) + (∆γ)2 f2 (t) + . . . .
& $ $ = A ) " ∆γ/γ0 ) " # $ = A > $ @ $ > D $ $ " @ $ ∆γ > χ2 E * $ / % = > > f0 t= )> t2 > * @ $ f0 = g1 = tf0 = g2 = t2 f0 % $ ? 0 $ f (t|γ) = f0 (1 +
∆γ ) + g1 γ0 γ0
∆γ ∆γ 2 ∆γ 2 2 1 +( ) t + g2 γ02 ( ) t . γ0 γ0 2 γ0
% > > ? * $
" 4$ $# ? )$ +* &
G 7 " #$ > = $ 0$ )> 4$ $ % > $ ) $ 7 > $ df (∆θ)2 d2 f f (θ) = f (θ0 ) + ∆θ (θ0 ) + (θ0 ) + . . . dθ 2! dθ2 1 df (∆θ)2 1 d2 f = f (θ0 ) 1 + ∆θ (θ0 ) + (θ0 ) + . . . . f0 dθ 2! f0 dθ2
+ $ x @ $ f0 (x|θ0 ) $ 4$ m0 & $ w1 )> w2 = 1 df (x|θ0 ) , f0 dθ 1 d2 f (x|θ0 ) , w2 = 2f0 dθ2
w1 =
> )> > 4$ m1i = m2i + * $ " ∆θ " $ > mi = (m0i + ∆θm1i + ∆θ2 m2i) '* 4$ di $) +3 !
, $ " # $$ + > ) + Λ 7 = Λ → p+
3
3 /& 6
π=
> %$ $ Λ /* * $ /* $ 7 H # $$ " = 0 $#) 0 $ /* " 0* + 0 $ $
> $ $ $ A /* $ > / $ % > I + $ xi 0 I θi > K > $$ $ % hk (θ1 , . . . , θI ) = 0 , >
= + $ " ! ∆i > $ $ $ 5 $ δk 0 = (θi − xi )2 = ∆2i , 2 hk (θ1 , . . . , θI ) = δk2 ,
8:
A > 5 AC χ2 χ2 =
I (xi − θi )2 i=1
∆2i
+
K h2k (θ1 , . . . , θI ) . δk2
8:
k=1
& χ2 @ F " χ2 +> @ = > > $ $ $ I = $ I + K 0 , > $ $ $ %# ' 0 %0 $ = ! δk ) ># & @ +* ( * ? * $ > $ $ $ > 7
" ' 1 m E# $ > $ F $
0 $ l1 = 35.3 = )> l2 = 64.5 $ $C
F $ $ " ∆ = 0.1 #)> λˆ1 , λˆ2
E# $ & χ2 =
(35.3 − λ1 )2 (64.5 − λ2 )2 (λ1 + λ2 − 100)2 + + . 0.12 0.12 10−10
F $ )0$ λ1 λ2 λˆ1 = 34.45= λˆ2 = 65.55 χ = 4.50 # > 0 '*) @
> $ > $ $ $ F " 2 2 2
χ2 =
(35.3 − λ1 ) [64.5 − (100 − λ1 )] + 2 0.1 0.12
A A K > $ $ $ *'= " @ > $ +) $ 8: A$
37 D * ! &
33
/ E > > $ $ $ 0 > @ > $ " E$ $ F* E $ ?# $$ 0 * F ) A$ *) ?C 0 L " 0 $ > F " )) > $ $ $ A E >
8: ) = ' > E$ E ln L =
N i=1
1 2 K
ln fi (xi |θ) −
k=1
h2k δk2
.
A H) + $ xi $ " θ 0
& fi # $ > $ $ $ ' 0= > 0 ! δk & $ ) $5 6 ! (
-1& ? @ $ 0
$ 0 G" = " @ $ * # $$ & = 0 G " #) $ /
= > & F* ) " # F < = FE F $> > #) $ $ = > = @ $ " 4$ = = P# $ ) ) + A & / = @ $$ 7 ) ) U 0 A$ / "
= )- = > @ )> > @ 0 + $ >$ -1( : & f (x, y|θ) 0 )> " # $$ A > % f (x, y|θ) = v(x, y)[1 + u(x, y)θ]
E$ E 0 F> u = u(x, y)= v = v(x, y) ln L(θ) = ln v + ln(1 + uθ),
34
3 /& 6
% " $ - F$ AC u(x, y)= ln v " θ # $ E ) #) $ $ $ {x1 , y1, , . . . , xN , yN } ln L(θ) =
ui = u(xi , yi ) {u1 , . . . , uN } #
ln(1 + ui θ) + const
8:
* @ > A )> 4$
" > > % +) $ 8: $$ = % g(u|θ) @ $ " u 0 #) $ A$ > E $ '* & ui $ E E > A $ ) A = > ? )* )" ?OA $L " $ U P$ / % $ > $ P $ @ $ E # θ "
R $> > P @ u & '* L $ C = # @ $ " u > " $ ) / θ @ %# A$ > *) 0 F < $0 ) > $#C f (x, y|θ) $ 0 H + $ xi , yi * & ui = u(xi , yi ) θ >
@ $ " u E χ2 ? * $ @ $ " u 0 $ - ) 8 B* ;:
-1* @ $ $ N @ = > ) @ x ) = " f (x|θ) = v(x) [1 + u(x)θ] .
& A > @ $ - =
@ u / " ) & > $)$ p ) = A$ > ?$ p @ u1, . . . , up
f (x|θ) = v(x) 1 + uµ (x)θµ .
! @ = >
@ ( * P @ & & f (x, y, z|θ) =
1 2 (x + y 2 + z 2 )1/2 + (x + y 3 )θ , x2 + y 2 + z 2 ≤ 1 , π
8;:
37 D * ! &
37
" & *
D * ! u /& ±θ " " # $ 5$ " F> P 5 θ u=
√ x + y3 , |u| ≤ 2 , 2 2 2 1/2 (x + y + z )
v = (x2 + y 2 + z 2 )1/2 , 0 ≤ v ≤ 1 , z=z
0 ) g (u, v, z) g (u, v, z|θ) =
/ $ 0 v
z
∂(x, y, z) v [1 + u θ] , π ∂(u, v, z)
& g(u|θ)
g(u|θ) =
z v g (u, v, z|θ) .
) &$ A$ & 0 g
'*) ? E$ E 0 θ ln L(θ) =
i
ln(1 + ui θ) + const
38
3 /& 6
'* {u1 , . . . , un } A > FE #)> % @ $ " u 0 > θ = ±1 )$ ? 6 & " 8;:= > >
H> 0 H + $ xi , yi, zi & ui $ $ @ $ D $ $ @ $ ? 6
-1, % +* = & " # $ E ?# $$ " #-$ = @ $ D $ $
) ) = > $ " 5> $ %0 $ = % # > / 0 > & > & 7
$ #)> θ0 ∂f 1 ∂ 2f |θ0 ∆θ + f (x|θ) = f (x|θ0 ) + | ∆θ2 + . . . 2 θ0 ∂θ 2 ∂θ = V 1 + u1 ∆θ + u2 ∆θ2 + . . . .
86(: & ># > BY) ui " & > G 7 A K $ " #$ A = 0 0 @ u1 (x)= # $ #)> θˆ = θ0 + ∆θ u1 (x) =
∂f (x|θ)/∂θ |θ0 f (x|θ0 )
" + $ & ,# $ ) = )> @ u2 )$ > ? " / ,# $ $ + $ @ ? > $ * ) - P M6N
-1- + ""7 5 ./ > P @
> = > > # $> A* - / $ = A > E #)> " )
&
H: "
A * /*! !
/& 6 * *& * * ! & C: 4
37 D * ! &
3;
9 & E !
& ' " > / %# $ )> '*
#)> F < $> > @ > $ +* ( * ?** ' E #) E $ " )
@ $ %0 @ $ " N " )
= '* " E ti F> t¯ A* #) # " / )0$ τ 8 ? : / @ $ ?OA $L $ ) F $ # 8? := > ?$ F> t¯ =
ti /N
" )
& ti " / )0$ τ $ τ (t¯ ) )> τ ** ' #) > t¯ F < % " t¯ = (t2 − t¯2 ) , N −1 1 2 t2 = ti N
(δ t¯ )2 =
% *O ) $ G % " τ @ @
4<
3 /& 6
F A$ 4$ $ $ ) > " @ = P ) * @ K ? > $ $ $ @ ) $ 0 = $$ #) - + $ $0$$ @ )
$ A > " = E #) > 5 AC xi " # @ $ f (x|λ) ) " > = +) $ • • •
L(λ) =
f (xi |λ) ,
86:
L |ˆ = 0 λ λ
$ = > 0 E 0
= > > @ )
$ $ * #)> λˆ > 4 F < = +) ˆ λ ˆ ) %# = F $ $ $ λ( = * = f (x|λ) 0 $ " )
+ $ - @ $ ) + $ $A > P ? )* )" α(x) 0 > $ > ) @
$ $ 5 $ @ +* = > > ? 6 $)$ = & $ '* " $ F> + $ > "
A* $ H %#= ? )* )" ) 0 = F $ / %# 0 > @ 0 $ & # = $$ F ** ) )) ? )* )
$ & f (x|λ) 0 + $ x f (x|λ) =
α(x)f (x|λ) , α(x)f (x|λ) x
> , = $ ? )* )= ) , $ & 0 ) A(λ) > E$ E 0 N + $ ln L(λ) =
ln α(xi ) +
ln f (xi |λ) − N A(λ).
? )* ) A(λ) 0 F < >
= > > $ ,# $ ,# $ "
$ 5 $ #) $= 0 ) @ )
$ #)> = ,# $ 0 % λ(λ )
$ > +) $ 86: ) A = 0 & F' E & A
38 & * "H:&
4
+) $ 86: ** ' = EA $ A$ $ % > > * ( * ?** ' E #) E G @
$ " $ xi / " [−1, 1] = f (x|b) = 0.5 + bx " $ $* b , |b| < 1/2= $ E ln L =
ln(0.5 + bxi )
,# $ #)> b0 F' & ) b = b0 + β
E β = F' ) -
xi ˆ i 0.5 + (b0 + β)x
=0.
& > G 7 A K $ β " # $ = A > 5 $ βˆ OA f0i = f (xi |b0 ) #)>
xi /f0i βˆ ≈ 2 2 . xi /f0i
& > G 7 ) = f (x|a, b) = a + bx + (1.5 − 3a)x2 ,
> 0 ?> $ α = a−a0 " #) > $ K $
(1 − 3x2i )/f0i α ˆ≈
2 . (1 − 3x2i )/f0i
+ $ > F' $ + $ AC ?> $ B
αˆ, βˆ " >
$7 % ! 1.
4#-$ # + $ = " = A *
8 $ : 0 > ) @ & % θ A * ν @ $ $
"
4
3 /& 6
-2& < 5
A * = > & f " % f (x|θ, ν) = fθ (x|θ)fν (x|ν) 866: = ?# $$ " θ fθ = $ L(θ, ν) = Lθ (θ)Lν (ν)
Lθ =
fθ (xi |θ)
# $$ " A * ν ( * A * % )> , " $ 5$ " (xi , yi)= i = 1, . . . , N 5
θ @ $ 2 − 12 [a2 (x−θ)2 +b2 (y−ν)2 ] e π 2 2 b2 2 a2 = e− 2 (x−θ) e− 2 (y−ν) . π
f (x, y|θ, ν) =
x @ $ # $ " θ = $ > & ν θ # $$ " ν > E * * ) , " $ θ= L(θ) ∼ e−
#)> θˆ = x¯ =
a2 2
ˆ2 (θ−θ)
,
xi /N
-2( ? C F $ $ = 7 ν = ν (θ, ν) & $>0 % 866: θ ν ) $ +* ) > ? 9 )) 8 > # ? * : & >
$ $ θ= ? * ν 5 y = θx + ν = F* $= = A > B
= > 5 $ $ $ $ K > * F* 0 & E * * ) , " $
= 7 ν = c1 ν +c2 θ E *
38 & * "H:&
4
θ, ν > & " ) +> + * $ )$ = @ ) $ $ 0 = > / $ 0 A * / >
L(θ, ν) ∼ exp −
ˆ 2 − 2abρ(θ − θ)(ν ˆ − νˆ) + b2 (ν − νˆ)2 a2 (θ − θ) 2(1 − ρ2 )
,
> & θ,ˆ νˆ E ' = / $ $
Lθ (θ) =
2 a 2 ˆ L(θ, ν) dν ∼ exp − (θ − θ) . 2
+ $ C " + $ # E , " $ * 8 ? $ 6: ,# $ = A *
/ $ ) +* MN $ ( * A * P $ ? * $ ? * θ 0 " $ > $ $ r1 r2 = ? > = # r1 , r2 $ @ $ F> ρ1 ρ2 e−ρ1 ρr11 , r1 ! e−ρ2 ρr22 f2 (r2 |ρ2 ) = . r2 ! f1 (r1 |ρ1 ) =
5 θ = ρ2 /ρ1 / ,# $ A > #)> # $$ ρ1 ρ2 % " > 0 & θ % 0 % *O ) $ r2 , θˆ = r1 ˆ2 (δ θ) 1 1 = + . 2 r1 r2 θˆ
%0 $ C r1 , r2 F " = =
& f (r1 , r2 |ρ1 , ρ2 ) =
e−(ρ1 +ρ2 ) ρr11 ρr22 r1 !r2 !
" # $$ θ = ρ2 /ρ1 )0
ν = ρ1 + ρ2
4
3 /& 6
E*(E ** * ,!*: ** & A
r1 = 10, r2 = 20
(1 + 1/θ)−r1 (1 + θ)−r2 f˜(r1 , r2 |θ, ν) = e−ν ν r1 +r2 r1 !r2 ! = fν (r1 , r2 |ν)fθ (r1 , r2 |θ) .
E$ E 0 θ $ ln L(r1 , r2 |θ) = −r1 ln(1 + 1/θ) − r2 ln(1 + θ) .
0 *) & r1 = 10, r2 = 20 ? 9 $ F' $ θˆ = r1 /r2 = > ?#) $ %
-2* < C & > y - = 8 $ : )0$ A * ν = θ " # $= @ $ f (y|θ) " y= H # $$ " & " ν = )
#) $ " > > ,0 F !# / " " = y > $ A* )0$ θ " 6 !
/& ν #
*( & * ! * ν 6 ? ,! 4@
38 & * "H:&
43
( * A * P $ $ $ 5 ? A *
& * ) 0 (xi , yi) 5 " = > x B ' %0 y B @ $ % f (y1 . . . yn |θ, ν) $$ # $ $* θ ? ν A * ) = y˜1 = y1 − yn , y˜2 = y2 − yn , . . . , y˜n−1 = yn−1 − yn # $$ " ν / % A* )0$ $ $ θ ( * A * P $ + σ 5C @ $ F> µ A *
F > x¯ >
1 N 2 (xi − µ)2 1 exp − f (x1 , . . . , xN |µ, σ) = √ 2σ 2 2πσ i=1 1 N Σ(xi − x¯)2 2 √ = + (µ − x ¯) exp − 2 . 2σ N 2πσ
7 u = Σ(xi − x¯)2 /σ2 $ 0 u @ $= # $$ " µ = # χ2 @ $ 0 N − 1 % $ ? $ - ) + P MN= " 0 8& $ µ= A
* H σ = A * > > #)> " µ # $$ " σ= + E :
-2,
@ > * = A * #)> ) ) * * A $ 5 > ' ? @ $#
) > B
8
= % $ A$: 0 ) P % $ ) / ' = "# $ B
= > % " > $ > " @ " > $ - M69N ) A * & # > +* E " A * E > ' A * ν % $ θ & νˆ(θ)= E ' = 0 +) $ ∂L(θ, ν|x) |νˆ = 0 → νˆ(θ). ∂ν
44
3 /& 6
> E $) - Lp = Lp = L (θ, νˆ(θ)|x) ,
" θ # $ @ $ C @ = E " > > ? 0 A * 0 $ B
- $ % " ∆ ln Lp = 1/2 > = > > θ − ν 7 $ * ) ν ? * B " ∆ ln L = 1/2 $ / E > -) - * *$ = $ M6N / 5 ) $ C " + $ = E % , " $ = @ ' F P $ % $
E
-2- $@" & * @ " $ = )> FA$ > > " ) "# $ $ A
* = > $ 0 / $
Lθ (θ|x) =
∞
L(θ, ν|x)dν −∞
*) ? 0 ν "
@ ) $ # $$ ,# $ %#
$ > + = L $ - = > $ = > E ,# F' )0$ = #$ 7 / 5C ?** ' E = 0 $ C " + $ P$ $ = / $ " # $$ " B
)> '
-20 '7"/ 6 6. $@" $ $ = A * ) = O @ $ " #$ & E *' = 0 $= * E ) / %# A$= ?# $$ #)> " θ % $ ) θ1 , θ2 " A * ν '*) )$ = > #) $ " θ 0 & " ν !$ $ #)>
38 & * "H:&
" ν %
47
0 θˆ > ?# $$ θˆ = θˆ0 + c(ν − νˆ)
% $ ) > P$ $ ?# $$ ) $ = / " # $$ " ν
-21 ' " & $ $= A * '*) ! $ @ $ ) E " % , " $ >= - )
/ "#) $ " > > / ?> $ " 5C % = > > " = '*) ? $ ?# $$ E #)> " θ " A *
) $ / A$= 0 > " A * " )
" !
) - !! 2! !
0&& '@" $ ) $ * {xi } A " %# ) $ > = / )0$ $ " $ % > ) 3 8 $ 9 : A* 8 " : C P ? % A* )0$ = > B > @ $ #) $ A$ > * #) $ - t ≡ {t1 , . . . , tM } A* +)$ θ= > 0 $$ t @ $ {x1 , . . . , xN } " θ # $ f (x1 , . . . , xN |θ) = g(t1 , . . . , tM |θ)h(x1 , . . . , xN ) 8: @ $ g(t|θ) # 0 #) $ " / = > 0 #) $ A* ) A = > !# $ ) > t B* 8> : A* R $ % A* 0 $ / 0 ' ) 3 ? ) " = /
)$ 5 AC & %$ % A* t(x1 , . . . , xN ) θ #) $ 0 E = 8: $ C #
7<
4 /& 6
86: ) = )> % L2= # $$ " θ " $) > = O E @ # 0 " & " θ = 5 AC N = $ & t $ = $ / 0
θ ) $ FE #)> 0 FE #) $ A* 8 % := ' $ " N : 1 4 A* $ = > = FE #)> )
( A* 0 > $> 5C @ $ 5$ N " F> x1 , . . . , xN + σ= > $> µ @ $ E L = L1 (θ|t(x)) · L2 (x)
L(µ|x1 , . . . , xN ) = c
N
exp[−(xi − µ)2 /(2σ 2 ]
i=1
= c exp[−
N (xi − µ)2 /(2σ 2 )] i=1
√ c = ( 2πσ)−N N
'* $ C $ >
(xi − µ)2 /(2σ 2 ) = N (x2 − 2¯ xµ + µ2 )/(2σ 2 ) .
i=1
>
L
8: , % # $ " µ 8 σ : / $ # '* 5 AC x¯ $ / )0$ µ 8 : A* ? $ % µ ,) FE #) $ µˆ = x¯ )> A* > = > > $> + σ $ > ( A* 0 > $> +
5C @ $ 5$ N 5C " F> x1 , . . . , xN = F> µ + σ @ $ ? L(µ, σ|x1 , . . . xN ) = exp[−N (−2¯ xµ + µ2 )/(2σ 2 )] · c exp[−N x2 /(2σ 2 )] .
& # *!
* x !6 * θ
& *
* *
4 E ** *& *
7
A* 8: > = x¯ x2 ) ? " x¯ v2 = (xi − x¯)2 A* ? FE #) $ - F' " L )>
µ, σ2 {¯ x, x2 }
µ ˆ=x ¯, σ ˆ2 =
1 2 (x − x ¯2 ) . N
( * A* 0
#) $ " F> t¯ N $ ) ti A* 0 γ 8 " # 0 E τ = 1/γ : E 0 $#C '* " $ L(γ|t) =
N
γe−γti
i=1
N = γ N e−γ i=1 ti ¯ = γ N e−γN t ,
N 1 ti . t¯ = N i=1
FE #) $ γˆ = 1/t¯ ( * / * +* E A* $
" * " % $$= > > 5 AC N / N H " = N 7 A* = ) + ) +* {t¯, N } " N $# ) 8 : 02* y 8 $ := > f (y|θ) = f (y)= @ $ " y # $$ " & $# ) O F' E #)> = " 0 % E 0 5 $ #) $ $ AC %# $# ) 0 5 $ +* $= #) $ /
" A* ) > = >
9 8 $ 9 : )
0&( 9 "/" > " = '* + $ $$ & > $ F$ # A
7
4 /& 6
$ 5 # B $0 > , + $ > > = > 5 # $* , > = 5 # B $ 8 $ : $ = > 0 > $ 8
/ "#) $: /
" > 0 = > > 5 # A " $> ># ? $ "A$ _ _ $ '* O ? $ ( * B $ 5 K $ $ 7 K B * $ B > / ;(Z %#
) " = $ K B $* )* $ = > %
" > 0 = ?OA $ A$ = $ = ? $ ) 0 $ B $* )* " 7 ) > ? $ " $= 0 ) E )* > %$ =
0&* 5 "/" & )*= + ) P ? Y) )* )* B $* )* $ )> $ #-$ E * )* 8E: + " $$ & f (x|θ)= θ #= )$ / = > 0 #) $ A$ = E L(θ) = f (x|θ)= " @ $ &
@ # $ $ % &
" & 0 &
" * #) $ P
0 ' & & 7
* $ + $ 4* Hi = $ '* / = > ) ! $ 4* ) @ 0$ $ = E Li E $ % ) 0 > $ M6= 6N & " ) & $ +> E # = +$ 0 $ E & " 0* % = " θ # $ & g = > " / 0
θ #= E L > π
4 E ** *& * g(θ) =
7
L(θ|x)π(θ) . L(θ|x)π(θ)dθ
& > )> 5 AC = A > &
= E = +* $= > 0 g(θ) / ) = 0
B E $= * #H ) ) > π(θ)= 0 ) & * ) ? %$ = > = " E #-$ $#C ? $ $$ E = % " 4#-$ P$ E $ > A = > & * ) E
" )$ H $= F " / $ " F $ A* 2
" / " > F )* E # $=
#) $ E
F $= ) + ? $ 8 ? := 0 $ > 0 / E > +* * # = $ E >
$ $ ' @ $ = 0 * ? > $
" = + $ 4#-$ )* ) $ $ 0
5 0 ? $ E ? # $ 4#-$ $ " $ ? > $ C > + = > F ) F #-$ * ! F A
? > $ E ) 0 0 = P$ F 5 " ) $ E %) H = E = B*# F ) 0 * 0 E
> = > F $ ? E * )* $= * #) $ E E$ > ># > $ #)> F' E = / "#) $ = + )># = 5 ) E = C & / 8 B* : ? E #)"
E $ % $> $
0&, + 7 5 ' + + $ " F> + , " $ > $= + ) & " # 5 )
7
4 /& 6
$ @ # $ b 8 +: #)> ?> $ > $> " > & 3 4 ˆ −λ. b= λ
( * + #) $
* ? # > * γ & " $ 0 F> t¯ 5 " $= ? 6 f (t¯|γ) =
(5γ)5 ¯4 t exp(−5γ t¯) , 4!
FE #)> γˆ = 1/t¯ > $> E(ˆγ )
∞
E(ˆ γ) = 0
=
0
∞
γˆ f (t¯|γ) dt¯ (5γ)5 t¯3 5 exp(−5γ t¯) dt¯ = γ . 4! 4
& $ C " $ $ '* H> + $ FE #)> 0 γ > = > F " > & 6( Z + #$ 0.2 γ + #-$ + #C A = > A H P$ > = F $ 0 " #) $ $ >
5 ) " F $ > & # / E > 0 > * = + * B
) $ + $ )$ H = + F $ $ " > = ># % = > > = > 0 = 8
$ : F>
$> * +) $ 8: = > 5> * * ) " % G
¯ 2 θi /δi . θ¯ =
1/δi2
/ ) +* > #)> " '* ) '*
> R '* i > √ #)> γˆi % δi = 5 AC δi = γˆi/ 5 * * ) γˆi
> $> F $
γi2 γˆi /ˆ γ¯ =
1/ˆ γi2
1/ˆ γi =
. 1/ˆ γi2
" ,
4 E ** *& *
73
)$ = > $> F> E(¯γ ) = 5/6 γ 4# > +
$ = # > # ?> $ = # E(¯γ ) = 2/3 γ 4# > >
0 E = ># #)> )'* " # + $> F $ >0 > " ) & / 5$ ) ) " B$ " > F $= B
@ # $ #)> = & * ) E = $ 0 %# $ & = " E ) %
)$ = ' @ F $ " ? H ? E$ E & B* ) 0 ? $ 5 $# = + F ) > = E &
* > > $ +* ( * + #) $ + $ & = E 0 L(λ) =
e−λ λ0 = e−λ . 0!
& > L = & ) > $> " λ
= > λ = 1= ># & ˆ = 0 F' E * λ 8 $ " > = , $ > $> $ $ ? ? * 5" $ $ " 0 $= >0 > FA$ = # > $ $ P $ ) F> 0 A = 0 = > $> " λ " " : &0 ) + ( $ $ '* H> = >0 " F $ > $> > $ = $ $ 5 $ 0 H E
) '* *) > = = > ) $ $ 0 = , ) > = $ 2( 0 > $> & > +* ( * + F $ + 5" $ N > xi 5" $ f (x) = 1/θ 0 < x < θ 5 & θ ? )$ F> E 0 N = 12 E , * ?! @
& 9
"
74
4 /& 6
E **(A *
9
*!(
L=0
0 θ < xmax , 0 θ ≥ xmax .
1 = N θ
" = E $ AC & = > θ $ $ AC > xmax ) # θˆ = xmax 84 xmax L A* = ? : %0 & > E =
#)> ) %0 N > > N + 1 E0 8)> & P# : ? $ AC > xmax " θ ˆ θ/(N + 1) + −θ/N $ 5 = + )
$ " = $ % "# $ E )$ = θ = xmax
+xmax /N −0
.
0&- 6: 6 * * $#C$ % B A H> $> * & 5> A S '* P !
4 E ** *& *
77
$ + $ ) t > '* $ &
P 1/t " #S ? > %# I J @ E F $ > E " I** $
* ' J $* FA$ = '* * ) = ? ) $# = > > $ = 5 $$ $ $>0 5 $
= " %# $ 50$ ! # $$ #) $ " ? $ $ $ E )*= E ) G ) " ? $ $ # $ & ) +* ( * ? $ @ # " / )> $ $ '* > E 7 $ / '* A > * t $$ > 4 # / '* B > + $ " 4 $ $ = > )#$ $ F) t
$ / %# t H> " # $ > = > '* $ = )> " B '* ) $
$ = # τ = t/4 ) $ % "S F A I J= '* " $ 0 )> '* $ E 0 %# > 0 '* A @ $ )> % '* " $ LA (θ|n) = P (n, θt) e−θt (θt)4 ∼ θ4 e−θt , = 4! LB (θ|t) = θ4 e−θt ∼ LA (θ|n) .
E
" % $ %$ $ $ ? $ $ * P $ ? $ $ > $> # = > 4 +*= ? 6 $ * > $ $ P > = > F) > = > 3 + $ " & " '* $0 > = #G" ) $ )'* = F > $ 5 $ $ F>
B ) $ $ = A #$
78
4 /& 6
5: & ! !* #
*! !
2
: ? C6 @ * ! ! 5: & * )
5: &
& > * / S , = G ) 7 ) P= > $ G )
) $ P > # $ = $ $ + F $ " F $ > $ G ) $ #
$>= F> ) E$ E 7G ) $ E$ E = $ G ) ) ! 4 .
/ " $ B* > 0 F' E F $ A > @ ) $ @ $ # > %$ ) >
0(& + F @ $= " λ # $= P$ % " λ
µn (λ) =
xn f (x|λ) dx .
89:
4
' * /& :
7;
& > #)> µˆ F = )+ F> @ )= ' = > * * µ ˆn =
1 N
xni
i
= > ! " µ #)> ˆ = µ−1 (ˆ µ) , λ
5) $ C $ 8 ? $ 6: lim P {|ˆ µ − µ| > ε} = 0 .
N →∞
+ A F )> #C$= F> ) ) $ $ > $
( * F F> @ ) , " $ 5$ ( $C" + $ x1 , . . . x10 = $ F> @ ) @ $ 1 f (x|µ, σ) = √ exp −(x − µ)2 /(2σ 2 ) , σ 2π µ1 = µ , µ2 = σ 2 + µ2 , xi /10 , µ ˆ=µ ˆ1 = µ ˆ2 =
i
x2i /10 ,
i 2
ˆ2 − µ ˆ21 . σ ˆ =µ
/ % $ F F' E F / $ F H > $ $ @ = ? > $ % #)> > % *O ) $ > 0 , A >
F < ( * F ? & " $ f (x) = 1/2(1 + αx) ? N $
@ $ " x = cos θ
? * α > > $> @ $ µ = α/3 & A $ F > x¯ = xi /N
α ˆ = 3¯ x.
8<
4 /& 6
G % ) $ @ ) 1/3 − α2 /9 @ $ ! @ > $ #)> >
δ=
1 − 3¯ x2 . 3N
E > $ $
0 F $ = %
$ ) >$ 5 ) |α| < 1 >
0(( + D F T = > * = G ?> $ " F> " % = " # $ 8 ? : %0 N $$ F> xi , yi ±δi= % t(x, λ)= = > λ = N (yi − t(xi , λ))2 χ2 = 8: δ2 i=1
F
i
& %= %
, " $ ? 69 ⎛
⎞ B 1 G ∝ exp ⎝− (yi − ti )Vij (yj − tj )⎠ 2 i,j=1
) " > = > V 5> ' U / " B" ) ' U ? B −χ2 /2 F' $
E > #G" F $ " χ2 =
B
(yi − ti )Vij (yj − tj ) .
i,j=1
$$0$= @ $ ti " # $ F T > $> = > %
, " $ $ & % " $ = " 0$ > 0 F + $ % = ) $> B" ) '
I7 > J ti )
$ > > $ + $ = @ ) $= ti (λ) ) L
4
' * /& :
8
+* √ @ $ + i ti = 100 di = 80 δi = 100 = 10= # $$ " di % P$ % F " $ = F * = > F> 5C @ $ $ " $$ @ y (y) ( * F T 5 * $ + > a= b 5 $ $ f (x) = ax + b 8: F χ2 % χ2 =
(yi − a xi − b)2 δi2
i
,
(−yi + a xi + b)2xi ∂χ2 = , ∂a δi2 i
(−yi + a xi + b)2 ∂χ2 = . ∂b δi2 i
& ) * ? $ 0 $ ? 0
) $ 8 B % $ % δi = δ: x=
y=
xi 1 / δi2 i δi2 i
( xi /N ) ,
yi 1 / δi2 i δi2 i
( yi /N ) ,
y2 1 i x2 = 2/ δ δi2 i i i
&
i
i
( x2i /N ) ,
xi yi 1 xy = / δi2 δi2 i i
i
( xi yi /N ) . i
ˆb = y − a ˆx , xy − a ˆ x2 − ˆb x = 0 , a ˆ= ˆb =
xy − x y
, x2 − x2 x2 y − x xy x2 − x2
.
8
4 /& 6
F " = > ! * $ ' B > * x $ x = x − x ,
a ˆ =
x y
x2 ˆb = y¯ .
,
5 $ $ 8: )#) @ & = % #)>
) y=a ˆ (x − x ¯) + ˆb .
δ 2 (ˆ a ) = 1/
x2 i
i
δ 2 (ˆb ) = 1/
δi2
,
1 . δi2 i
*- = $ 8: " 8: ) >#
0(* 5 C & @ $ " # $= F χ2 % > & ) y t (λ) = a + bλ
0 χ2 χ2 = (y − a − bλ)T V(y − a − bλ) ,
> V 5> '= / " B" ) '= V = C−1 @ $ > > F> y = y − a ,
χ2 = (y − bλ)T V(y − bλ)
λ ) ? $ ∂χ2 ˆ . = 0 = −bT V(y − bλ) ∂λ
8:
4 2&&
/& 6
8
#)> λˆ 8;: D 0 % *O ) $ > @ ) #) > ˆ − λ)2 ) , δλ2 = E((λ 8(: ˆ = (bT Vb)−1 bT Vy . λ
= (bT Vb)−1 .
% ) = > 0 H 5 $ " 7* = > " 0 $ # $= # 5 $= 0 F ?$ ) A & @ $ " # $= # 7 > $ $ #)> / 5 $ > " > #) $ 4 P$ $ C * + $ 0 = $ F $* $ Y) = P$ ?$ ) ? > $ ) ( 4 " #
/ $ 7 > > * F
$ 0 $ $
/& 6 '*& (' χ2 (' * '5(E ('
RR R − 9
− R RR
R − R '
− R − G *&&
R R R *! 9 − − R 6> 2! − R R B R R − A ! A *: χ2min + 1 ln Lmax − 0.5 A*&
+ $$ " ) $ = > A$ = F' E F ) $ $>
8
4 /& 6
> + ? * $ " % F> > F T " > %0 ?#) $ = 0 > $ P ) ) @ 0$ $ = F / " %# F $> $ E %# *- # $ 8! $ $ :
# !
5 %3
& B* ? 0 $ & $ %
$ 5 $ % #) $ >$ " > $" 7 ? > #) $ F> * $ #) $ = F
> / "#) $ & ># = +$ L = , > $0 $ = >
0 + ? / * 0 > " $2 = > +$ L
$ " , $0 = *) / " " $ > = > ? $ 66 ) 0 >$ " = > > %
B - ) " - = $ 0
F $ ! * $ EA $ ) - = > >
) & " " $ % " $ = " $ & 6 + " $$ & / " 0 A$ % " $ F> > *$ = > & 5 AC / 9 - = + $ $ / $ )0$ ) $ / " 0 5 F $ / " $ $ F $ A
!6
84
7 6
+ $ 5 ) # $$ " H " =
> $ > 0 = F ? @ ) F $ " F> ) % *O ) $ ' @ * E "A$ A$= $ $)$ ) 0 & > # ) 0 ? %# > > 9 ? $ +$ L $ ) - > > A$ > > / "$ ) C E = " = H % $ ) ) / "#) $ )> & > E# $ 5> KH = @ $ = ? $ 0 @ # )> P* ) 5 AC= @ )= G ?> $= * = 0 $$ / 5$ ) ) 5 ) )+ 0
F * 7 = > > 4$$= & D * 0 $ @ $
& %# > 0 ' + $ @ ) 0 & = B - ) " ) - = A$ > & = = C " E = " # $ 0
$ A > FA$ " / # ? = > #) * @ $ = > > ) # > E ) / $ ? = > $ 5 ) 0 * > * 5 AC $= >
/ " > 5 '
% " )= 5 $ F $ )
/ ? $ >$= F> " F $ ) & 5 $
) ? ) F $ $ ) A & 5 $ = > & g(θ) 0 & " F / P$ @ ) $ 0 E ) @ 0$ $ & $ " = F' = " $ L ) # & *) = = "# $ E " / " )$
7 A
87
+ E = )$ = > $ F $ $ ) = > > ? $0 U ? " F' % e1/2 U = E " # % $ ) $ = # $$ " & λ(θ) % θ = 0 5 ) λ1 , λ2 , θ1 , θ2 + $ $ λ1 = λ(θ1 ) λ2 = λ(θ2 )
1(& %. % ) $ & > ? $ 6 )$ = # E )
$ AC 5C " E$ E $ % " * + = & 26 " F' #= > > $$ / * ,# $ > $ δθ B 0 $ F' > = > $$ E L ) A$ + A > E$ E ? − ln Lp =
8:
1 ˆ 2 + const V (θ − θ) 2
# Q $ " ln Lp 1/2 * $ 6? $ " L θˆ 2
(δθ) = V
−1
=−
d2 ln L ˆ dθ2 θ
−1
.
+ * ,# $ * − ln L =
1 (θi − θˆi )Vij (θj − θˆj ) + const. 2 i,j
5> ' V > ? $ Vij = −
∂ 2 ln L ˆ ∂θi ∂θj θ
B" ) ' / " C = V−1 & !
* & / *
*&
(
* /& # *!
"!
! e1/2 ,! *& '5 && ! 9
(
!
* 48 S
> ? ,! 3@ " A (*& *
88
7 6
& > 7 = A >
A * = > 5 B" ) ' >$ = A * L $ $ D $ $ ? / * %# $ E
" C= > <* * $ = 0 $ & E$ E 4 > F' $ = A > + $ E$ E $ 6 ? $ F' #) 5> ' V ! ) = @ ) $ # $ 0 = " $ AC > ? 0 * 0 = $ 4#-$ - > E ?$ ? I @
$ > F $ " > $ $ J + / * % $ 0 > " $ ! $ ?> $ & ) #$= > E$ E 0 > + * & ># ) #)= ) "A$ 0 & ) + '* % F U > # U > = "A$ A$= )" #$ 5 ) & ) 7= $$ " > $ & 8 7 ? : / $ > * %# $ $
= * EA $ % $ ) $ $ = " > ) 7 % $
5 ) ) = " $ #)> % )> / "$ ) P$ = ,# $" $ $ 0
1(( 6 < & " > > E " # $ ) = ? $ & E$ E " >= "= > $$ ) ∆ ln L = −0.5 ∆ ln L = −2 5 ) ) $# ) = % E ) F > FA$ = $$ & # $> * E$ E ) ( * F $ E & > " ) E τ > = ) > E
7 A
N 1 −ti /τ 1 ¯ e Lτ = = N e−N t/τ . τ τ i=1
8;
86:
E 0 Lλ =
N
¯
λe−λti = λN e−N tλ .
i=1
% > #G" & " τ $
λ = 1/τ
λ=
0
Lλ (λ) = Lτ (τ ) .
/ ? E 0 " ) $ F> t¯ = 1 $)$ B
" τ = )$ 5 )> = + 0 Q $ E$ E ( )> 6 $ $ E 8 + : > $$ @ = % E ) = F $ ) = " = $ $$ AC % *O ) $ ) ) = ? $ A > 0 E * @ = E ) %0 F $ $$0$ = >
># = & H %0 & " $ F $ H % $ = # $> % $ ) )
+ +: & 8: $ ? E$ E ) F $ ' @ = / " F $ ) 8 = ># A$= > 0 ? $ / ) $> : & " +* B " E $ = ) ? > E$ E 0 λ
Ni (ln λ − t¯i λ)
i=1,2
F'
N1 t¯1 + N2 t¯2 1 = τ˜ = . ˜ N1 + N2 λ
;<
7 6
E ** * /& - 2 ?*! @ E ! ? @ "!
,
E$ E 0 E τ $ $ * + $ F> ) 0 '* & > " E = F' E #)> % $ ) = 0 > ,# $" $ 0$ E$ E = & = * = * 0 $> F 8? 9: $ $ = > = > > E$ E #)> %
7 A
(%* + " 7
;
% 8:= )
1 1 ˜ 2 + const . Vi (θ − θi )2 = V˜ (θ − θ) 2 2
$ % )> K $ = BY) " $ θ2 θ H> V˜ = V˜ θ˜ =
Vi , Vi θi ,
$ $> F C % $= > # $> * E$ E = > > F $ $ F $ $ $ $ & H $= > *> #)> % 0 F 0 F G $ ? 0 F $ % $ A > @ = ' B
E / % " > = E " % * ? ) ** ' 0 ? > $# * @ ' 0 $ E ) )> # − ln L(θ) =
1 ˆ 2 /δ 2 (θ − θ) ± 2
8:
% δ± =
1 ˆ + 1 δ− [1 − $ (θ − θ)] ˆ . δ+ [1 + $ (θ − θ)] 2 2
+ ? % > = 0 > * % = F> %
$ ) $ ? $ " +∞ −∞ $ )$ 8 ?) ) F> : = $ EA $ 0 F> % $ ) $ = $ +* $ * ? )= ?** ' E$ E 5C " + M(N 4 ) − ln L(θ) =
>
σ(θ) =
2 1 ˆ (θ − θ)/σ(θ) 2
2δ+ δ− δ+ − δ− ˆ + (θ − θ) δ+ + δ− δ+ + δ−
;
7 6 ˆ . (σ(θ))2 = δ+ δ− + (δ+ − δ− )(θ − θ) + θ − θˆ 0 >
σ(θ) , >
$ # =
" +: +" > " '* P
F> > " > = > = " > * > P " $ - ) B* ; * $ 0 $ @ = 7 * ># &
θ˜ χ2 =
˜ 2 /δ 2 , (θi − θ) i±
> δi+ )> δi− 0 θi < θ˜ )> θi > θ˜ )) / 5 AC 8)+ (Z: A N − 1= " > = '* = #-$ = & ) % *) ! @ ) $= '*
* > =
$ > % $ % S = χ2 /(N −1) 0$ S % $ θ˜ ) 5 C $ = )
'* F #) % #
<"E / & > E #)> $ )
θ = θ (θ) 0 $ 0 = > % * *$ = $= 7 E * = ) ˆ , θˆ = θ (θ) θˆ + δ+ = θ (θˆ + δ+ ) , θˆ − δ = θ (θˆ − δ− ) .
−
84 > θ (θ) > " $)= ? $ " θ ) " : $ $ # + $ % " ?$ $* = " $ 8 $ $ :
7
9
;
% # $ & E $ $* " $ = ** ' > A = "= & 0 $ 5 A C = H F < ) % $ ) ) $ ? " 0 $ $* & ) " !
)> $ @ "
$ $ AC > 1/N F A$= E ?$ $* E $ $*
$$ P* $ ) $> @
B* = ? ? +* - M6;N %0 % * *$ $ $ @ $0 @ $ = )+ ?$= % ) = %
K
! $ ) $ G ) = 0 ) $ D #) $ % ?>$ D $ $ ) % ? > $ B* & * ? ) 0 % F % 1 δ=
2
(δ+ + δ− ) .
F ?#) $ 0 > $ $ $*
$ U 0 E $ ?# $$ ?$ $* " $ $* U 5 )> )= @ $ ?$ $* >
$ $* , " $ # = > @ ) $> @ ) $ $*
8 ? 6= 9: & E " # $= " " / = A > % $ ) $ = # $$ " A * & 0 A *
? * F & #)> % $ ) " A * # $ = ?# $$ > 5 % 8#
1*& 6 < 4#-$ $ $ = F$ AC $ ) " = & $= $ - " " / % $ 5 ) * +* F $ E )$ 7 = F $
;
7 6
$A > $ '* > ?$ 7* \ E 7 ;(Z B - ) \ $ & $ 5 ) K $ ) > #-$ 0 P P $$ = > P > + $ ! $ " #$ %0 F * = " 0$ + $ $ $ 7 '* 5 ) & * = 0 >
= > * ) = @ ) = @ $ " F $ A$ = > = 0 * % $ = $ $ $ > # $ $ " > +* >0 5 ) 0 F um )> F G um +) $ um = (um )2 0 E A > A $ " = > > & $ > 5> $ F $ & 0 & E 0
)$ + ) & P {θ < θ0 } B - ) " C 0 5 ) θ0 θ L(θ) dθ . C(θ0 ) = −∞ 89: ∞ L(θ) dθ 2
2
o
−∞
! 5 ) > $ ) $ ∞
θo Cu (θ0 ) = ∞
C $$ $A >
L(θ) dθ
−∞
L(θ) dθ
.
8:
+) $ 89:= 8: 0
θ0
1*( F /? < '* P = -
= )> #C$= F> 5 ) 0 @ )$ = > > & )$ > $ > $ C $ 0 P 0 P ' λ0 ;( Z B - ) 5 ) # $ ) $ > > / $ E > k $ = $ 5 ) µ0 0
> $> C = 90% @ " , $ $ 0 µ @ $ P (k|µ) = e−µ µk /k! = >
7
9
;3
µo
C=
P (k|µ)dµ 0µo 0
=
e−µ µk dµ . k!
8:
* / $ # / $ A C = 1−
k e−µ0 µi
0
i=0
= 1−
k
i! P (i|µ0 ) ,
i=0
H 0 & ' *) µ0 OA +G EA $ 5 ) 7 ! "# $ 5 P * *) k = 0= > $ $ > / $ C = 1 − e−µo , µo = − ln(1 − C) .
%0 C = 0.9 + $ $ 0 µo ≈ 2.3 0 + > 5 ) 0 P ! $ = 4#-$ + $ $ %0 $ $ %# $ $
1** /
% '* $ = ! $ > b # > A = 0 >
8: * # > $> " k µ + b B - ) C µ o
C = 0∞ 0
P (k|µ + b)dµ . P (k|µ + b)dµ
/ $ A > ) >
k
C =1−
i=0 P (i|µ0 +
k i=0 P (i|b)
b)
.
, - & µ0 > 2.3 & ;<S C* * # &
> 90%
k > 0 &
*! :* 6
;4
7 6
O! 9 /* *(D E E ( ** 6 ?,! & e2 @
( * K 5 ) 0 P ! $
> )> ! $ $ = > )> $ $ µ 5 ) µ0 ;(Z B - ) 0 $ > EA $ 5 $
2
0.9 = 1 −
i=0 P (i|µ0 +
2 i=0 P (i|2)
2)
.
& µ0 = 3.88= + & = P µ $ AC 3.88 10 % %$ 6 )$ E 0 %# b = 2 b = 0 5 ) @ $ E " # $ ) $$ = ? " F' e−2 * * $ 5 )
, " $ )> > $ & $ %= & fb , fε ! $ ? )* ) ε $$ %0 $ µ & = k $ )
g(k|µ) =
db
dε P (i|εµ + b)fb (b)fε (ε) = L(µ|k) .
%0 + $ k E 0 µ 5 ) µ0 > , $ / $
7
9
;7
E ** *
/* *(" & B
B ( , : /
*! ;<S(9
9 & E **( 6
µ0 L(µ|k)dµ C = 0∞ . L(µ|k)dµ 0
+ $ $ F < / $ ( * K 5 ) 0 P ! ! $ ? )* ) + > 2 $ = > > ! $ * , " $ N (b|2.0, 0.5) F> b0 = 2 > $ σb = 0.5 ? )* ) ε $ , "
$ F> ε0 = 0.5 > $ σε = 0.1 E
L(µ|2) =
dε
dbP (2|εµ + b)N (ε|0.5, 0.1)N (b|2.0, 0.5) .
/ $ A > F < / $ 0 & " µ + " µmin = 0 µmax = 20= E > " " 8 ? : ? C > µ0 = + C = 0.9 @ $ " µ0 $ $" & , " $ * = > @
$ $ + $ +* 5 )> µ0 = 8.7 / ? 0 5 ) 8e−1/2 , e−2 : E " # $)
;8
7 6
, :$
*& E ** * *! /( & 1*, "# : F * 5) $ # + " = '* F $" F 0 7
/ % E )#$ & > ? 9 / $ 0 E * + $ +
%# α θ θmax B - ) C = 1 − α @ $ / * & 0 θmax + $ = > " * + > = % A$ > #)
$
7 %3
2&& / " '* ? )* )" = # ? * " A$ # F$ $ " # & A > * 0 $= " # ) 5 $ @ $ U > I> J @ $ U
S @ "
$ = " ? A $L > $ ?$= = > > > = " & $ = $ H % > $ & > " $$ @ $ f (x) 0 * 0 > = $ = f '* ?OA $ ) $ @ $ '* B* ; F ) " $ & @ $ * > = @ $ $ @ $ > & > *> P ) 0 $ " # ! $ = > > @ $= F $ % ! $ P )* * = @ $ * F* ) % $ ) 0 / %# = " # + $ " $= F $ '* " $ > = $ H ) $ $= ) 5 $ @ $ f (x ) # $ > @ $ f (x) 0 % $ $
& # * ( 6 # /*!
<<
8
A *
?*! @
A ? @ & f (x ) =
∞
−∞
t(x, x )f (x)dx
8:
) + % $ 7 t(x, x )= x & t(x, x )dx ) + $ / " dx x 0 " %# % , " $ " x − x H 0 $ C & |x − x | 8" $ + = f $ - : $$ $ / F > @ ) EA $ % / $ $ $ 8: $ F 0 $ " > $ * ! ?$ = {x1 , x2 , . . . , xn }= @ $ f (x ) = @ $ f (x) ) BA >
= > > 0 f (x) > S ? > % $ I J 5 $ P " f # $ " = " %
, !
,NH * ,* *
8
<
entfalten sMC
falten swahr
,
& & <S *&& ,NH(
% $ " 5 $ = > % $ / B 7 * 0 >$ %# * = + = > K* = $ > $ $ B FOA $ / H % ) 0 $ = % $ ) / " 0 > 5 AC = % $ t $ $ = > $)> $ =
$ )#) ? 0 f (x) ) " $ ? ? )$ )> " K $ " $ * $CA $ " @ $ K> K $ " $ ' " = $ # " $ )$ / " % @ $
** = % $ 4 G > $> / % **
> $= " @ $ > @ $ ) / ? 6 )$ $ * L (Z $ ?OA $ @ $ > F $ $CA
$ ?OA $ σf @ $ )$ $ @ $= > $ ?OA $ σf (Z ) $ $) > %0 " ?> $ δ= δ=
σf − σf , σf
<
8
, * & !
A
δ
<3< << << <<3 <<
σart /σf
<87 <4< < < <
# 0 @ $ *0 $ $CA $ E $ 2 σart = σf2 − σf2 ,
σart = σf (2δ − δ 2 )1/2 ≈
√ 2δσf ,
2 > σart G ) + $ ) % > ) 5C + σart ? 7 > = $ $ % #) $ ?OA $ " Z ) # 0 @ $
0 / > @ B* > = ?OA $ $ " ! 0
$ % > $ > $ K) >
@ $ $A > = $ = ) EA $ )#) # $ $ > A / %$ * > ) 0 %= @ $ % 4$ " $ * $ > 4$ )$ > ? C > >
$ @ * & = % $ @ 0 $= @ *)
>
2&( ' + 7 & ) / + i 4$ di = * θi > 4$ ? +) $ >
di = Tij θj , 86: j
> F ' Tij & $= $ + j > 4$ )$ + i 4$ $ > +) $ 6 $ 0 0 >
$> = ) & dˆi > *
@ $
8
<
ˆ
P (dˆi ) =
e−di ddi i dˆi !
" & $ %$ >$ > " 4$ + ) @
d ) & > 4$ = @ d 7 ' T = > $ > 4$ θ F ' " & 4$ $ " + = F ' T G = $ d = Tθ , θ = T−1 d .
8: $ > " = T−1 ' K @ $ = $ + > 0 @ $ = T T−1 $ K ># + > 4$ + $ $ & > *) % " ) 0 #)> θ. 0 * 0 $ @ $ > = > +) $ > $> d + $ dˆ ) . = T−1 d .. θ
0 % *O ) $ % ' Cik =
j
(T−1 )ij (T−1 )kj dj .
( * + %
$ = > $ = @ $ " $ > 4 $ + + $$ = '*) ) 0 $ > $ (δdj )2 = dj $ $ % ' A = > ?OA $ * T " $ ' > @ ' EA $ $ * = > " ? > $#)= ! $ ) + 4$ # $ " @ $ > $ * & +* ? 5 0 @ L " @ $ " )> > @ $ A > = > $ # = * =
'* ?OA $= 7 ) K) EA $ F ' " 0 @ $ F = > " % ' 0 $ > + 4$ " +
<
8
O *&& ? E @ ! ' 5 * ? @ % '= $ B
)> + >$ $ #= * ? " @ $ 7 > K) $A ? 5 > @ > = $ - > $ 0 +" > F )> = > 7 ' ) 0
2&* 8 7 & " $$ $ = > & Tij 0
+ $ + i " = > + j $ = $ H * )* A$= H F ' F $ > @ $= > H = 0
* + =
`i
`j t(x, x )f (x)dx dx , Tij = 89: Bin`j f (x)dx # $ $ " f ?# $$ # = > f
+ $ > %= > + 7 = @ $= $ C @ $ ) + > 4$ +
K) B
)> + Bin
Bin
8
<3
+ F ' " " K) " @
= + ) 0 = ) $ 0 + @ = 4$ = $ > = 7 ' $ @ $ > = # $> > @ $ 0 + F = P$ $ 8 := / = > @ $ " ) + $ " T ) > * $ $ = > &
" x = $ 0 $ > = x & 7 > @ $ $ = P > @ $ $ $ & $ > A & A 0 $ >$ $ $ 5 $ >$ / ' > 7 ' 0 89:= 0 F < $> / % 0 $$ > $ 0 $ > = ) F 7 ' 0 " > $= "
+ $ )$ = > $ AC = ' * $ ?#) $ )$= % ) @ # + $ ) %
$ > Z $
2&, C ? $ D $ $ $= " = $ - K) % ) 0 ) >
@ > = $ $ C -) % > 0 5# $" )$ 6 > % > 4$ * = + = > $*= > "
E P$ $ )> ) G ?> $ χ2 7 > 7 >
= $ % " $ > "= $ " ,# $
> % = $0 / > $ = > $ - K) ) 9 , $ - $ > " 7 ' >
0
<4
8
& > F 6 9 # 5 $
$ F > $#) > " $ D 0 $ > P ) - M= 6N " > P$ $ Rregu = Rregu (x) = r
d2 f dx2
2
8:
,
># B 0 $ P$ $ r # P$ $ / 6 @ $ E > P$
$ Rregu ) + $ χ2stat G ?> $ χ2 )> ) $" E$ E χ2 = χ2stat + Rregu , ln L = ln Lstat − Rregu .
F $ χ2 ? " @ >
@ $= 0 > $ P$ $ ) 0 = % + $ " #$ + $ $ > "
> = P$ $* r )$ 7 % ! 9 !
2(& 5 > $> + > 4$ ) = $># > = E 0 + $ ' > + $ * " = E$ E 0 + $ 8: + $ ? $ ln Li = dˆi ln di − di = dˆi ln( Tij θj ) − Tij θj j
j
0 $ 4$ ln Lstat =
i
⎡
⎤ ⎣dˆi ln( Tij θj ) − Tij θj ⎦ . j
8:
j
#)> θj % > 0 F " # > EA $ ) /
8 * G *&&
<7
5$ ) ) F ' " A $ A $" & & * = 0 > K) = > )
7 Lstat P$ $ Rregu ln L(θ) = ln Lstat (θ) − Rregu (θ) . 8: %0 E * P= + > 4$ 0 / $= E A $ P$ $ $ EA $= F ' " #= ) $"
+ $ ) E * $ χ2 ? * $ " > > χ2stat =
M N (Tij θj − dˆi )2 , Tij θj i=1 j=1
χ2 (θ) = χ2stat (θ) + Rregu (θ) .
2(( $. C & > B* 9 $ = $" E$ E B % )>
$ ,# $ #G" ) χ2 @ χ2 ≈ −2 ln L + const .
$ EA $ 0 * & " χ2 F $ P$ $ B + $ > * @
$ $ E$ E ># B/2 M inimum(χ2 ) = M inimum(χ2stat) + B , M inimum(− ln L) = M inimum(− ln Lstat ) +
B . 2
?# $$ " ># P$ $ / " %# "= % B ) = > *
2(* ; / + \> \ 4$ = C $ * # > = '* ?OA $ $* > $ = > ) ># " +
<8
8
4A 7 / " $$ +
" #) F $ $ U > # U 7 ?$ $ " $ > $ = $ " + )0 = + ) ) $$ $ 5 = / " 4$ ) ># = > E ? * $ $0 > * > = $ AC ) ># = F* > $ $ $ @ = $ - ) $0 >
2(, ) C %0 4$ B + + ** ' >
B−1 Rregu =r (2θi − θi−1 − θi+1 )2 . 8: i=2
P$ $ r $ # P$ $
? $ " 0* B 0 $ % > 0 @ $ > = 8: " + )* % 8: > ?$ 0 "A + $ C / + 4$ $ $ 4#-$ = " > $ $ C = P$ $ 8: > $" * $ - ) $> > Rregu = r
B−1 i=2
(2θi − θi−1 − θi+1 )2 . δi2
8;:
4 δi > $ # & θi
* " + $ * + * = $ > $ δi # $> ) δi2 = 4θi + θi−1 + θi+1 .
& $ @
$ > =
% $ ) 0 $ & 0 + $ E + 4$ $ ) $ P$
$ $0 > = ?> $ H + " F > , > 8: >
8 * G *&&
<;
G *&& ? @ & G ( *& @ *& D 6 # !@ D ?O
D ,!! 8@ / ? 9 > $ P$ $ > 4$ " $ D $ $ ?$ $ " $ $ > ? = $ P$ $ $)$ ? 9 " L )
P$ $ E > " = E *) $ 0 0 L$ 5 0 $ = " 8: > P$
$ ) " > = ) + > = $ % ? B 0 $ 4$ ) 0 = ?> $ " > % 4 $ $ > $ 7 θ = θ0 + τ ,
> θ0 > $ * " τ $* $ >
2(- ' & > $ = A Q $ @
$ ) $ C Q $ > @ $ 0 = > >
)#) H " # $ , F * " I * * J !
> $ ) " = > " @ MN )
F ' " > = ) $ " 4$ $ M9N > / " * > $
<
8
+ H / > > 4$ -) = D $ " 6 " # )$ = @ ) F' E EA $ 8 P$ $: " $ > = , $ $ > $ = $" + > " > $ $ > F ' " = *" & > )> > $> = K) > $ $ = >0 > $ $ AC " / P$ $ $ ?
/ G ) ! " ? $ $ ) - = )> &$ & H E 8 χ2 : G ) > $ = > ln L B/2 " F'> = 5 ) " / #= > 6 F 0 '*) P$ $ > 8: =
H> 8: / > F' E $ F > " )) & > @ " #C$ +* 0 / ? )) $" $ 0 > 4$ > $># + ? > $ 7 ' = $" $ * @ $ 0 L $ = > #$ 0 + R) " $ @ $ '* @ $ D $ = ) + )> + $ @ $ % 6 ) $ ? ? @ $ > % 6 *) C > ? * 4 >
) > @ $ 5# $ @
& $ " #$ = >0 / )
"# $ B
0 @ * $ 5 $ @ $ d(k) / k > > @ θ (k) (k)
di
=
(k)
Tij θj
.
j
B* Tij θj(k) > dˆi /d(k) ?$ $ j i
8 * G *&&
6 "
@
!@ " 9 # * ! *! ( @ : ,
:*: # *!
* @ (k+1)
θj
=
(k)
Tij θj
i
=
i
dˆi (k)
di
dˆi
(k)
Tij θj
(k)
l
.
Til θl
$ " @ 0 $ +*= >
E * $ 8? 9:= )$ ? , / ? * $ * , / )$ K) , 6 / $ >
8
2 * * ( G *&& & & , *&& 2(0 C 8 7 & +) $ d = Tθ # 7 U += F ' D $ D = UTU−1 , Ud = UTU−1 Uθ = DUθ .
$ " D λi / > 4$ $ ) F*
B* > 4$ Uθ $ > (Ud)i = λi (Uθ)i .
, A > +) $ B* > @ OA ' 5 U 6 & & ! ' * EH (
det(T − λE) = 0
8 * G *&& (Uθ)i =
(Ud)i . λi
5 $ $ 0 > $> & > " > = #)> θˆ= ε " > $> >= dˆ = d + ε ,
> @ $ θ ) = ˆ 9 i = (Ud)i = (U(d + ε))i , (Uθ) λi λi
> ?> $ ε $ > $> & A F ' $ = > $ > λi < λmin D 0 = * B* @
$ $) >
ˆ 9 i = (Ud)i (Uθ) λi #)> θ.
> P0
9 . θˆ = U−1 (Uθ)
? $ > = λmin = * ) = > " $$ = + #$ #* @ @ H " & P$ $$ AC λmin $ > $ > F EA $ P$
$ > $ 4$ " $ = %# χ2 > & " χ2 $ EA $ A $ H $ $ + > #-$ > 4$ $ $># )> #C$= = >$ ?OA $ 4$ ) P )) 7 ' $ & 8: > = > G F ' T+T = " > T+ d = T+ Tθ , θ = (T+ T)−1 T+ d .
& 0 ) ? 0 ) $ > F ' T˜ @
d˜
˜ = T+ T , T d˜ = T+ d .
, 7 > " >
8
7 + (
+ $ @ > + $ $ $ > @ = #$ $ 4$ $ $ ?> $> > A +* + $ /* $ $ ) $ " 0$ = /*
> A
2*& ' " @ A > # & + $ MN ) 0 > @ $ f (xi ) !$ $ H + $ xi #) )> FA$ $ + $ $$ / " xi = " / " / " > ?OA $ * 6 * * ) / " E# $= # N = ) + ( ((= , #= > N " + ) " ?OA $ $* > ? > % f (k) (x) / k > @
$ f (k) (x )= f
(k)
(x ) =
t(x, x )f (k) (x)dx ,
> " $ > ) > H xi > @ $ * *$ f (k+1) (x) =
i
t(x, xi )f (k) (x)
1 f (k) (xi )
.
2*( + F 7" = > B* ; 0 > = > FA$ = @ #$ )> @ $ G " ) & A F < + $ = >
> & @ = $ > = @ $ U '* @ $ $ F < @ $ U F $
* @ $ > F < & @ $ MN / ) $ > $ C " & $ @ $ ?** ' 0 > @ $ / )$ > F < = > > & {xMC , . . . , xMC > ) 1 N } $
8
3
$ @ $ K " & ) H & xMC i 8E$ : {xMC , . . . , xMC i1 iK } $ ? C # F$ * $ %0 $># i K xMC > 7 ∆x $>0 = i > )$A $ E$ " xMC → xMC + ∆x, xMC → xMC + ∆x & " $ $ i i ik ik E0 E1 " 7 / $ E1 E0 > @ $ = >
0 $# $$ & ) @ $ $ $ = $ F = D $ )> F $ * F$ ∆x $ )> #C$ > @ $= + = > $ AC FOA $ ? @ $ & * @ > $ 5" $= P ) 0 5 ) 0 ) = ) + , " $ $ $ " ? # $$= / $0 $ & > ( * $ + ? )$ )> ? > $ + > K $ E = )> , " $ $ > / F < > ) H > + * k = 25 " $ ?OA $ E ? $ $ # + ?$ 0 " >$ F < % K ) +$ ) $ R ?$ > 60 '
?OA $ 0 = N $ = > FOA $ " σf )
1 1 + N K 1 1 + = 0.24σf . = σf 60 25
∆x = σf
/ F$ FOA $ ? )* ) > # + $ $ P$ 0 / ? 0 H F$ @ $ E$ ) $# & xMC
$ > xMC i ik Y) = ? * $ 0 * $ C " F$ )0 K ' ?OA $ $= P$ $L +*√ FOA $ σf K = 16 ?$ $ σT = σf / K = σf /4 & @ $ > F' #= A , $ / % >
4
8
& & ' * F $ $0 > 8 ? 96: > xMC $ $>#= " )$ & $$= > ? )* )" 0 $ > FA$ $ + $ K & xMC ) > & xMC A$ > = > ? )* )" i ik " = K0i @ * > xMC 5> wiMC = K0i/K ) & "
i $* ) $ $> P MN # $ + $ F$ " 7 ( (
& F ) $ " 4$ )> $ @ E ? * $ > 4$ B 0 $ $ $= 6 F* 4$ " " $ 7 '= " $= 9 "= $ $= F$ "
83 A !6
7
@ * 0 $ + ) FA$ = P$ $ *)- )* ) + P$ $ 0 " + 4$ 0 "
4$ ># )> @ # $$ " % ) @ $ # $ " 7 ' @ = # $$ " H " + ) O0 , = + > 4$ $ > > = > $ #$ @ F )$ = )> @ # 0 $ > 7 ' $ = " @ ,= " + ) $) > 0 + + $ @ = O > 0 + $ ) " > = $ > ) $ = $ B > $ $ > A F$ " > @ 0 $># > $ + $) = @ > $ + $ C )> $ @ $ " F ? > $ )$ $ C ! $ 7$ ' " # 3 (
? * $ % #) $ = @ A 0 0 % * *$ > & P$ $ " $ $ 5 AC % # $ " # P$ $ = 0 H " 5 $ $ U +* ? " = $ @ $ % >= @ $ "
% $ 0 A = @ $ > H / " & % $ = # $$ " F * & = + $"
% 50 ? * $ # $ $0$$= > > ) + 4 $ A / , * "
$ P$ $ > = L ) A$ > = > #$ & = > +* P$ $ ; # $
8
8
! & ?*! @ ? @ D ( - 9H> A 6 * "6 D ! ? ; )) P$ $ >
%# % * ) " $= )> & % = = ,# $= % " P$ $ # $ = # $ C - %0 H > > $ @ #$ $ ! + ) $ = > = ># 0 H + $ = ) > > + $A $ N + $ > * $ $ > + $ + > 0 % *O ) $ + 0 $ $ $ ? * $ ? > + j > Tij θj = dij + $ $ + i $ > $ " dij $ ) dij + $ " dij ) θj * * ) 1/Tij =
83 A !6
;
D C* * ! !
9H> A "6 D ! &&
& D
* * A ! ! ,NH
<
8 dij , Tij i dij . δ 2 θj = α2j Tij2 i θj = αj
" + $
dij dij δ 2 θj = / θj2 Tij2 Tij i i
2
.
, > $ $ * $ FOA $ )$ & \ ) \ + 0 H F* ? ( )$ $ 0 )> " P$ $ $ &
$ % > P$ $ = B " " #$ P$ $= 7 B 0 $ 0 $ > $0 > B " $ = % > 7) % ! . !
/ B ?* % = * " + $ > / % )> #C$= * + ) ) + $ ) ? @ = ? $ = A $> > E χ2 ? * $ " $ $$ 0 P$ $ 7 ' @ = $ C F ) " > 0 > F = *" = > " $ 0 T# $ $ B
FOA $ # * E = A ) B $ 7 " > >
20& '" + #-$ L % $ 7 * + " $ ) $ ? ) + 8': = @
F ' " " > a ?
P$ * A $ F $ 8) + : B + ? %
&" 7 % 0 $#$ $
84 * ": * "
> = $ " %$ K) ) " 4 @ = & F' $ * = $ + $ $ ? * S @ $ pi , i = 1, . . . , N - S=−
pi ln(pi ) .
*$ L $ # - " )
+ $ 7 = T =
/ )> , = > ) $$ $ > / + > ) %$ $ " > $) S FC 0 #$
! $= 0 = $ * F' 8 $$ , $ $ : ) %0 $* > % )
4$ N + $ + + $$ #$ n = n1 +. . .+nN FC 0 #$ L ? ) A A$ @ $ " #$ )> " + H )$ ) D $ $> wi→j = wj→i 0 ) @ $ = A ) >#= > 5" $ # ) $ A=
nn n! ≈ n1 , n 1 ! . . . nN ! n1 ...nnNN
> " $ ,# $ n! ≈ (n/)n " > > 8 ) nib: * $ - = pi = ni /n= S=−
pi ln(pi ) =
1 ln A , n
* * ) E$ A$ @ $ F' * 5# $ > = 0 = $ ) P$ $ )) & χ2 = χ2stat − rS ,
> r > # P$ $ $ + + $ * ) > & pj #$ θ
j , j = 1, . . . , N 4$ 5) n = θi %0 7 = D $ & dˆi $ $$ 7 > & 7 ' Tij = > 5C ,# $ MN
( j Tij θj − dˆi )2 θj θj
ln . χ = +r n n j Tij θj i j 2
8
7 ) + = ) E $ 0 $$ $ > & ' * ln L(θ) = ln Lstat (θ) − Rregu (θ) ⎡ ⎤ r θj θj ⎣dˆi ln( = ln . Tij θj ) − Tij θj ⎦ − 2 j n n i j j
/ ? > R ) 0 $ * > > *) $* D - P MN= ? $ P M;N P$ $ ' * " 5" $ F $ $$ = ! $ > + ) 0 ! + # $$ " ? + 0 ? > $ 7 * $$ % $ )$ B
) P>
% &
: %3
$ ) = $ - ) $ > > %# $ @ " / * ! $ , , > >
0 > 4* $ % $ $ / F > S 4 F# $ $ +$ $ R $ S / / $ )G $C" S / , > $$ 50 % '* $ & > E 7 = > > = @ $ '* = 50 ) "= ) + !
$ $ F > $0 & $ + 0 ?> $ )> " @ $ & > @ $
? ; = > > = " '* " $ > % $ & A >
?> $ G -) S %0 ! $ )> " 4* E " # K ? " ?$ 0 50$ " 4* ) = > > $ ) +* F &0 > ) $> / $ 4* " = > $ #C$ &0 " S / 7 G ) #-$ > ? = &0 = $ ? G ) " > H >
,
# 9
; "
5: & G *&& ?;3S 5:*
( : 3S 9
@ &
5:*
& " " 4* = )> '*) + $ )$ > = D $ $ OC ? &0 > 0 A$= = $#C$ %$ 9=======6==6 & $ 7$ AC = " > = 0
,* ? " A$ @ $ $ H IJ 7$ AC= $ > ? " *)-) A , > > > 0 A$ ? " > = A > $$ 7$ AC * 7$ AC χ2 @ 0 $ % = F* " $$ % " = > B* F T ) $ * > = χ2 G ?> $ F ?> > 0 ) $ C & " χ2 . $
> > $ L = > > 4* " $ / χ2 " # #C$ $ C= & $ C= > ,* K $ 5 ) $ > H 7" 7$ AC 8 7 : V - = @ $ f0 (V ) 0 ) 4* H0 % @ $ 7$ AC 8) + χ2 : > $>#= & 0
$ = " 4* A$ " f0 (V ) >
> = & " V $ D
;
3
$ ,* 0 8 $ 7 : '* & V˜ > f0 (V ) " $ p &
= 50 D $ G -) p & % $ 4#-$ = " $ $ $ '* $ AC & ) - 5 AC p C $ - ) " > 0 > + α ) , - $ : ; α = p(V˜ ) = P V > V˜ =
∞
˜ V
f0 (V )dV .
& p = D $ = > " 4* P$ " $> $ C & " V @ > +* χ2 @ $= >
C * > = & ,* )* > = > p > pmin $= > pmin " $$ > = * " 7 F &
1 − p > 4* H0 " > = > ) L= ! )7 = ! +7 = = > H0 )* > = > H0 ) L $0 $ = " 7 ) * = > p & > = $ " > & p & 0 * 0 p
2 =&% & / / 7 ( * p & & 4*
/ ? ;6 > )> @ $ )> '* A 5" $ S %0 '* B + $ 5" $
"A$ >$$ + '* A 100 + $ > $= ?$ ) ? " = > ) + $ @ $ = > B " # $ A 50$ 4* 5" $ '* B $ > '* A R %# p & # = p ≈ 0.08 ?> $ " 5" $ %# > $ $ - ) ? > $ - ?> $ & 0 50$ " 4* = 0) / ) 0 F + $ " ! $ /
+* > $ = ! * $ " @ $ $ ? > 45% '* A 5% '* B B $ 10000 + $
& & C*&*** ("& * () &
4
; "
2
& 6 p( !
,& * 9
(
E " > , > C χ2 7= > 0 " ? > $ #$ 7 ) @ 0$ $ ?C
> ?$ χ2 7 #-$ 0 #) ? 7= > B$ " " 7= "
> > 0 / " $ χ2 7= $ = ) 7 $> ' ?> $ ) * / $ @ $ 4 $ " @ $ # , " @ " @ $ $> $ F $ $ $ *) @ = D $ " *)- @ $ > , = 5 = '* " $ ) 0 * 0 F 0 " $ + $ > @ = @ $
7$ AC # $$ " ) ,* = C & )> 4* E) = + $ > @ 0 %# $ $ ? ? A > = $ $0$ 4* 50= 50$ )> = )> "A$ 0 • & A$ ?> $ * > = "= * % ) + E " ) = 50 )0
; χ2 ( ) &
A*&
7
& '* @ $ * 4* > = 50> )
+ $ " % " " > > $ D 0 50 - P M9(N= $ 7
•
: & χ2 ; '!
3(& χ2 + > = N & xi @ x $ ) @ $ f (x) 0 @ $ @ $ $ > B / "= > / " k + pk 5" $
pk =
f (x) dx . k
/ $ > 0 k / " + $ $ dk ) " $ > $> N pk ! ?> $ dk − N pk > ) A = 0 > 0 $ = > $ C ) > G ?> $ δk2 ># = > @ $ ) # & A = @ $
$ + F " $ $ δk2 = N pk (1 − pk ) .
/ P$ > $ * 10 50 + " = & pk $$ > $ #) B >$$ = > ,# $ + " $ * G ?> $ $ + > $ δk2 = N pk .
& > G ?> $= 2 χ2k =
0 B + χ2 =
(dk − N pk ) , N pk
B (dk − N pk )2 k=1
N pk
.
?$ B > > F
8
; "
χ2k ≈ 1 ,
χ2 ≈ B .
& 5 AC χ2 > $ AC + = > F $ L $ - " @ $ $ - ?> $ ) & χ2 << B > = > > = " 4* & " χ2 H0
3(( χ2 χ28 & > > * #) > @ $ " χ2 $= > H0 $0$ = $ ,# $ χ2 −@ $= > ? 6 " $ = ? 66 $ ,# $ ?** ' @ $ + $ * + , " $= + $ $= > ( #$ * + $ 0 ! F $ + B = > @ $ + $ >
χ2 = F = B − 1 .
> $> " χ2 % B − 1 B = > > *0 $ $ & *= ) ?> $ F > U
> = > + " $ @ $ $ # 5 ) + ?> $ 0 F = & '* @ $= P = = % $ > $> " χ2 0 $ B & - $ χ2 & ) ) $ > 2 χ @ $= % $ $$= # $$ " = '* & χˆ2 )> + %# + = ? ;= χ2 & p(χ ˆ2 ) $ 4#-$ = 50$ @ $ " $ = '* & " χ2 > =
$ AC = # $ = # χˆ2 & " p=
Z= Z @ $ $ '* + = ) $ & " p 0 = $= + $ $ 0 $ ? "A$ = #-$ 9
χ2 (
9 %6 * #
) H>
'* ( 0*(" & * ! && 2
6 ! !
; χ2 ( ) &
A*&
;
χ −
*! χ. 2
2
χ2(9 A * 2 A
& & " ( /&
<
; "
F # )$ $ 5 χ2 @ $ ?*0 " ! )# $
F $= '* $ $ ? ;9 )$ $ )> χ2 5 )> = % $ $ - ) " χ2 @ $ > ) 7= > > + $
)* = > χ2 & " $$ & 0 7 > - " 1 $ $ $0$ P$ = > χ2 &
)* > = > A $ = > " $$ 5 )> $ 4* " > > = % ? α = 0.01= Z %# $ + $ χ2 & $ * % ) $# $ 8 ? ;9: %0 $ C ? ) " % $ = > F > 20= χ2 @ $ , " $ $ $ # > = >
√ F> x0 $ F + s $ 2F p & A 0 / $ , " $ > 0 $ E 7 ? " ) + $ <* * $ > F F* $$
3(* +: $ + A > F> L = > @ $ " $ = > G ?> $ @ # 0 = * " F> > )+ B F> yk = @ $ tk $#) F δk $$ = A > $ > > 5 AC χ2 & χ2 =
B (yk − tk )2 k=1
δk2
,
> χ2 > χ2 @ $ $= 0 F = B % $ @ ) $ > = F # $> " = F* $ C = 5 )> ) ) 7 $ ( 5 AC δ2 ? >
= + $= $ > = $ = F $) > & *> F$ AC % δk = * * ) F> yk = 0 δk &
; χ2 ( ) &
A*& δk = δk
tk yk
)) F = ' & " χ2 * # > ! D #) $ %
3(, ) %0 & 4$ " + >
$ $0$ P$ $ > H ) = ) $ C " + χ2 7 ?$ " & S ?> $ " @
$ A > = > > $ + ?> $ 0 + ) B ) $ C ># + ?> $= 0 $> + $ N0 #$ = D ) N + $ 0 = $ D 8
@ : εN0 + ? $ + B + > 0 χ2 F
(N/B + εN0 /B − N0 /B)2 , N0 /B
(N/B − N0 /B)2 + 2ε(N − N0 )N0 /B 2 + ε2 N02 /B 2 =B , N0 /B N0 /B + ε2 N02 /B 2 , =B N0 /B
χ2 = B
= B + ε2 N0 = χ20 + ε2 N0 . 2 $ - ) S = ?> $ " > $> √ χ0 = > > $ 2B
B
N0 S = ε2 √ . 2B
& ) + % / " "= > ?> $ ?$ $ > = + # , > @ ?> $ = ) + ! $ , # " F$ # = $
>$ + " )) / E M9N > " $$ = + B = 2N 2/5 % $ AC N ) >#
; "
)
χ ( A("
( 2
:
χ2 # 3< χ2 # 3< χ2 # < χ2 # < χ2 # < χ2 # < χ2 # 3 χ2 # 3 Dmax W2 A2
) p(
<<
# : <<3
<<8
# : <<7
<<4
# : <
<<<
# : << <<<3 <<< <<<<3
( * @ $ " 7 ! $ '* "
$ / ? ; > '* " $ " $ # = @ $ $ = ? $" $ F
7 ;= $ χ2 & 0 = > $ " + $ - > @ > " $$ = +
+ ) ># = $ * + /
7 ! $ * 8G * : $ ) , $ $ @ $ $ - ) & χ2 5 AC # $$ " @ ) ?> $ & H $ + 0 8
: @ $ $ = > 4$ ? ; % = / ) 0 * )= 4$ = $ & 0 χ2 @ = > $ " B
)> + 7 $ = #-$ + $ 4$ @ $ > $" 7 ? " @ $ " ) > = > 0
H + χ2i @ ) ?> $ " $ *
( * χ2 @ $ 0 )>2 4$ / $ 7 χ & @ ) " 0 )> 4$ $$ ? ?> >$ P > $= P >
; χ2 ( ) &
A*&
!
G *&&
χ (
2
G *&& ( &
!
( !
C*&*** () H>
? $ " ?> $ *" P $= %
χ ( & *
& * G *&& 2
\J 3 4 7 8 < (<3 (< 4 ( < (; <3 (< < ( 3 ( (<8 < < ; < <7 (<4
3(- χ28 6" / P$ F $ D * 0 $
7 = $ = $ NP = $># > = + $ A$ $ = ?> $ χ2 / ' = > F*
+ 0 = > ?> $ F )$ = χ2 7 " % $ $ $ > $ $ $ = F> F = B − NP
; "
& # = NP $ = > '* @ $ @ $
3(0 χ28 & #$ * 4$ = ,# $ " > $ $ $ / $ χ2 @ $ ) + $ p & " > > 7 ) % > " G ?> $ χ2 7$ AC " > > @ $ f0 (χ2 ) F < > 50$ @ > #$ : & - !!" 3 9 !
& > $ = E " # >$ 7$ AC 0 @ $ " 4* " 4* = > %0 50 # & E L = i f (xi ) 0 $$ @ $ f (x) " > = > + $ xi F' " f $ = E '= D $ & A E " # 50 " > = > > + $ ) 4$ ) E 0 H + & * $ $ = E χ2 F $ C " #$ * + #G " = H E * $ " )) 50 "= E 7$ AC ) " > & 0 + i @ $ ti $ di '* #$ " = > 8 B* = ? : 0 7$ AC V = > E$ E $) V = ln L B = [−ti + di ln ti − ln(di !)] . i=1
& , $ = % @ $ + $ @ $ " $ > =
@ $ F " $ " > > $
f # * L !
&# J ! 9 )
; C*&*** ("& * ()
3
&:
* S(x) &
( * F (x) V = ln L B = di ln ti − ln(di !) . i=1
@ $ 7$ AC 0 F <
> / F < $$
* $ $ > : & 0!!!!!;
$ $ / " > 0 H " E 0) '* % = 4$ ) ># = A$ $ + $= $ = 0 > $ 7= C @ = > = " / B$ " " 7 > @ $
x
F (x) =
f (x) dx −∞
* '* 5 AC S,
4
; "
+ $ xi < x , 5) " $ $ AC ?> $ D 7$ AC " > S(x) =
D = sup |F (x) − S(x)| = sup(D+ , D− ) .
5 AC D+, D− ) ' *" )> $" ?> $ S(x) = '* ,# $ @
$ C / 8 %= $ & : 0 +* ? ; $ @ $ F (x) " $ + $ > $ & $ = xi < xi+1 S(xi )
+ + $ x & $ xi S(xi ) =
i . N
& % χ2 5 AC A > )* > > @ $ " D = % = p & %0 √ ) N 8N >≈ 100: ∗ p & % " D = D N %0 $ ) $ AC √ √ 6( D∗ = D( N + 0.12 + 0.11/ N ) $ ,# $ % p(D∗ ) ? ; $ B$ " " 7 ) ># ) @ $ = @ $ )> $$ $ > $ " ?> $ P# B$ " " 7 @ $ > = >
?> $ 0 $> + $ > $ *- $ - * ) $ # 5 " / ? ; 4$ $ D #$ + "
F B$ " 7 > %# = ?> $ = " @ $ + $ + 0 = > $ 7$ AC = > @ $ 4$ > % # )$ > = F#$ 7 " ? " ) H0 # $ ?> $ " 5" $
? $ > $ " B$ " " 7 =
? $ " ? $ 7 8 : :$ ; ! +
$ P > $ 7 M9(N= " %# >
$" B$ " " 7
;3
) *
7
A * C*&*** () H> D ∗
3-& 8 9 $
! +< $ " > 7 ?> $ V = D+ + D− * @ $ S " F 5 AC " 0 7 " @ $ I B J 5 @ $ = ? $ $) = > ) + ) & " $ = $ + $ $ / " [φ0 , φ0 + 2π] $ φ0 > A ? G L ) )> F S 7
<
" F % <
" F 7 " > 7 ∞ 2
W2 =
−∞
[(F (x) − S(x)] dF .
8
; "
+># " 7 A2 " = U 2 "
0
[S(x) − F (x)]2 dF , −∞ F (x) [1 − F (x)] 2 ∞ ∞ U2 = N [S(x) − F (x)] dF dF , S(x) − F (x) − 2
∞
A =N
−∞
−∞
B$ " > 7 0 $ 7 " ?
> ># ) @ $ & 7 >
*) 0 @ $ B > > $ % + *) = " H = > $ 8/7= $ && : 0 ! +$ L " $ 7 @ x @ z = F (x)= [0, 1] $" %0 @ $ S ∗(z) >
∞
2
[S ∗ (z) − z] dz , z(1 − z) −∞ 2 ∞ ∞ U2 = N [S ∗ (z) − z] dz dz . S ∗ (z) − z − 2
A =N
−∞
−∞
& 7$ AC > = > ? $ 66 $)$ * @ $ ) $
3-( %# + 7 > = = " 4* A$ $ % * ) 4* H0 > = & $0 /7 z = F0 (x) 5" $ " z [0, 1] * $ @ $ > '* %
gk (z) = C exp
k
θi πi (z)
i=0
$) πi (z) / " [0, 1] = > -) = E$ π0 (z) ≡ 1 , √ π1 (z) = 3(2z − 1) , ... ... ... √ πi (z) = 2n + 1Pi (2z − 1) .
;3
) *
;
8Pi (x) E$ 0 - : & θ0 = 1 $$ C = C(θ) , $ @ + ) ) ># k= 5 $ ) KL $ H0 θ1 = . . . = θk = 0 = #G" )=
k 2 θ i=1 i = 0 + $$ {z1 , . . . , zN } = {F0 (x1 ), . . . , F0 (xN } $ E
⎛
L(θ|z) = C N exp ⎝
k i=0
θi
N
⎞ πi (zj )⎠ ,
j=1
)$= ti = Nj=1 πi (zj ) A* #) $ 0 θi 8"$ : $ = 7 5 AC ⎛ ⎞2 k k N 1 1 ⎝ rk2 = t2 = πi (zj )⎠ N i=1 i N i=1 j=1
) ! H0 $ 0 i > 0
ti = N πi (z) = 0 ,
>
1
0
πi (z) dz = 0 ,
1
" (ti ) = = N πi2 (z) dz = N . 0 ?√ " N $ AC = 5 )> )= ti / N 0 $ C N " > $> @ ) ? 5 K $ # πi ti
%0 rk2 $ * χ2 @ $ k % $ 8"$ 6: %0 N @ $ " rk2 *) & A H = > = F < $> @ > 7 χ2 7 L & " k * > $ P > +
t2i
3-* ' * $ 7 = C= " @ $ # & 7 $ ? = ! " )> @ $ f (r) f0 (r) n P =
<
; " φ=
1 2
dr
dr [f (r) − f0 (r)] [f (r ) − f0 (r )] R(r, r ).
8;:
) > R ? % 1/2 0 >
= > $ % ) " %0 *) % R = δ(r−r ) > $ G ?> $ 1 φ= 2
2
dr [f (r) − f0 (r)] .
8;6:
& > H )> @ $ = )> A @ $ f )> f0 = " $ ) $ > " $ ?
; = " K " 0* & # % R $ = % ? |r − r | F 0 f ≡ f0 % 8;: R = 1/|r − r |
$ " )> E $ f f0 $ 5 $= $ E $" ) /
$ F = > E $ 0 = E $ @ ) $ ? 5 ? $ ) > φ %0 > E$ R(r) = − ln(r) 5 R(r) ∼ exp(−cr2 ) $$ 1/r & *) B 0 8;: {r1 ...r N }= B {r 01 ...r 0M }=
1 φ= 2
dr
dr [f (r)f (r ) + f0 (r)f0 (r ) − 2f (r)f0 (r )] R(|r − r |).
8;:
F < / $ ? 5> R(|r − r |) M @ $ f0 (r) N @ $ f (r) $ >0 {r01 ...r0M } )> {r1 ...rN } ?** ' φ≈
1 1 R(|r i − rj |) − R(|ri − r 0j |) + N (N − 1) i j>i NM i j
1 R(|r 0i − r 0j |) M (M − 1) i j>i 1 1 ≈ 2 R(|r i − rj |) − R(|ri − r 0j |) + N i j>i NM i j +
+
1 R(|r 0i − r 0j |) . M 2 i j>i
8;9:
? " A > $ " = > 8;9: " > $> ? L = $#) > & " φ 8;9: #)>
;3
) *
$ 0 )> = @ $ f0 f $)$ 5 $ ? 8;9: A > 7 " > '* A > F < ,* " $ f0 " $ $ $= $ C
& D $ H0 ! # $$ " > $ B ) = ># > M $ C $$ N = * M ≈ 10N 7$ AC $ φ ) 7 φ1 , φ2 , φ3 ) = &> $ = &> $
,* ,* * $ φ = φ1 − φ2 + φ3 , 1 φ1 = 2 R(|r i − rj |) , N i<j φ2 = φ3 =
1 R(|r i − r 0j |) , N M i,j 1 R(|r 0i − r0j |) . M 2 i<j
8;: 8;: 8;: 8;:
7 φ3 # $ " = > P$ $ = > $ ) ) ? R # $ " ?# dij = |ri − rj |
* " = )> " ?# * " ,* +># = > ># = Rl = − ln(r + ε) , 8;;: −r /(2s ) Rs = e . 8;(: *" B ε 0 ? > $ F$ $ $># F % R1 = 1/r > *) F $C ? Rs 7 # χ2 7= $ + $ ) & * 0 $ " # % $ ? # $$ + @ $ @ >
= @ ) > $ $ C 7 $ $ ,# $ @ $ % ' > " $ = # U @ U ? 6( * ? * $
F ) K $ $ > ,0 " @ $ g(φ) ! 2
2
; "
5 $ 0 p & ) = $ $ C $ > = ># ) + $ 0 F > > $ F < $ $ @ $ 7 *" @ = $ 5$ ) ) * $ 7 @ $ $> >
3-, L28 ?> $ )> @ $ f 0 ?
f0
" A >
8;: G " 0 @ $ f0 $ $ , A > " = ,# $ 0 f ) > $# $$ @ $C @ $ 5# $ 8 $: N + $ K ri 2
[f (r) − f0 (r)] dr
L2 =
fG (r) =
2 1 r i e−α(ri −r) . N
@ $ @ $= @ $ f0 $> >
f0G (r) =
2
f0 (r )e−α(r−r ) dr .
& 7$ AC L2G,
L2G =
2
[fG (r) − f0G (r)] dr .
L2 7 M96N @ > $= + $ / $ 0 F < @ = + @ $ f0 )* = > $ C ?# + $ > > = $C + $ C = α2 ∼ f0 L2 7 #G" ) $ $C ? = > " $ >
3-- " 8 " 0$ <* A$= 7 $ ) )*
;3
) *
O! -
A * B - E ** A( * * D *
( * $* 7 P$ 7 '* @ $ )$ #-$ ? # $ = > % = " * )
0 ! ) = @ $ ?>
* $ ? # $ " #$ = > $ P$ 7 & @ 7= > + $ n10 , n20 , n30 L ) ) '* n1 , n2, n3 !
$ > $>#= L ) ' > 7$ AC R3 R3 = sup [(n1 − n10 ) + (n2 − n20 ) + (n3 − n30 )] . n1 ,n2
@ $ $ 7 P$ " $ " = ) L ) ,* > " @ ) ) > R3
= sup n1 ,n2
n1 − n10 n2 − n20 n3 − n30 + + n10 n20 n30
.
( * $* 7 P ) ! $
& > 0 * 0 = @ $ ? ; 5"
$ " #$ ? 7$ AC E #)>
; "
&
9
0 P ) F > $ C N " 5 " $ H> $ ? θˆi P ) FE F p & ˆ ˆ ˆ = %# θi > θ . p(θ) θˆ
N
> 0= = > > $ " $
$ = A > "
0 ) $ / +* > p ≈ 10−3 ? > = > 5" $ " $= & " $ AC P ) ? * $ p & * * ) E# $
:) ( ;
30& K 7 ?> $ " H0 > = # $ " @ $ f0 " ? A $ $ 7= H % 7 0 $ 8 $ % : / ? ;( *- " 7 ?> $ " 5" $ $ " A "
$ > 5" $ $= = )> ,
" $ " + * $ @ $ = ? ;; )) * H @ $ > ((( F $ H (( + $ )$ 4$ ? ;( )$ + %#= A $ " 7 $> > = >
p & ) Z $$ > B 7 A $ * χ2 7 #C$ 7 " , = ? $ B$ " " *- @ $ F> = > ? $ 7 @ # $ P# @ $ $ 7 " & B* > Q
;4
)
3
1:Anderson,2:Kolm ogorov,3:Kuiper,4:Neym an (k=2),5:W atson,
1.0
6:3 Regionen,7:Energie (log),8:Energie (G auß),9:Chi−Q uadrat 1 2
7
4
M ächtigkeit
6 3 5
0.5
8 9
0.0 50% linear
30% A
30% B
30% C
20% N (0.5,1/24)
'6
) ?
& @ ,# # 0 ! * ,!! ;;# % !
%*&
(
$ @ ) $ , 7 $ 0 Y)
30( + 50 " @ $ " 7
> $ > χ2 7 #-$ $ $ " #$ * + $ >$ $ $
5> > Y) ( * $ - ) )> ? ; )$ @ $ )> ,
" $ 8H0 : * H0 = # H + $ @ $ $ p & " 6Z χ2 7 ; + $ $$ p & " Z=
E$= + $ ) -) ! $ - P M9N
4
; "
*&
/*! &
& ?
(
@ & %*&
? A*&
'* (0*(" & *# C
@ :5 ( ! 4!
31& 4#-$ 0 )> @ )0$ & "
$ > @ $ & " F = " % Y) ) T# " " = = 0 * 0 > = ) E "
# > " $ > 5 @
= 4 $ > = * = $ " $ A 8 $ 1% & : > $ = " $ = % A > H * 50 >
;7
* /*!
7
/ , > > ) 5 $ @ $= > #-$ 0 F < & '* > = A > > $0 ) 0 $ F ' * ) = )0 F < ) > $= ) + + $
@ $ 7$ AC ) A$ / % > >0 > = '* " $ ) A ? > '* #-$ = ) # > = *# F $ " > >$ ) 0 * 0 = #) " #$
31( χ2 9 $ 8 ! ) = )> * = A > χ2 7 B$ " " 7 $ $0$$ B
" > + + $ χ2 0 > 5 AC N )> M & #$ + i $ ai bi = ai /N bi /M * , 0 % *O ) $ > ?#) $ ai /N 2 + bi/M 2 0 G % 5 AC χ2 =
B (ai /N − bi /M )2 . (ai /N 2 + bi /M 2 ) i=1
8;6:
%
$ > $> F> ) > = @ $ 8;6: 5 AC ' $ χ2 @ $ 0 B − 1 % $ + p & " #$ * + @ $ 7$ AC D∗ = √? $ A > B$ " " 7 D N ) D∗ = D Nef f = > Nef f #G" " " + $ $ 1 Nef f
=
1 1 + . N M
* A > * = 7 *
31* ' %0 $ @ $ " )> A B M N > $ = 0 " % ? " $
8
; "
2
:*! 9
!
/*! # /
/ &( * *! & $ φAB $ ) = > F < ) , 0 > FA$ - = > $" $ ) = > , * > = = $ @ $ * $ ! ?** ' @ $ ) $ = > $ ( F M9N8 6: > / % " ) > ) 5* M + N = (N +M )!/N !/M ! * H> M N * $ φi $ ?** ' P )" $ p & * + %#= $ $ AC
φAB φi > φAB . p= 5) ( * @ $ " )> & " $ )> )> ( + $ 0 $ ? ;6 * $ $ φ0 = −1.480 8
$" & $ &$ 7 φ3 : ? F $ > (((( B )#$ $># / $" $ )$ 4$ * φ0 p & " 0.06 % 5 AC A > #) = >
" B ? $ " p (( ' (( $ δp = 0.02
;7
* /*!
;
p & = 0 > 7 " @ $ $)$ = 5" $= −3 < x, y < 3 , " $ > $ σx = σy = 1
' (
< %3
/ E > $ B KH = O ) E> ) -) 7> $ E * ) 5 " #
$ > = > # $ $ $ $ $ / H % E
$ $ E B 8 > : # B-) P " Q = C " ! " * 5 AC > P= = 7* = % > 5 AC )
) G -) * 5)#C$ = 0 " / %= 0 >
?** ' = > /
' * = # ? <* * $ A = $ " $> FC F $ 0 / $ ) > ? $ P $$ 0 5 @ = ?$ *) * #) EA $ G " 0 ) > $ A & > ) A ?$ %0 $$ AC x ?$ yˆ > $ > 8 $ : $ = ?$ =% 8 $ : R $ > B* 8? = $ := > @ & P$ " ) ? ?$ B* = @ $= B & F <* * $ 5 " $ E * ) $ 4 E * {(x1 , y 1 ), (x2 , y 2 ) . . . (xN , y N )}= > 0 H $" xi ? > yi R $ $ ? " x ) $"
E * = $ P$ #)> yˆ (x) %$
3
< " E
E * A$ $ C $" A$ ? P# + = " E " $ > = #) $ $#C > $ $ ( * 7* $ & R " > > + $ 8E * ): > $ Ri , Ti $ L + ? > $ $ R 7* Tˆ "
$$ > F " > % / * + *' # $ ?** ' A * $ % " K> > # F " > > " $ B* = $ F $$= /
' * = > & " $) > = $ $ )> @ >$ $ * * 0 $ > ( * $> B " F 0 $>0 ) & $ " = * $ x H F 0 ! ) = > B $ >$ = > @ $ ? E H @ ) EA $ ? $ ( * , 8 := P = ) $ AC 7 >0 F &A > / = 6= %= = ? >
4 = !& -) = $ ?F > > = /3C = 6= 8 = F $ ,
E * = B-) $ B )> " + ) $0 > = -) > %0 ?$ $ & 8 $ : " 8 $ 2 = ="" : 4 ? $ @ & > *# ? # ( * 4 + > & > $ = 0 *' + ) $ = %0 $
" = & $% $$ ? B ' F" ? > $ > ! 0 8 $ := C=
E ) & > ? ) " $#C$ d B " = √ ? d % d ) R A = > P 5)$ P L ) + @=
< A *6
3
B $* B$ = 0 B$ $ 5.2% B" !$ + @ = " P > $ 10% B # $ ? = > 1 − 0.8d ) + $ 20%= " 59% @ P = #) $ > $ $ F ( * E * " 1000 0 $ $ #C$ 0 B B # $ a " %0 ?#) $ % > F + ># > > = ? a/4 F % 8$ 1000 × 0.052 × 0.55 = 1.6: E * > = ># 500 & ) #) $ $ >0 & > ) % ** ' $$ F> ) & $> F $
F> > ? * $ " % = K $ = " * % " I $ J %
$ # $ $ B* = $ ? )) > B-) $ > ) % ** ' $ > ) # FC 0 ,) 8?,,:= & $ $# $) + F 0 = A* A D 0 $ 5 - MN < ' !"
( * / F > ?# $$ 5" # $ / $ # " $$ * $ $ F * $ B " $ # > ( * F * ?$ # * > BA * KH A & = 5 #= BA *
F$ AC $ 0 % # F = P* B $0 ) ) % ** ' $ "# $ K O# * - > & K O# $ = ) + * ? * $ # $> > / P$ > 5 $ F* O = > ? * $ ) # F $ % = ?** ' ' F* " + $ C ! > $ AC ?> $ ,# $ " F $ ? B 0 A >
7$ AC = > χ2 " > & " χ2 " $ > $ $ $ = ? ) F*
3
< " E
? ) > $ $= > ! F* )
0 ) + @ $= ) $ C ) $ % # $
&4(& ) & A , " x ) = & y(x) ) #) & ) E * ! $ $ > = > 0 $ AC + = > $ $ AC 5 $ F $ $ C + ) > $ AC @ # $ = = % + = $ > = # & $ > 5# $ $)$ / * $= > $ % # $> > $ P# + = > % $ C %. % F #) $ = F & # , E * ) & - ? di = |x − xi | E * $ ? di < di+1 & ># K # , 0 * ?$" y ˆ(x) =
K 1 yi . K i=1
+ & " K E * * > @ % y(x) ) 0 $ & ) F* H j G 5 $ σ2 = % @ $ δyj $ δ 2 yj =
σ2 + yj (x) − yˆj (x)2 . K
8(:
7 > $ F> = )> + $ += $ ?> $ >
)#) 8) + + * F = > # B* > :
%. % %. F $ ,= P# @ @ $ $ & ) +
< A *6
33
P @ $ = 0 F $ 0 " >$
$ )= $ ) $ C 8 +* ? (6: $ > = K # , * B H> % $* >
A ) $#C$ + 0 $ $ K # , * + & $ = ? $# $$ & $ 5 $ 0 N + $
N 2 y i e−α|x−xi | yˆ(x) = i=1 . N −α|x−xi |2 i=1 e
√ B α P> B
+ s = 1/ 2α 5 ># 5 AC $ ?
+ $ & P ) $* > = , ) + ? " 2s # > G % @ $ * 8(: 2
2
δ yj = σ
e−2α|x−xi |
2
2 2 e−α|x−xi |
+ yj (x) − yˆj (x)2 .
&4(( F R $ " K $ ) % ** ' @ $$ 0 $
% * $ ) " > B
$* ) ? *) K $
# ) % ? $#-$ % ** ' = 0
* % > " $ ? $ $ & > )> #C$ E$ B$O# % = ! = ! $$ " $ = #-$ $ G K) = 4 % * K $ ui(x) 0 $ P
u∗i (x)uj (x)dx = δij , u∗i (x)ui (x ) = δ(x − x ) . i
34
< " E
8 B 6: G $ % f (x) = G F " $
P > > f (x) = ai ui (x) , 8(6: i ai =
f (x)u∗i (x)dx .
/ $ $ H> 0 " & 0 % " + ? * $ F* ** ' > )* % $ 5 " 8(6: )* B ai # $ 0 > " *) & $ > $ 5 A > BY) $> 5 k % " #$= > ) ( * &$ K $ # ?* ) + #$= % = > * = # $$ $ ? = $ C " % $* > = > F> > % ) + + $ < % % G ) = " ) #$ $ - =
>$ ) + $ = ? > $ 0 ? $ $ ? * $ $ ? * $ $ C = > ) 0 = $ $" $ - K)
&4(* ) *) ? " K $ &" ) + % $$ = % G ) ) 0 =
> $ = *) ) = &" = $ A $
"
$ ) $ " $ 8 $ = ,FP $ := > 0 $ $ 0 B $ " + %0 / * $ " ) 4 FA$ = $ $ $ ) = )$ ? ( P )$
&"= = 0 ** = $ 0 $ P # > &" E# $=
) &" P $ * >
A G &"= P= $ & >
< A *6
37
% ***& !
A M = )> / ) * E$ E# $ " = $ ∞ −∞
Wik (t)Wjl (t)dt = δij δkl .
& > &" $ ) W00 = Φ(x) ) = 0 $ &" 7 Wsl = 2s/2 Φ(2−s x − l) .
" = &" " $$ = >
)$ = & %
7 = >$ )# H 0 $ K %0
* ? > $ " > $ P$ 4
&"= ? ( $)$ = > $
= ' % % 5 Φ " $ |Φ|2 dx = 1 Φ(x)dx = 0
0 = > + %
P ) 5 # $ % 8 : x2 1 x2 Φ(x) = √ e− 2σ2 ( 2 − 1) σ 2πσ 3
8F' 4: ,
38
< " E
& 8F &": , " % )> ? $ 5C = ? (6 )>= F % = *' / %# - σ + % 0 $ &" ? - P M9N $ 0 / " 0$ x2
Φ(x) = eiat e− 2σ2
&4(, $" " / 4 $ > $ ) ?** ' " * F $ $)$ ,= 0 $ C &
# $$ @ $$ $ > $ A > $ = > > * " > = 0 ) $) , A " ) )> = G = > * * # $ = $ )$ ?# # $$ @ x 8? (: ? * $ * * $ > F G ?> $ R > $ / " $># > = > > F " $* B " $ " 0 $ & 0 $ G $ = χ2 >
< A *6
3;
E ": : % $ * y & ' = > > B " * $ ># = $ / % FA$ = $ )$ ) " & L ) ,# $ = $ ) G * 0 + ? * $ * )> ? $ $ * # $ A *> ) ?** ' " % $ " > > ? / " 4 $ > @ $ 0 % $ @ $ )* = A BY) " + * 8 : $- > @ = $ $ ) > = % > $ $$ L > %0 * ? * $ $ + * 8 * : $$ E = G + * ? (9= (= ( ) D $ $ $
+ * $ $ )$= D $ $ " G + * $ B "= + * B 0 $ $ + * b E$ xo $$ $ * ? $ % ** ' f (x) ≈
K
ak Bk (x) .
8(:
k=0
BY) ak A > F T = > % yi % δyi 0) xi , i = 1, 2...N $$
4<
< " E
E (": *
K (": χ2 =
2
K N yi − k=0 ak Bk (x) i=1
(δyi )2
.
8(9:
N 0) 0 $ C > K + * = % $ $"= ? * $
$" " @ * * $ # )* A " $ ? $ > $ & P ) P $ P > )> #C$= + * ) ? $ %
< A *6
4
C! (": * > ) + = G * $ 5
xy
&4(- 6" < %0 % # $ $ P)* $0 & > ) " = % ) - = * @ F> $ @ > % 0 $ )* ? % # $ 0 P$ ) > $ = $ @ 5$ % = a0 + a1 x + a2 x2 + . . .= % 8 c ?** ' := '* eαx=
E$ b log x= ? $ arctan x= 5 " e−ax = " 0* $ > xa e−bx ? * $ 7 $ = x → a(x + b) F 2
&4(0 " ! " @ ) " $ = $ > $# C$ ?# @ x= K xi % > yi= % xe−x $ )#) $C" > $ 0 $ )$ F> > $$#= ) $> > % $* $ )$ ? ( ? + )$ K $ $ )$ " F* / + > 5# $ 5> $ $0 + )$ * @ = " > > ?> $ P# +
4
< " E
96 A *: ' : ? /*$* ! @ : A *
< G:*&:* $ # A* $
4
$C 5> $ H >
F # , $0 ? * $ * > $$#C $ ? $ > P# > $$ & $ T + * * $ ( F* $ = > * >0 K) )$ F * " P
0 > $ - > $ $ 0 = H A * ? $ %
!$ $ " x = 0 $ ? * $ G * $ ? * $ " K $= 5 = +* $) &$ * * $ $
/ " % + F* * ? %) A > ) = " = $* F P$ < 9 . !.! ,= ' ! ,
4#-$ " F KH
> A A$ > $ =
B* 0 = A$ > ) @ # # $ 0 & > A$ > $= # % - > " = " 20 T > 6 $ * F = > @ = K O#= 5 O#=
B = F= 4* #$ F$ AC = > @ A = > B$ > / ) @ 0$ $ ?$ )
= H BA * " = # E# $= + = 4A > A $ $ = B* = C ! 8 $ :M9= 9N EA $>$ 0 $ % $$ > = ? ) 0 $ )> F ' B* = > 0 ) > ?> $ + $$ AC " F $ > ! +* )$ = > P $ > $ A R BA
* * F ? $ " !
= B* % $ " = # $ )> F / % !
-) > & ) + B*
4
< " E
' = $ KH 5 P= > 0 F , # ) ?> $ 0 / $ $ ># +* # $ B* = > T > $ ,# $ ?> $ F "
F> A$ $ & = B
' ) 7 B
' 4* 8 $ : 4* $ " B
' $ 5 AC $ > 8 $ = =: ) $ > % /
E " > @ $ - % 4* * * " & >$ P ? < +$ > $> 5 0 + $ $ P > = $ + # $ # $ > F " 0$ <* F $ $ C ' ) $ $ & )) = > > " " > > >$ = $ $ ) * ? > $ # F 0 # $ " KH ! @ $ A # & $ = ) + EA $ K O# * $ " & ) @ $ F 5 AC= * = F $> & > > = > B
0 $ ? > $ % $ " " F = # & $ )$ B 4* F $ *" & $ / * % $ P= $ > ) * >
$= ? > $ + ) - = $ +*= > $ > = > ? ( * 4* * 5' )$ P " $ * = P"$> $ = " = ) # $ , F> F ;& x1 > x2 5' ! " # $$ ) = > 5 AC = F > $ @ ) $ ? (
< G:*&:* $ # A* $
43
$
% 5 $ 5' B
)>
= $ E = $ E $ Q1 = L11 x1 + L12 x2 + Q10 Q2 = L21 x1 + L22 x2 + Q20 )> = Q1 , Q2 $ 0 5' > & " Q21 ' > R E $ E P"
$ 4$ P $ 4* " &$ E $ = KH % * - E $ Q1 & " Q2 * * P 0 4$ P" $ & $ S & A C = & F$ AC & $ ! = & " Q1 / +* > > = 4$ P" $ " $ 5' # $ L $ Q1 $= A > $ $$ $ Q1 ) $ $ " > & " $ * #) D $ $ % F ' Xnp N × P ) @
0$ $ Xnp F p KH n = B
)> P F 8FC$ AC = : ) 7 A
E > = >$ B ) F $ FA$ P < P E = 4* * = > ) > ) F> H F$ AC D KH $ H F$ AC * @ ) $ & xnp =
¯p Xnp − X δp
N ¯p = 1 X Xnp , N n=1
δp2
N 1 ¯ p )2 . = (Xnp − X N − 1 n=1
5 AC xnp ?> $ F$ AC " 7* p KH n " F> KH 5 ) $ > %
$ B* A > B
' - P × P B
' R 0
" F$ AC > F $ 0 + $
44
< " E
" &&
*& ' H> * O!J G: 1 xT x , N −1 N 1 = xni xnj . N − 1 n=1
R= Rij
$ $ F ' $ B
A > ) @ > $ = > $$ E " F$ AC = B * = F> yni , y = Ax ,
$
A $ P ' ? $ " B
'= $ > + $ A > 5 $ (R − λi E)ui = 0 , 8(: > λi $ > ui )$A $ $ " $ > $ +) $ det(R − λE) = 0 .
%0 % " )> F G 5 $ R11 − λ R12 R21 R22 − λ = 0 ,
< G:*&:* $ # A* $
47
EA $ )> $ > $ " A > ) * $ > 8(: ?$ + $ P ' A $ < * * $ $ > $ = $ @ ) )0$ 4* > $ > λi = H yni * ? @ $ $= * 5 AC Qi > O F> 4* * > 5 AC $ > $ $ > * >$ 4* * @ $ 4L $ ) 5 = > $ 4* * % fni > = > √ yni " & ) $ > = λi yni fni = √ . λi
& > H) % * 0 $ F> " 0* > = A$ > 7 ' Q= E $ ' f = Qx .
8 5 AC F> = H " K H )$ = > ' $ ' Q * : / B* $ = > % * 0 $ F> $ &$ K $ # 7 / " F ) A , Q $ 7 * $ ! $
( *
x = QT f , x = AT y .
? H % "= B
' ) $ = & # $$ $$ AC ) #-$= @ # # $ )> $ * F> 8?$> : ) $> >$ ? = 4* * $ C $ > >$ H $ $ > = )> $ = = >0 >
F$ AC $ = >0 @ $ > 6 4* * * "= @ = $> > = > $ C *= * F ) @ 0$ $
48
< " E
& $ $ ) 0 $$ L > = * - = F '* F $* $ ) " > = * 5 $ ) A )>
" = A %# > > < 0 #
$ ) B B$ > $ $ @ 4 )> B$ = A > FA$ $ @ ) D > ># & +1 −1 / %# "= $ $
@ )$ = FC 0 P$ B-) $ & $ +* * +>= = % = B*> ? ) $ > > %
> ? = 5= 0 B = $ @ B = ? $A$ 0 $ $ $ $ ? $ ? ) <* * $ = ? ) ? > = $ E$ = ) $ " $* ) " $ ,0 = 5$ ) ) " , > = A$= = * $ )$ & 0 F > = P $" $$ * )> ' * 5 AC " ) = 0 B -) $ " $ > 5 AC )+ 5= % % >$ F 0 ?$ 0 = % ** ' $ " 8 $ 2 = ="" := $ 8 : B-) $ & 8 : / ) R % 8 = & : + ) > +" > ) F # = > > +* ( * &> $ " 4 B 7 * @) " B $ C " = $ A $ > 7 $ 7 = 7 ) -)
< C
4;
+ + $ 50 @ * ) ) $ $ P= = > B G ) $ )$ = > ?F > = > > >$ F $ " $ / 0 $ " " + ) - / 8 : / %# = $ * ) = @ G
?> $ $ " > & B- ) $ % > R @ = $
&4,& / # P4 % ) 0 $ ) * ) %$ " $ @ = D $ $ " B* = ? 9 0* & > & f1 (x) f2 (x) " )> B " $ = = $ x B )) = %
A$ 8% : x → B = f1 (x) > f2 (x) , x → B 6= f1 (x) < f2 (x) . > ? ) )$ $ )> B ?$ 8+ $ = O @ $ = > #-$ )$ = ? (;: / %# $$0$= $ B B 6 )$ > * B-) $ $ $ E " # x → B = f1 (x)/f2 (x) > c , x → B 6= f1 (x)/f2 (x) < c . & > ) + = %
$ 8% 6:= 0 > B c ># = / $ 0 )$ + $ $ C
f1 (x)dx = f1/f2 >c
f2 (x)dx . f1/f2
8(:
?> 0 > ) %
= H)
, $ $ ( & FA$ ? (; 0 " % & @ $ , " $ = A > B -) $ $ $ '*) $ %0 % 6 > 5 ) $ $ 5) '* F 0 , >
7<
< " E
) *
C E
*# A &H
# : *# 2 2* !
C
*> B , (x − µ1 ) V1 (x − µ1 ) − (x − µ2 ) V2 (x − µ2 ) > 0 → B 6 . F ># H $ B= " $ > $ > $ $ F # B " $ ? $ 0 $ > $ ) $ %
0 B ) $ 0 V1 = V2 $ % " ) E xi = 4* * = > B F @ ) E ) = B $ " ) ) > > $> = > @ $ * = * # " = E * > @ $ ** ' A * F > > ) = > @
$ 0 ** = ) + @ $ F
@ $ $ (x − µ1 )T V1 (x − µ1 ) − (x − µ2 )T V2 (x − µ2 ) < 0 → T
T
&4,( % %/ ' @ > $ 0 , ,) 8?,,: ) R
) P *)# ?> $
< C
7
/ , > > " >$ " * " = " ># $ ?,, P0 ># * *$ $) >
> B$ E > *) " > = ) = $ ,) > = , > $ AC P * > F A ) + = ?,, E$ ># = + $ $> ) $ B-) $ 4 P 7 ) *) " $ > ,) > E = $ ?$ > )) + 0 > E > ?$ > " $ > ,)* " # = D $ " > , E * ,) $>0 % 0 = $ ?,, > " & 0 $) +* $ @ $ " ? $ = > # $ )> " *' = + $ ) / 7 * >
? " > = 4 ) P > T ) -) / ?,, " " # $$ P ) ") *) P > > = " $ % " A ,) 0 $ % = $" x @ y= y = f (x|w) ,
4 w $ ) " / H ? > $ * 103 − 104 E " $ $ * ? * $* + $ C " " = EA $ $ ,) > A $ 5 $ $ % 0 %0 ? * $ F $" > *' $$ 5 $" >$ $ C " FA$ = + $ G ) ) = > * 0 $ 5 ?,, P M9;N
7
< " E x1
w
(1) 11
w(2)11
s
w(1)12
w
(2)
s
y1
12
x2
s
s
y2
x3
s
s
y3
s
s
xn
w(1)n3
ym
D:*: * , J & C* " &* * ! && ! %/ ! ,) )> " B 8, := ? (( R B* xi $" x > B
$ R " > 5> Wik(1)
(1) )$> > $> uk = Wjk xk B $ $ B % xk = s(uk ) ? B > $ % )$ B )$ " x )> B = > " $ = > $ * 5> ' > W (2) ?$" " y ,) 0 $ % xj
=s
(1)
Wjk xk
,
k
⎞ ⎛ (2) yi = s ⎝ Wij xj ⎠ . j
$ $ yi = s
⎧ ⎨ ⎩
j
(2)
Wij s
k
(1)
Wjk xk
⎫ ⎬ ⎭
.
8(:
< C
7
" &* (A * F )> #C$= $" )#) B* 8+: & = ) + \\ ))0$ B* $ ) B " 0 H B & " 5> $ $ * *) B *) B 6
9 B s = * * ( >$ $ % ** ' = ,# ! * $ *- Q $
@ $ $ C ?> $# $$ B $ s(u) =
1 , e−u + 1
Q % ? ( $
5"/ E * > 5> H $ H $* R > ?$" ,) y > ysoll " $ & - % E E = |y − y soll |2 ,
7
< " E
0 H $ ?> $ ?> $ "
$ > = > 5> 5 % E $ = > H 5> * W ∆W, 1 ∂E ∆W = − α 2 ∂W = −α(y − y soll ) ·
∂y , ∂W
# * # α= E = > & ? $ > s e−u ds = −u = s(1 − s) . du (e + 1)2
8(:
? 8(: > @ > $ " 8(: ? $ 5> )> = ∂yi (2) ∂Wij
∂yi (1)
∂Wjk
= yi (1 − yi )xj
(2)
= yi (1 − yi )xj Wij (1 − xj )xk .
& = ? $ + $ " y 5 AC ) ) & 0 ># ,)= # ) F ' W(2)
& W(1) @ 0 , $ $ \P0 * *$ \ " > 5> * Wij(1) = Wjk(2) # $ C (1)
(1)
(2) Wij
(2) Wij
Wjk → Wjk − α(y − y soll )
(2)
yi (1 − yi )xj Wij (1 − xj )xk ,
i
→
− α(y − y soll )yi (1 − yi )xj .
8 " 5 $" 0) / $ "# $ 7 $ ) 8) + ) : " > > + ) $ $ " E * = ,) )> E $ = $ * E G > $
H # A * & & A ( M # A
A * ! *
< C
73
$ & H ? * $ * ' * ,) E & $ 5 AC $ $ > > $ $ $ E = * $ 7 $ ,) ' = > 0 >0 $ = % * ,) = E " > > = ) 0 * 0 & 7 7 $ $= ?$ = $ ) $ &
'* # " > > = 7 0 7 " / 7 $ = " > = P
,)* > $ & $ 7 $ $ ) ) ,) )$ $ 0 *) % ?$ A$= ?
% @ # # $ )> $ P ) $> & ?,, >$ \ '\ & FA$ = B
)> $ $ AC P # $ $ * ) $> # $ ) $ > & *> / #= ,) ) = 5 F> " 7* @ " )$ >0 = ># E$= $ "
& 5 $ $> 5 $ )
* ) A # $ )> 5 AC $ * 5 $ / * ,) 0 * 5> A$ #-$= ,) ) " 5> A $) > = @
$ )> , > $ & A 0 * 0 = ? ) , ?> $ % > / %= A > , F -) ,) 0 0 >
: 6: <* * $ 0 ?,, P0 * *$ " " " 0$ = A $ $ > $ > @ * B = " + ) $># > = 0 H $ $ > • B H > $ C >
$ * F '* *# 0 $ AC F '*
74 •
• • • • •
< " E
$ & )> ?$ " + ) * > @ +$ E * 0 5> > ) $ $ = 5> & )> )> #$= $ * ) = 5 AC $ " $ = $ $ C & *- $ % ) A $* > E ) +$ E * " $ C $># > = ) + α = 10 / @ ? * $ ) > = K) A ,) " $ $= > 5 / ? * $ B " $ ) $= *- = E )> ) ) A ! ) 0 * 0 =
F = ,) " > & FA$ ) @ $ B " $ ) ) @ $ F - )> $ E
" GC 5 = " 7 A 0 < " L )$ = $$ ? $ B L @ / P F* B = / 0 P $ 5> $ 7 = P ? L > $ > > P$ $A $)$= ?,, " 0$ B $ C Y) ) 5 $ A & > 4 F <
) " > = > = ' 5 7 )$ $ > = B * B $ = " $ P P F* B = P B > $ $" ,) 10 B* = x y B ?$ & = P R % (R − Rsoll )2 = > > Rsoll " 5 $ P % / )$ ? (6 @ G ) E >
* 7* 0 @ = O @ * *0 @ $ 5 $ >
< C
77
D * * D 3 C
: &
& ,%% & " M * E * : P0 * *$ ) 4 > ) 0
$ > 5> A B $* > = F * ) > R )
0 B = P$ $ ,) $* % = ) * ) A ) 7 $$ '* $) > = > > = $* " > > &4,* ) & + $ K x B )$ > = = $ 5 $ KH E * ) L + = > = & $># > = @ x = ? ) " + $ =
$ C = > " ? # $$ 5> $0 > / H % A$ > F = ? ) - & F ? > $ #-$ "= > ) $$ AC * "A$
78
< " E
= " 5 AC $ @ ) ) $ B
@ ) * * 4* * C $ 4* * ? "= #G" = $# $$ & $ + $ C E * + $ ?# > $ P ) $ B " %# $ 8 $ / = / :
> F = $ = E * > $= $" ) = $ ) #$
9. % & ># K, 0 " 5 AC E * 5 $ B # $ > %0 $ x > K # , E * " k1 )> k2 = 8K = k1 + k2 := ) B / )> // $A / @ # k1 /k2 $ AC α= > + $ B / )= B // k1 /k2 > α =⇒ B / , k1 /k2 < α =⇒ B // . & " α # $ " @ & @ B $ = α 0 $ F * K 4 E * = %
% " K 6 . ) ? E $" x + $ ) = P$ $ x $$ #
> > B % (x − x )2 K(x − x ) ∼ exp − 2s2
%0 B β > & $$ AC wβ , wβ =
K(x − xβi ) ,
8(;:
i
> xβi K E $ B β + )> B " > > > @ # w1 /w2 ) B ) $ & E * " P $ # $= A >
$# $$ B " >
< C
1 T K(x − x ) ∼ exp − (x − x ) V(x − x ) . 2
7;
5> ' V & > " = 0 $ B* " 0 $ & s )>
F ' V= + B $ = > > F @ E *
$/ B ) $ > $ C + $ " $ K $ )> + = 4* O# $ = 0 B ) $ & $" E * " + $ = ,# 4* O# $ ? $ )$ 0)" MN / % 0 ** B = H> H $ $ H B ) = #
5 ) $ 8(;: 0 + $ 0 ' / A P# D ** $ 0 *' A$= " E * ) ) * ?$ +$ 0 $ - E = ) + P M= (N " / ? ( )> )> = 0 ** E * " H 500 $ $ %
%) $ = # $$ " = > B L @
$ B $ C $#C$ = " ) > Q $ F $ ? 5> ># > $C B K* $ s 4 E * )$ > ?# $$ %
" s @ # $ " s % " ! ? ( $ B-) $ $ $ C 7* = > H 500 $ H B = $)$ $ ) $ $ & = % $ $ ) + = 0 B 0 ** =
P B " + $ > = B )) B " $ )$ $ & > # $$ 5> $ F
K # , " > # = ># $ $> ? > = * " F $ $ > $ 0 + $
# $$ 5> $
8<
< " E
) *
C O! - E :*! # - A *
) :*! @ > $ 0)" #
+ $ B-) $ " B "
$ , + $ ,# 7 " " + " + $ = > 106 $= ? > = 0)" ) = = > B-) $
< C
8
&4,, ' . ' . & ) # % $ $= $ " $ " )> B I II N + $ H K F x1 , x2 , . . . , xK = > B* $" A > B* x11 , x12 , . . . , x1N 0 N $" E * & & x1c = B * & ! $ E * )> 7 A B R 7 > $ > " &
!
A= F x2 " ) $ * > )> 7 ? $ " > !
B & A ) > F 0 $ = ) F 1 ) 0 > ! $ " > ! $ 0 ) !
# = > H
!
B )$ $ %$ $ !
# > $ 0 $" = B > / ? (9 )$ > 0 E * 6
)> $$ AC ! $ !
# )$A $ $ E * = $ = $) ? + > 0 B ) $A $ L = > G ) ! $ * = >
+ $ $ ! $ $ > %0 & > @ C$ = " *) # $ FA$ % " )> B = H ! $ L ) ∆N = Nr − Nf )>
$ $ ) ' / $ * +* > " $$ $ + 7 $ 5 AC $ 20 − 12 = 8 + $ $ $ $
7 & A ) + F )> # $$ $ / $ % > @ = 0 $= > $ % $ ? D > > > *) B $> ) - > P $ AC P, P =
NI , NI + NII
* 7 $ & 1 0 5 AC 5 / '= A$ + H
G = P (1 − P )=
8
< " E
!& ? @ C
?*! @ !(
! $ GE )> B
# A, B GA )> GB > GA + GB L ) D = GE − GA − GB
> ? * " > ! $ > " $ = > 5 / ' $ C B
5 / ) ! D $> & Dc > > ! $ "
$ ) P H >$ > + $ R + $A > ) B I ) B II , 5 / ' $ FC 0 T#
7 $ MN & G ) A > # & * = > H> H $ B* ># = $ - 7 $ A$ = $ ! $
$ ) " $ = 7 $ >
< C
8
#C$ > H ) $$ AC # $$ " E B-) $ $# ?$ $ ? + $ ) * *0 $ = 5 $ #$ , @ $ > = $ * $ $" $ $ + $$ 0
. ' . @ # $# MN / $> D $ $ #C$ $ B-) * #) $
> ? $ > " +# > > H> " 5
$ + )$ E $ $>= & $ $ + B ) $ > F $ $ ) +# $ L > )> P > $ AC = 5 $ > A > F * " & 8 $ & : F $ $ $ "
$ )
" $ P / 7 * $ ? > $ M9N @ E $ 5> 1 / $ H $ 5> wi = " F # $$ ?$
> + $ " P # * )
P =
I I wi +
wi
II
wi
,
> I = II : 0 $ B I )> II P & > 5> H >
$0 7* > & M ≈ 1000 +# $ & > $ + m 0 $ x Tm(x) = 1 80 B I : = −1 80 B II : ) = 5 $ M +# M M TM (x) =
m=1
gm Tm (x)/
m=1
gm ,
$> ) $ & $ " = + 5> g1 = 1 ) $ > )> + T2(x) 5> g2 > $>#= @ 0 & [g1 T1(x) + g2 T2 (x)] / [g1 + g2 ]
8
< " E
> " > > G ) > +# $ %0 + i > gi Ti * = +# * $# ) & $= # $ > "
@ $#-$ F ) & 5> ? + MN
E $ # $ C • $ xi # 5> wi = 1 & 1 8−1:= > ) B I 8II : $A • Tm (xi ) = 1 8= −1:= > $ B I 8II : + Sm (xi ) = 1 8= 0:= > $ 8 $: • + εm $> $ > " > = 5> ) " # 1 − εm , εm wi → wi eαm Sm .
αm = ln
•
5> $ )$ E $ " # %0
ε = 0.1 > )$ $ % 0.9/0.1 = 9 $> ?$ 0 ) -) $ TM (x) =
M
αm Tm (x) .
m=1
%0 ε = 0.1 5> + αm = ln 9 ≈ 2.20 %0 $> ? > $ $ )> #C$ = 5> αm )
) = ) + ) αm = 0.5 ln ((1 − εm )/εm ) M9N
&4,- + & " F B-) $ * R F @
, # $ " *) = > $$ 0 = @ $ $ " " $ "
E$= H * ) A / $ C , = " $$ AC % F % P$ $ $ + )
" = @ # ,)* = E > 0 5> $ ) " > $ " )> $= > 7 $ $ C $ D $# $ )> " B OC B$ @ A
< C
83
> 0)" " 0 $ ) P P ) %# )#) B* " ) > & " ? " ) ?,, ?
$ " # $# " > > = > $ $# * A $ * $ > $# A $ @ $> >
)
& " #
/ ! * ! > K x + $ y = P$ > $ " > % > > R) > x & = @ $ $ = > * * ' > #) $ " @ $ * 4#-$ " $= ) B-) $ %0
& " $= ) + ) + $ " F @ $ ) #) $ $ ) 0 + $ *' 5 AC * + * F & #) ?$ fˆ 0 $ x 4# -$ " + $ xi !$ $ " x $ $ $ fˆ(x) = f (x; x1 , . . . , xn ) .
0 F #) $ " * =
B )#) = @ " $ @ $ " = > @
$ + $ " #$ ># , > 0 + $ ) * 0 $ $> 5# $ A >
= > > )> + * * $ 0 4$ ((( + $ )$ + ? Q #) $ 4#-$ " + $ $> !$ $= 0 $ ? - > & A$ F = !$ $ ? ) - , = @ K " & ) #) = > *) $ - ) $ >
+
88
G & *
,::*5 &
E - %6 %!# ' - 9> # - ' ! *
O (
: & $ #
x
B$=
K
" $
N
K , fˆ = NV
* * ) / " B$" V / + = + $ $ = $ )= 0 )#$ + $ 7" B$ $ > ? )$ $ F $ 0 H> (( + $ P )$ * @ * F $ " # ? 5> $ # , A >
> 4 % " > > + $ * , " $= c −α(x−xi )2 , fˆ = e N
" B c , $ = " α
# $ α > > $>#=
* $* A > " " $ = α $ " 8 @ $: ># = $ ) ?#) $ " α(x) ,# $ " > fˆ > 1 −α(x)(x−xi )2 . fˆ = e N
$ $C & $
+ ? $)$ $ @ * % $= $
$> > F B* $ α
**:
8;
)> 5# $ @ $= * 5 $ += > > ? (6 5# $ $ $ D $ $#) @ $ K $ " $ + F' @ $ L ) 0 )0 ?> $ F @ $ 0 " > $ @ $ > " > = > $ % * * @ $ * > $ D& " = f (x) =
αi G(x; µi , Σi ) ,
)* 5> αi= F> µi B"
) ) Σi ,0 $ $ " )) = >
/ " = = > 4 > 4
% % $ & " $ * @ = B F = P ) M6N +!! .
&&(& ' / " $ ? > F * =
> )$ $ @ $ #
$> A B @ $ A$ = 5 AC > F T )
"= $ 5 AC ) * +* 0 + $ " F> @ )
@ $ F = > > B* % #) $ * > #)> 0
$ 5 AC > $ > x ¯ = xi /N * + s = (xi − x¯)2 /(N − 1) $># ? $ ) A > B
= T
? $ * %
> F> @ )#) $ 4 + * F = > 0$ ) 0 $ " # $ @ - P M9N= > >$ 0) > , ( $ + $ ? E0$ " F0 0 + " P* ) 0 F0 $ $ 0 8 *:
;<
G & *
* $)$ / > +$ L " > = > G @ $ ) > 4 >
$$ + * F / F ) @ $ @ $=
> ) + $ ) A , % #) $ + * F > ? > $ A$ ) + + $ " p & 0 $ - ) ?#) $ %
B-) $ $ "
+ * @ > $0 +* )#$ $># B " + $
( * F P $ = + * F Y) = = )#$
" = = $#C$ + 0 $ $ 7# A$ = $ = > $ " & $ $ ) ) = = # > F < / $ = $ @ )#$ ?> " @ F $ <* # P ) > / 5 ) " B > " 0$ / " $A*
&&(( /./ & N + $
5 AC > H & & 1/N ) * & " $ P0 (xi ) = 1/N > " $ + * {x∗1 , x∗2 , ..x∗N } > &0
* P0 + * + $ ) > _∗ _ / + * $ + $ " & > #)> $ 5 AC u(x)
> = > F> F* > $ δ > G > $ #) > u∗k B + * = > > $ +* )$ ( * + * + $ 5 $ F> @
$ 5$ N = 10 + $ {0.83, 0.79, 0.31, 0.09, 0.72, 2.31,
0.11, 0.32, 1.11, 0.75} #)> F> 0 µ . = x¯ = xi /N = 0.74 ?√0 5 $ #) $ >
% $ δ = s/ N = 0.21 & > @ $
! ! I & O &
"*: (
**:
;
= A > * @ $ F> )$ > ) N + $ = > > H F > " ) F * " 5 + * A ) + {0.72, 0.32, 0.79, 0.32, 0.11, 2.31, 0.83, 0.83, 0.72} & 0 H $>0 F> µk @ > > K & K & µk & $ $ C @ $ ) N = * > N = 10 ># K * 1000 10000 ? @ $ µk A > F> µˆ ! δµ
1 µk , K 1 δµ2 = ˆ)2 . (µk − µ K µ ˆ=
? 6 )$ & " $= 10 >
* + * @ $ F> @ $
+ * #) & )$ $ D $ @ $ F> µ∗ = 0.74= ! δ∗ = 0.19 0 = + $ F " # %# $ @ $ ? 6 # > / & = @ $ 5 0 =
'* " $ $)$ > & A 0 + * @ $ = 4#-$ = F> $ AC 1.0 ) > ( * 5 $ F $ ? " " T ? )$ 20 + $ ? 0.55 > $ > 104 + * $ 0.10 + $ % > $= ?#
( * ? )* ) 0 $> $ & $ +* ? 9 ) 0 = > 4 > EA $ %0 N " $ $ 5> wi = i = 1, .., N H> = $ )* > = εi = 1= = εi = 0 ? )* ) E0 = wi εi/ wi , ) > {(w1 , ε1 ), .., (wN , εN )} K H> Ek ?
@ $ & > * % ? )* ) E
&&(* <./ 5 $ % #) $ σδ P$ L A K $ & > > = >" + * > A$ = > F $= $ AC )#) ! " >
;
G & *
**:(
/*! & E - , /*( ! !
# -
**:( ' /
!
' /*!
* / &
M 9
& ( ,! / **::*! & ?
@
**:
;
> $ )> B* = σw = " > = ) 5 $ @ $ N + $ # $ σB = " B + * # $ % # $$ " ,
= A > ) 2 2 σδ2 = σw + σB , 2 σδ c2 c1 + . = δ2 N B
, )> 7 A > O KL $ 0$ = B $ C $$ 0 + $ N ) ># B c1 = c2 0 , " $ $ 1/2= > )$ # 8> " ) ? $: %0
@ $ ># ) = $ C ') γ2 = $ AC 8 $ γ2 = 0 0 , " $: & 0 c2 $ % M9N c2 =
γ2 + 2 . 4
?#) $ " γ2 A > 0 * 9 F $> % #) $ $ = " ) > % $ 0$ & B >> N
&&(, 9 / ? @ $ " + * @ $ A >
B - )$ ) / " $ +* @ $ ? = & = ? " > $ 0.4 ) = 10% 4 0 ,# $> ' B - ) " A > = > > @ $ )$ $ % &&(- /: / B* ; > > +
$= > $0 = > " "
> = @ $ 7$ AC ) $ @ A > " > = 0 $ 7$ AC ) = > $ - )> 7$ AC 5 AC *' ( * 50 7 $ $ & $ E * N1 + $ B N2 + $ B 6 R + $ F$ AC xi )> yi $ ) 5 AC
;
G & *
> ?$ B* %0 H + $ > = $ $ $ - % N˜ = = 0 (N1 + N2 )/2 / 7 $ + $ - S ! ) * 0 = > = " $ 4 F $ )#$ )> > N1 N2 + $ x∗i )> y ∗i & $ @ = 0 7 $ -) + $ " > > = $ @ $ > > B H> %
N˜i∗ ? @ $ & N˜i∗ A > = > > )#$ F $ = %
N˜ ) / 4#-$ ) + (Z= $ > / = 7 $ $= E * $ -
*
" #= . 9"
&(&& 6 ' ./ 8#H ? / A %0 & f (x) > $> µ @ ) σ 2 8 ' ) " $) > : $ 0 $= *" δ 2
86: $ )= $ 0 @ $ $= $ = $ AC ?> $ " > $> >
> = H @ ) +> ) - σ . δ2
P {|x − µ| ≥ δ} ≤
P {I} ≡ P {x ∈ I} =
f (x)dx , I
> / $ I 1 ≤ |x − µ|/δ $$ $ +* $ / $ #) $
f (x)dx ≤ I
I
x−µ δ
2
f (x)dx ≤
∞ −∞
x−µ δ
2
f (x)dx = σ 2 /δ 2 .
& 86: F x N # $$ " 8": " x1 . . . xN = $ $ 5) $ C P {|x − x| ≥ δ} ≤ " (x)/(N δ 2 ) , 866: + ) $ 666 66 +) $ x = x= " (x) = " (x)/N > N → ∞ $ 8
;4
,
5 )> : $ +) $ ) $$ B " $ ) 8B " $ ) &
: F $$ > $> + " $ / "
1I (x) =
1 0
: x∈I : ,
1I (x) = 1I (xi )/N " 4#-$ = x ∈ I
* $ > ? $#C -
1I (x) =
" (1I (x)) = ? >
1I (x)f (x)dx = P {I} (1I (x) − P {I})2 f (x)dx = P {I}(1 − P {I}) ≤ 1/4 .
P {1I (x) − P {I} ≥ δ} ≤ 1/(4N δ 2 ) ,
" 4#-$ * " $ $$ L & " ) >
* H $ ) F $ 4#-$ - & ) 5 $$ H * = & $ L ) - I J B " $ ) > I#$ J * ) > @ *
> = $ " &
4#-$ * H ' & -
6# " 9/ =9/> & > " #) = ) 5 AC $ > = $ AC ?> $ " > &
> > %$ " #) tN > $ = > @
$ 0 N → ∞ > & θ0 ) ) = $ = > 0 + > θ lim P {|tN − θ| > ε} = 0
N →∞
0 $ ε $ 0 = * 0 = % $ lim tN = θ , lim " (tN ) = 0 , N →∞ N →∞ " # ' ) F> @ ) @ $ #) " )
, &
"6 # ,: G6
;7
, 5) $ C tm =
N 1 m x N i=1 i
#) $ 0 * m F " f (x)= ' 8 % < @ $= @ ) = 6;: ? F' E #) $ $ @
) $ +> > > $> " ln L(θ|x) =
N
ln f (xi |θ) ,
i=1
F $ 0 > + ) $ > @
$ 8 > θ0 : ) $ ) # ! $ $
ln L(θ|x) < ln L(θ0 |x) ,
θ = θ0 = E$ "' % = $ ln(. . .) < ln (. . .)= !
" L(θ|x) L(θ|x) L(θ0 |x)dx = ln 1 = 0 . < ln = ln L(θ0 |x) L(θ0 |x)
ln L(θ|x)/N = ln f (xi |θ)/N F 0
L(θ|x) ln L(θ0 |x)
"
!
* #= 5) $ C 866: 0 N → ∞ $$ > $> " $ = $ lim P {ln L(θ|x) < ln L(θ0 |x)} = 1 , θ = θ0 . 86: N →∞ ? $ 0 FE #)> θˆ $ N 5
' $ ˆ ln L(θ|x) ≥ ln L(θ0 |x) .
& * ) 86: > " = > lim P {|θˆ − θ0 | < ε} = 1
N →∞
$ B ) FE #) $ ! A*& ,& * L !
# *!* J x 5: & ! && /*! # * 2 ! !
;8
,
. = 0 #) B ) )> > $ = $ B F*) $$ #) % (N − a)/(N − b)= # > 8 7 ? > 6 #) $ @ ) ): 4#-$ "
> )#) B @ # $ = - % $= $ 0 N 8" N > N0 : % $ > #) > $
tN = θ .
?> $ b > $> #) " >
> ) > + b = tN − θ .
?) $ $ > $> = > $ + ) $ = $ ? > $ 50 * )
0 = > L ) )> 5> @ ) 5 = > 5> @ # $ 5#) $ $ = > & E H> 5 $ * $#) > = + #) $ >0 + 0 H #) >
= 7 #)
> #) $ " F * * $ = + #) 7 $#) = # $$ " )$= + > B O FE #) $ = FE #) " $$ 7 =
P$ +
F' E #) >0 E > * = >0 B " F ) $ 0 = $ B " FE #) $ 0 L " ) $ = > ) #) $ " $ * ? 5 B ) "
$ * + B
H
) $ " $$ @
'I// >$ B 0 5 $ #) ? FC 0 5 $ 4#-$ G ?> $ (t − θ)2 #) " > >
, &
"6 # ,: G6
;;
, 0 $ $ 8 66: @ ) #) + (t − θ)2 = " (t) + b2 " 0* 02* #) $ t Y) = > 0 N → ∞ % $ > $ + $ $ 0 √ N (t−θ) $ , " $ F>
@ ) σ2 6 " (t) ≤ " (t )= > t $ #) C= Y) #)> * $C" A$ @ ) @ ) + $ $ 1/N Y) #) $ $ N A ( * 8P MN: Y) ) " F + $ " > $> & " $ F = > $> µ 5C @ $ $$ + σ {xi } , i = 1, . . . , N = ) # ) %0 $ C N # 0 " (t) F F> σ 2 /N F 6 F σ 2 /N · π/2 F (xmin + xmax )/2 σ2 /N · N π2 /(12 ln N ) KL F 6 Y) + @ $ & F> )> $ AC > $ 0 #) $ > $> 5C" $ + )>$ '* " $ F 6 Y) = 5" $ F " = H $ @ A= $ AC 5 $ #) $ = > $ = " = 0 = ) @ $ F #) $ H * ? ) " * %# <
P ! $ $ ! $ $ 5 ) 0 @ ) #)
F = = * 5 $
) ;8 0 @ ) #) t 0
θ= " N $> > = 2
+ (db/dθ)] " (t) ≥ N[1 (∂ ln f /∂θ)2
! J
'E "6
869:
<<
,
$ , +) $ > %
/ 8 P ? % : * ) Y) #) $ ) " %
/
+> ! $ $ - > > " y = yi ∂ ln fi , fi ≡ f (xi |θ) . yi = 86: ∂θ $
1 ∂fi fi dxi fi ∂θ ∂fi dxi = ∂θ ∂ fi dxi = ∂θ ∂ 1=0, = ∂θ
yi =
86:
" $)= / $ L " &$ ! # $$ yi yiyj = yi yj = 0 " (y) =
N yi2
%
=N
∂ ln f ∂θ
2 &
.
86:
& $ = + ) $ - L = fi = "(ty) =
∂ ln L L dx1 . . . dxN ∂θ ∂ = t L dx1 . . . dxN ∂θ ∂
t = ∂θ db . = 1+ dθ t
86:
? > ) ! $ $ ["(ty)]2 ≤ " (t)" (y) > 86:= 86: $ 869: F > )$ = 5) 69 $ B " @ $ $= @ $ % f (x|θ) = exp[α(θ)a(x) + β(θ) + b(x)]
, &
"6 # ,: G6
<
8$ '* 7*. % @ $ A$: , ) #$ " > @ $ %= ,
" $ > 5 8 χ2 = '* " $: >
@ $ 8"$ B* 6: ? ? > $#$ * 0 = / > " $ > $ $ ?> $ + $ $ ? F < $ # )$ = Y) #) A* . ># 4 ) #) 8 $ : " @ $ $ A$= & * ) +$ L Y) )
' + 7 5 $./ & ? $)$= > = " $) ' )= A* #) " F' E F $ / % $ 69 5) / #) $ 0 = Y) + * 80
$ C N : " > = > % * Y) ) E) $= P$ # @ ) $ = # $$ " ' ) A* #) $ (%
F +) $ " $ ? $ L = fi 0 y = yi = ∂ ln L/∂θ + $ " 86:
y =
> σy2
= " (y) =
%
86;:
∂ ln L L dx = 0 , ∂θ
∂ ln L ∂θ
2 &
! =−
∂2 ln L ∂θ2
" .
86(:
) +) $ $ $ L ) " 86;: ! $ F $ ,>= F' E #) θˆ * " > & θ0
@ ) 1/σy2 = $ C $0 > 7
> $ " ∂ ln L/∂θ|θ=θˆ= - $#C , = - 86(: 0=
∂ ln L ∂ ln L ∂ 2 ln L |θ=θˆ ≈ |θ=θ0 + (θˆ − θ0 ) |θ=θ0 ∂θ ∂θ ∂θ2 ≈ y − (θˆ − θ0 )σy2 ,
& 9 *!
* x !6 * θ
'5 && * L & D *!
* θ
<
,
> B ) F' E #) $ 50$ ,# $ B " $ ) $ , 5 )> ) y/σy " " @ * " F> , @ ) $ 0
(θˆ − θ0 )σy = θˆ * " θ0 @ ) 1/σy2 ∼ 1/N = "$ 86:
6# " < 5 # ?$ > " $ ? 0 @ $ #) θˆ # 0 E $> + 7 > $ " y = ∂ ln L/∂θ FE ˆ =0 #)> θˆ= $ >$ y(θ) ˆ (θ) ˆ . y(θ) ≈ (θ − θ)y
& " $ ? = $ 0 N → ∞ ˆ → y (θ0 ) → y = −σ 2 = const , y (θ) y
> 7 A ? $ " > & / $ 0 θ * % 0 ln L ˆ − 1 σ 2 (θ − θ) ˆ2, ln L(θ) = ln L(θ) 2 y
> + σy−2 ∼ 1/N 8"$ 86:: + , $ > E , " $ #) 8 " $ ? : % = > θˆ − θ0 " θ − θˆ @ * / # H N ? $$
&(&( 9 9 / & > ) F> % " $ = A > $ > = > > = $ / " $ * )* A$= > > " $ F $= > ! ) $ = , F " $$ = >
& #-$= > EA $ , / " $ = - $
% # $2 / # & # && 2 7
, &
"6 # ,: G6
<
4#-$ ( % 8 $ : C > * 7 $># > C B - ) @ ," 8 $ 2 : D & ;(Z= ;Z Z U )
* %
/ " 5C" $ B B - ) " $ * - H > > U " F $ U $ & " [t1 (θ), t2 (θ)] = L = 0 ) ) #) t & = & /
" ) - = $ " $$ B - ) " C P {t1 (θ) ≤ t ≤ t2 (θ)} = C .
) 0 @ $ f (t|θ) #) ?C ) $ %$ $ > + $ A$. $ # % $ E# $ 8 $$ C := % $ P {t < t1 } = P {t > t2 } =
1−C , 2
) $ B - ) " 0 H $ > $ B - ) "= F> tˆ &
" C > " > )* = > + $ * @ $ %
(t, θ) B " * t = t1 (θ) , t = t2 (θ)= )> $ $2& 8 $ 2 & : C 8 ? 6: F> tˆ * B - ) / " [θmin , θmax]= / " +) $ t1,2 (θmax,min ) = tˆ
> = $ B - ) ) θ ? * 5 t = tˆ $ * $ B )> % )$ ? 66 4 0 > $ 9 $ $ / *)=
(θ1 , θ2 ) + $ (θˆ1 , θˆ2 ) ) = > 5 * %0 $ * + 8$ * : $ ) = + $ & C $ # + $ $ $ +$ ) $ ? * = $)$ B " + $ = C # + $ & $ ) $A ) B - ) & " ) % $ ' ! # 5 # J & * ! #
&
& * A *! 9
<
, Θ 8 t1 Θ 6
t2 Θ
Θmax 4 Θmin 2 t4 2
4
6
8
10
t
C* !
C* !# ! (
[t1 (θ), t2 (θ)] "6 t
*! t = 4 C* [θmin , θmax ] / 4#-$ > > " ?$ >0 L > H $" = > " $ %= > * > $ $ $ $ # * )* 4#-$ A$= )#) B* * > )C +* A F $ ;(Z B - ) F " = "# $ $" + $= *' & $ B - ) " = " (Z . A $ ) )# $ + $ F MN > = 0 > ) >0 , L MN & , #-$ B - ) " • ) " " 0$ / = F $ > > A • #) $ " $
, &
"6 # ,: G6
<3
C*
C*
& * ' ?θˆ1, θˆ2 @ C !
# & 9*>!! !
O /& H " )$ > = $ C & " * = )> " 4*
• B - ) " C " %# 4* & $ )) $ # $ $ ) $ +* )$ $)$= >
> ! + $> 4#-$ + $ ( * @ $ " @ $ 5 $ > 7 A, B @ $ 0 * θ @ $ * 5 $ = > " ! $ > A : θA = (7.50 ± 2.25) , B : θB = (50 ± 100) . •
<4
,
2
G$:*
*! E ** 6 G$:* # *!* *! "!
*& ' * !
/ ? 6 4* ) ) # * t = 10 $ % $ @ $ A > > > $= @ $ B > $ > $ " + $ / 7 B > S b %0 +> $ = # $$ " = E " # R C$ = & = R = 26= $ ) 5 " 4* A # $ * /
/( A("
<7
& A 4* *)# 7 $ $ 25 625(t − θ)2 f (t) = √ exp − 2θ4 2πθ2
L #) $ 0 F $ E + ? 6 F' θˆ = 8.53 = # 0 E $ ) [7.14 , 11.45 ] θA C θB / P 4#-$ ) $ = > B - ) " 0 θ= F> t = 10 F @ " Z - $ ) / " θ > 7.66 = θB C= H > θA C= % 4* " > 5 $ = H) > )* > = F $
> $ C B - ) " 4#-$ " )$ > = $ @ $ * = ># 5 ) = E = * #) @
$ + # @ $ " F
- MN
4 3 %&'
) $ % + " V?$ * M;N $ % " $ = @ $ " )> $
8 + $ * D " V = D+ + D− = > > 0 G W 2 = U 2 A2 > &
$ 8/7: $0 /7
> @ $ " x 5" $ @ z > +) $ z = F (x) $> = > F $ @ $ " x F * + $ zi= $ 5 AC $ = > 0 W 2 A2 1 2i − 1 2 + ) , (zi − 12N 2N i=1 N
W2 =
86:
<8
, N
U2 = A2 = −N +
i=2
(zi − zi−1 )2
N
2 i=1 zi
,
N −1
(zi − 1) (ln zi + ln(1 − zN +1−i )) .
866:
i=1
& > @ $ F (x) 0 F < = & z 0 + $ x # $> z ≈ 8 F < + $ xMC < x: 285)
F < + $ : 8> $ / * : + @ $ @ $ N #G" ? ) " + $ = > Nexp $
1 1 1 = + , N Nexp NMC
NMC
'* )> " +
") & 7$ AC + $ N $$ > = $ @ $ = # $$ " N -) 7 D∗ = W 2∗ = A2∗ 0 $ * % - √ 0.11 D∗ = Dmax ( N + 0.12 + √ ) , N 0.6 0.4 1.0 + 2 )(1.0 + ), W 2∗ = (W 2 − N N N A2∗ = A2 .
86:
869: 86: $ )> -) * & ? 69 $
%
%0 ? > $ F' E F ) * $ 0 > F' %
- $ $ 4 * $ 0 F T F F' * )* " = > H @ ) % A & # F
5 &
/( &* &: )
<;
<
,
+" > <* * $ = > @
$ " % " L $ $ $ * $ >$= ? > $ )
% $ = 0)= >$ )* ) "
&(*& +! $ ! $ @ $ " ) % $# E$ F ) = @ 0 0 > $ " $ 5# $$ $ # # $$ " $
> @ @ = & = , )C = $ $ * " ) L " F > E
+) $ = "
F " > > &(*( $ "7 *' = $ ?$ %0 n P > n + 1 * $># %0 H >
% > H $ = $ AC % > = > " > ) & $ > = > > > " ? 6 )$ + A $ % > = C $ AC & f (xC , yC ) & > C C ) & *$ F* @ $ AB 7* CT & f (xC , yC ) < f (xC , yC ) > $ / %= " ** > > 86: )$ > * - C / f (xC , yC ) < f (xC , yC ) > > 86: ># C " > * $ $ P $ / C C = > C C ) ? 86: > * 0 $ % 6 P $ * > " B -$ $># > > T
T
T
T
&(** & $ > *
F % > 2n + 1 $ > * H $ A % > > * )
@ " $ = > % "'
5 &
C
B
A CT
a)
b) B
B
C'
A
A c)
C'
C'
B' A
" &: 5(,* & &(*, & & 5$ = >
= > 0 > 4 $= ) 4A $$ $ F > F 5 $" $> & F > 0 = > 0 ? > $ $ %# * $ 0 & $> λ0
= 5 E ∇λ L(λ) >$ ∆λ P $ 5 ∆λ = α∇λ L(λ) .
> # $ " E α ) >
$ > = E > # @ ? 6 )) 5 " @
, • @ = = $ " $)$ )* + 5 $ A = > " = $ ,# $ " > >
>$= H % / 5$ ) )
*' F ) * F $ B *'# A $ #) >
, Dl1 Dl2 l2
l1
9 ! = > A$= G = 0 = $ > >$ P0 * *$ $ ,) • ! $ = E / & @ # $$ "
%0 K
# $ 5 >$ )+ " = F F = )> $ > • / + =
O = B "
$ ) $ / $ 7 ) K) / B α ) $ C= A K) ' F $ > )) $ A " FC
) > = = > " P " $$ $ # $ & Q $ E χ2 % $ > $ = > B α A K) 7 A " > = ) 5 i 7 5 " $ i − 1= 7 #$ = > = ) + •
∆λi = α (∇λ L(λi + 0.5∇λ L(λi−1 )) .
K) F A > $ " α ( * ? " * MN
5 &
x
z
" & ,: * * *( ! # ' : ! & : ": !
&& /* $ " $ 7 '*
7 * > 0 > F$ * $0 = > 7 ) ) R B = x, y, z / > )> B = > $ A = > #$= ) " " E$ K $ ) $ 7 H > > 0 H % $ = > $ C '* !# $ (4 ) 4 A > 5 $ " ) & $ " = $ H ? 0
7 H F T > A & " χ2 # $ 0 " * * & " # H λk $ $0$$ * * ) ∂χ2 /∂λk > +* ? 6 $)$ > @ $ $
&(*- $ ' + & * ) ,* $ 0= > )* F $ + ? 0 > $ F "
+ > A 7* A 7 $ $ " $ F " 8? 6: ? " A % A * ) )
,
"* ,
* ' && &
# )* F $ $> > P $= % ∆f A > = ) + 5 " & P (∆f ) =
1 1 + e∆f /T
)* > % T 8I7* J: # L $)$ > = F $)$ ? 0 U $ " T U F
>
'! 3 +. !
&(,& 5 $" E + * 0 + " 2b 0 ** , 2 x − x0 + b 0 x0 − b ≤ x ≤ x0 , b b 2 −(x − x0 ) + b = 0 x0 ≤ x ≤ x0 + b , b b = 0 .
B(x; x0 ) =
%# > #G = $ > ? $ xmin x + > = x0 (k) = xmin + kb= > / ' k )> kmin = 0 kmax = (xmax − xmin )/b = K $ P * > ) 4# " >
A*& (": *
3
( * P * - > 0 $ * , ? * $ > 7 % = C @ $= $ / E - 0 P * #-$ > - &(,( D $" ? $ > G * - 2 x − x0 + 3/2b 0 x0 − 3b/2 ≤ x ≤ x0 − b/2 , b # $ 2 x − x0 1 3 −2 = 0 x0 − b/2 ≤ x ≤ x0 + b/2 , 2b 2 b 2 1 −(x − x0 ) + 3/2b = 0 x0 + b/2 ≤ x ≤ x0 + 3b/2 , 2b b = 0 .
1 B(x; x0 ) = 2b
0) x0 = xmin + (k − 1/2)b $ > C & @ x / ' k # " 0 kmax = (xmax − xmin )/b + 2 K * )> A
/ "
&(,* 9 $" B + * $ C - 3 x − x0 0 x0 − 2b ≤ x ≤ x0 − b , 2+ b $ # 3 2 x − x0 x − x0 1 = −6 + 4 0 x0 − b ≤ x ≤ x0 , −3 6b b b # $ 3 2 x − x0 x − x0 1 3 = −6 + 4 0 x0 ≤ x ≤ x0 + b , 6b b b 3 1 x − x0 = 0 x0 + b ≤ x ≤ x0 + 2b , 2− 6b b = 0 .
1 B(x; x0 ) = 6b
@ $ @ $ $ > * x0 = xmin + (k − 1)b / ' k # " 0 kmax = (xmax − xmin )/b + 3 kmax + 1 * A / "
- +.
9 " & ' * 8 # $$ $ : 6 % 8
$ : 5" 0 7 9 " ( ) ' & " $ 8&0 : 6 B & 8'* " $: B & 8, " $: 9 F &0 ) " $ F E " $ > $> % 8F> " B O# : ) & $> S L + 0 $ & ; F $ 5 0 ( > $ $ F $ > $ Y) ) 6 < % F @ $ @ $ " # $$ = * " ) 9 < % F '* " $ + $ @ $ 0 B$" P " $ @ $ G ?> $ @ $ $ 5 )$ $ '* " $ 5" $ ; D $ $ " )> )> , " $ 6( B
@ 6 ?# $$ @ B
Y) $ 66 7 , " $ 6 @ $ L ) " )> $) 69 @ $ /*G 87 * : 6 T )> $C" @ 6 )$ $ )> , " $ 5" $ 6 > $ + $ #
6 5 $ F < / $ 6; ? )* )> $ $> $ ( 5 ) + " $ $ C > $ " # ! $ 6 @ $ $> = * " ) F> " )
8
,
9 " * + $
6 " # $ $ 9 ? * " A$ F $ + $ % % " F> 5> $ % % " F> $ %# 5 )> F* ; % $> F> ( + F $ " F> 9 " , +! $ FH 6 )$ $ " $ )$ $ '* " $ ! $ 9 F ? " 5 0 ) $ $ $ %
+ $ π 9 " - ./ F ) S 6 )* '*
E " # @^? @ ? P S 9 E " P E 5C @ $ E " " $ + $ E
F> , " $ ; + , " $ ( F> + , " $ ? $$ P $" $ 6 E * $ @ $ 4$ E * $ $ ! $ 9 E * $ % =
E * $ @ $ F < + $ 5$ * ) F T $ $
E @ $ F < B
E $ F < B
; ? * $ > $ $ $ > 7
6( P @
A*& (": *
;
6 ?** ' E #) E $
" )
@ $ 66 ?** ' E #) E G @ $ 6 A * % $ )>"
5C" $ 69 A * P $ ? * $ 6 A * P $ $ $
5 ? A *
6 A * P $ +
5C" $ F> A *
9 " 0 ./ A* 0 > $> 5C @ $ 6 A* 0 > $> + 5C @ $ A* 0 #) $ " 9 B $ + #) $ * + #) $ P + $ + #) $ F $ + 5" $ ? $ @ # " ; ? $ - L ( F F> @ ) , " $ F ? & " $ 6 F T 5 * $ 9 " 1 ./ & E * $ " E
6 K 5 ) 0 P ! $ K 5 ) 0 P ! ! $ ? )* ) 9 " 2 ' $ + 9 " 3 $ / 4* p & & 4* 6 @ $ " 7 ! $ '* " $ χ2 @ $ 0 )> 4$ 9 $* 7 P$ 7 $* 7 P ) ! $ S $ - ) )>
<
,
@ $ " )> 4* * 9 " &4 $ 5 , ,) #) $ " < " P $ 9 " && + * + $ 5 $ F> 6 + * 5 $ F $ " ?# " "
? )* ) 0 $> $ 9 50 7 $ $ 6 Y) ) " F + $ " > $> 6 @ $ " @ $ 5 $ ? " *
,!
&
A=B A¯ Ω/∅ A ∪ B ,A∩ B ,A ⊂ B P {A} P {A|B} x,y,z ; k,l,m θ, µ, σ f (x) , f (x|θ) F (x) , F (x|θ) f (x) , f (x|y, θ) L(θ) , L(θ|x1 , . . . , xN ) L(θ|x1 , . . . , xN ) E(u(x)) , u(x) u(x) δx , σx (δx)2 , σx2 , " (x) σxy , "(x, y) ρxy µi µi µij , µij > γ1 , β2 , γ2
$ ,$ " A 2 A$ $ A K P B = A !, B = A *) B > & " A + $ & " A 8 " $ B : 8 . :" 8@ : " @ $ 8& :@ $ $ 8& :@ $ 8H> ) > θ: * @ $ $ E * 0
> $> " u(x) = > > $ 8% : " x @ ) $ 8 * : " x B" ) B
Y) F K $ i )0$ 0= ? $ ) F @ $ $ = B 8&A $:= '
6M 2 * *! #
,!! # 74 , : # 3 , *( (" # <7 , *( () # 8 ,*# 3 <# 7 , !# 3 (": # 3; # $ T() * &
# $ () * 8# # 4 $
# ; $ /*# ;
# <
*!#
*&
# *! # 3 /* * # 37 **:# C* # ; 6 # 2
:*! :*! ;
( (
# 7 # <
2&& & # <
! GH # * # 4
0$(
# 7 # < 0 A * *&
# 3 0$(
# 7 5 &
# 7 9
# 4 %*&
# 4 A *# 5:*
# 3 /* *(
# 0 (K #
# &
/& # &
# < 0 (M
/*! # 0 M
# ;#
2! # 4; 0& (D*(B
# ;; 0& ( * ' (" # <7 0& ( * ' () # 7 6 # = *# 4 & # 8 & $ # : *# 8 *:: 5:*
#
# 4 A(" # <7 F # ;8 "6 #
"
F # 3 ! H> # 3
&:
*# 4 # ,! *# <# #
* G *&& # <7 !
# ' 5 *# < A !6 # 7 G *&& #
# ' * #
! 3# 6 # 8
6 " # 7 # *# 7 5:*
# 9
# < # < 5 & # <8 9 ! # '* (0*( # < /! & * # < " &: 5 # < * & # 5 &
# # < 5 # A*# 47 A* $ # 4 A *# << A # ;; 5!# 7 A& 5# < A
"&& # ;< A ,# 3 A ,# 3 A *:N # 8# # 8 & ! # 83 A & 5# 87 A * & *# 3 A*&:& # A
# 8 A *6 #
&
A * # 4
: # 4 > # 33 6 %!# O** * # ": # 38 # & * # 9 # 9>
# 9 :# 9 *> 2 # ;3 *! # 38 " *# 38 9 ( 5# 8 9
# 8# 9 ! # 9&! (
# G:*&:* # 43 G:*&:* C* *& 5# 43 G:*&:* $ # 3# G$:*
# 4 && # 4 G$:* # /*! & # *& *# 7 C(6 %!#
# 3 * ! # 48 C & * # 3 C # 3# 48
: # 7;
! C(6 %!#
" *& # 7; # 78 & * # 77 C*&*** ("& * () # 3 C* !# < C* !
# < C* # ; C*
# <
"
*! 9 # /**(" # ; 9 # C* E **6 # ;7 "6 # ;4 C* $&:* "6 # ;4 C* *# 3 C* F # C* ** F # 84 C* # C* & 5# 87# C : () # 7 C* # C* F # E() # E& 5# 47 E :& # E ! '* (0*(,:# 3 E !
'*& # 3 E # E :*! # 3 E **# *# 7 G *&& # G *&& & B # C* # 7 *& *# 7 E ** 6 # 8
: # E ** 6 G *&& # D *# 8 E*(E **# < E*(
!(
# # < E* (
# < E*
# 7 '5 &&(E **
# 7 5:*
# 4 & & %*& # 3# 4
3
'5 &&(E **(,: " & B # 3# 4 '5 &&(E **(' * #
: # 4 & /& # ; D :# 3 '5 &&(E **("6 $&:* # < # < ' # ' # ,! *# 74
'
# 7; *# 77 A &: # 8< & ! # 87 ' * ' # 8 # 77 /* # 78 $ & # '
# ' #
6# ; ' C*&! * *# < ' *
K # #
' & && # <8 ' * ' # 8 ' # '* # '*& # # /* *(
# 5:*
# 3 & & *
# '* (0*( *# # D # 8 9
# 3 ! # 8 'J* & * # 3 & 'J* # "! *& * # 7 * # 8 & * # & * # 4 '* (0*(" & *# ! ! *& *# ;;
4
"
# <7
# < *
# 'J* & * # < ' *& * # <; & # <8 /& :# 3< /(
# <3
& # * G *&&
# < & * # < '* (0*(" # < ' *&
# &
)*& *# 3 '
# 3 6 %!# 3 % * %
% # % * %
: # 74 A *# 7 C* *# ) # 7 * % # 3# % $&(/ *() # < % $& 9
# 5!8 %*&
#
9
# 3 # <
/*** # 4
& * # 4
& * # D* *# 43 O! 9
/* *(" & B # ;3# ;4 O** * # 33 :&
# 4 /& &: ::*5 & E **6 # 38 /& : & 2! # 3 '*& & * # 78
/& 6 / :# 4 /0,# 4 /)# 8# <7 /(
# <3 /* *(
# *! # 38 /* * # 4< /* # 4 /*: *# /*
# < / *# 3 / * *& # ; / *
# # # 7 /* **# 43 / * # ;7 K # D
# D # # <7# 7 ) & 5# D *# <4# <8 " # C* F # " &
# " & B # 37 " # 4< " &: 5# < " :& # ": :# 38 # 38 ": * # ! # # *& # 3; M # "H:& ,!6
*# 44 "H:& # & *# ! 6 " # 4 *# 44 A* # 4 D # 4 " *& # 78# 8<
"
"!
#
" # 4
H: # 4; 2 # " E # " :*! # " # 8 "::* * & # 78 ) :*! & :# ) H> # ) # )
# ) *# << ) & 5# < ) !$ =(B
# ;3 B!6
* # 3 !
!6 #
# 3 ! *# ! *& *#
A *# < & # 4 )*& * *# 3< #
' # <
A#
"&& # ; 6 # ;< # 4
"&& *
#
6
# ;8
7
*# 4;
# * # /*! !
# 4;
& #
# 4
*#
# ! # 7 !6 # 7 2*# ;
# ! #
& *#
*& *# 8# <7
,5 *& # *() # 8 * # <7 # & * C # 2 9 # 2
# 3 2 5: & # 4 2 ! # 4 2 *# 2 # ;7 2
:*! :*! 0 (K # 7 # 7 C*&*** ("& * () # 7
(
' 9 C , "# ! # 9 F ?;7;@ " # " ! # ": # % U* ?;;;@ , 9 A* # O "J # ' )* # #$ $ ! #
# ! # B * # ?;7;@ E E$*# % % ! # 0&! B $ / ?;;@ 3 ) # & '(% # ! # %*(G*# ,& ?;8@ 4 ) G # D ) ! # + G A &# ' ) # ": # % U* ?<<@ 7 *! # E*&# & " ! # ) ! # " ?;;8@ 8 D *# # $# 0 ?;8;@ ; 9 0*# " ! # 0 * / # O5* ?;;8@ < 9 T,* # ! * " ! + , - # * " /!# " :* ?<<@ / D* # #$ $ ! '(% # ! # ": # % U* ?<<@ D , A # & '(% " - # O5* B $ / ?;;<@ ? H= ;3@ , A # ) # ) +* G*: B $ / # &*
?;;@ + 9**# #$ $ ! %% # B * ' * / # ' :* ?;8@ 3 E + " # ) . & #
,& " ,* *# * ?;8@ 4 G + = $# ! #$ $ !# 0 * / # O5* ?;8@ 7 E + " # - # * /!# % U* ?;7@ 8 9 / *5 9 0 ) *# ! - ! # , *( $# D ?;7@ ; ' 9 C D # ! # E*&# E** ?;8@
<
E
< ' ,!&* # , " # / $ & # * /( ! *# # % U* ?;7<@ * /* ' # * %% % 0 (% # / 0/' ?;8@ ;# / 9 *&*# 1
(% 2 & ! # ! , # / G 0 , , E# / & / ?;8@# * O * * " * ?"O@# (% !
# 9 ?;;@ D *# '( ( # % ' , ;7 ?;;<@ ;4 9 2 # & , & ! ) '(% # % ' 7 ?;78@ 33 O *=(% # 1 $ ( # *& 7< ?;8@# 3 D 0*5 % D
# # 1 ! %%( , - # + D " "* ;# %* # ?;87@ # A % D
# ) % # /* * /GU"),)<<# E E$*# D '*# D D
& $ # "E,0# "* ?<<@ 43 4 # - ) # E %* " 3#
+ C 9*# ": # % U* ?;88@ 7 + O D E *: # ) # % # E %* * * ' "# G$# 0# " " 9: ?;8@ 8 ' 9 C , "# ! # * # :
# 9 F# E** ?;7@ ; D *# ! '# -:$ V<<< ?<<@# * ! :!
/*
* /GU"),)<<3# EE$*# O5* ?<<3@ < D *# ! '# -:$ V<<4< ?<<@ ,$ $ # , , ": ** / 2 * # ,% # % ' ,< ?;;@ 3< 9 2 # ,% & , % # $ ;3( ?;;3@ 9 '# & 3 & # ": # ?;73@ E , " :: U # ' & '( ?;8@ # U # E , " :: E C&# & % % !# + ,& " ,* ?;83@ 8# , C**# &
% 0 4
# % ' 4 ?;8@ 77# G % '
"*# 1 % # % ' ,37 ?;84@ 7 3 E E & 9 2 # 5 $!
& , # % ' ,3 ?;;@ 34# 4 , 9 2 # ! $
% % # % ' , 37 ?<<3@ 44 7 ' "& # %! %% %$ $ ! $ # % ' ,< ?;;@ << 8 D %$# D % $# & ( %! !# , D ,*:$ ?;84@ 7 ; / '# A 0*! " "*$# " % # ,*( :$ + ; ?;;8@ 7
E
< D T,* * ' , " : ? *@# 4 # ' # % U* ?;84@ " '** # , 4 !% 9** * A ) M # D T,* * ' , " : # ' # % U* ?;84@ , *&# " ! $ # + " 0*&: " ( & < ?;;@ ,# % ! % # *# " ?<<@ , 9 2 # 3 & % #$ $ % & ' !# + " 0*&: " & 73# ?<<@# <; 3 * D ) ) ! # $ %# 0:& W G# E** ?;;@ 4 " 9 '# % # , & / # % U* ?;;;@# , 9:# # # 0*&: * "
# ?;;3@ 3< &*&V V & 7 ) +* = # # % ,% ! # ": # % U* ?<<@ 8 /' " #
$ # O ! ?<<@ ; D D*J# 3 % # % U* ?;;@ 3< "H*:# )
& # :-VV & ***& 3 : # 3 ) !# ": # % U* ?;;3@# : # ) !# $# % U* ?;;8@# "&H*: , "&*# ) # ') : # 0&! # ', ?<<@ 3 E E &# ' ) % !# ": # % U* ?;;;@ 3 U A D ": # '(% $ # /* 0OE)# , & / # % U* ?;;4@ <; 3 / D* #
% # % ' ,3 ?<<3@ 377 33 ) , * 0 (/ G# ! - * #
O # # % U* ?;8@ 34 9 + A &# D 0* # 5 %% ! /$ D 37 ?;;8@ 87 37 *# ! 0 ' ! ! 6 ,& " < ?;84@ # D 0* # ! -0 ' ! # ! ! 6 ,& + /$ 4 ?;;3@ ;8# E $# E - ! # " " # 3 ?;;<@ # 9 2 # 4 ! # /+ 0 ?<<@ 38 9 2 # 4 ! # /+ 0# ?<<@# 3; ' , " : # $ '" 4 #
D T,* * ' , " : # # % U* ?;84@