STATISTIKA MATEMATIK Windiani Erliana dan Siswadi (Edisi 15 Januari 2016) Departemen Matematika Fakultas Matematika dan Ilmu Pengetahuan Alam Institut Pertanian Bogor 2015
Daftar Isi 1 Sebaran Multivariat 1.1 Vektor Peubah Acak . . . . . . . . . . . . . 1.2 Fungsi Sebaran Bersama . . . . . . . . . . . 1.2.1 Fungsi Massa Peluang Marginal . . . 1.2.2 Fungsi Kepekatan Peluang Marginal 1.3 Nilai Harapan . . . . . . . . . . . . . . . . . 1.4 Kebebasan Vektor Peubah Acak . . . . . . . 1.5 Dekomposisi Spektrum . . . . . . . . . . . . 1.6 Matriks Koragam . . . . . . . . . . . . . . . 1.7 Sebaran Normal Multivariat . . . . . . . . . 1.8 Latihan . . . . . . . . . . . . . . . . . . . . 2 Beberapa Sebaran Kontinu 2.1 Sebaran Gamma . . . . . 2.2 Sebaran Khi-Kuadrat . . . 2.3 Sebaran t . . . . . . . . . 2.4 Sebaran F . . . . . . . . . 2.5 Teorema Student . . . . . 2.6 Latihan . . . . . . . . . .
. . . . . .
. . . . . .
. . . . . .
. . . . . .
. . . . . .
. . . . . .
. . . . . .
. . . . . .
3 Pendugaan Parameter 3.1 Penduga Titik . . . . . . . . . . . . . . . 3.2 Metode Pendugaan Titik . . . . . . . . . 3.2.1 Metode Momen . . . . . . . . . . 3.2.2 Metode Kemungkinan Maksimum 3.3 Sifat-Sifat Penduga . . . . . . . . . . . . i
. . . . . .
. . . . .
. . . . . .
. . . . .
. . . . . . . . . .
. . . . . .
. . . . .
. . . . . . . . . .
. . . . . .
. . . . .
. . . . . . . . . .
. . . . . .
. . . . .
. . . . . . . . . .
. . . . . .
. . . . .
. . . . . . . . . .
. . . . . .
. . . . .
. . . . . . . . . .
. . . . . .
. . . . .
. . . . . . . . . .
. . . . . .
. . . . .
. . . . . . . . . .
. . . . . .
. . . . .
. . . . . . . . . .
. . . . . .
. . . . .
. . . . . . . . . .
1 1 1 2 2 3 4 5 8 12 19
. . . . . .
21 21 24 27 31 34 36
. . . . .
38 38 39 39 43 52
DAFTAR ISI
ii
3.3.1 Ketakbiasan . . . . . . . . . . . . . . . . . . 3.3.2 E…siensi Relatif Penduga . . . . . . . . . . . 3.3.3 E…siensi dan Pertaksamaan Rao-Cramèr . . 3.3.4 Kekonsistenan . . . . . . . . . . . . . . . . . 3.4 Penduga Selang . . . . . . . . . . . . . . . . . . . . 3.4.1 Selang Kepercayaan Beda Dua Nilai Tengah 3.4.2 Selang Kepercayaan Nisbah Dua Ragam . . 3.5 Latihan . . . . . . . . . . . . . . . . . . . . . . . . 4 Kecukupan 4.1 Statistik Cukup . . . . . . . 4.2 Kelengkapan dan Kekhasan 4.3 Kelas Eksponen . . . . . . . 4.4 Latihan . . . . . . . . . . . 5 Pendugaan Bayes 5.1 Prinsip Minimax . . . . . . 5.2 Sebaran Prior dan Posterior 5.3 Metode Pendugaan Bayes . 5.4 Latihan . . . . . . . . . . .
. . . .
. . . .
6 Pengujian Hipotesis 6.1 Uji Paling Kuasa . . . . . . . 6.2 Uji Selalu Paling Kuasa . . . 6.3 Uji Rasio Kemungkinan . . . 6.4 Uji Rasio Peluang Bersekuens 6.5 Latihan . . . . . . . . . . . .
. . . .
. . . .
. . . . .
. . . .
. . . .
. . . . .
. . . .
. . . .
. . . . .
. . . .
. . . .
. . . . .
. . . .
. . . .
. . . . .
. . . .
. . . .
. . . . .
. . . .
. . . .
. . . . .
. . . .
. . . .
. . . . .
. . . .
. . . .
. . . . .
. . . .
. . . .
. . . . .
. . . .
. . . .
. . . . .
. . . .
. . . .
. . . . .
. . . . . . . .
. . . .
. . . .
. . . . .
. . . . . . . .
. . . .
. . . .
. . . . .
. . . . . . . .
. . . .
. . . .
. . . . .
. . . . . . . .
. . . .
. . . .
. . . . .
. . . . . . . .
. . . . . . . .
52 55 56 64 67 71 72 74
. . . .
77 77 85 88 94
. . . .
. . . .
96 96 98 100 105
. . . . .
107 . 110 . 113 . 115 . 122 . 129
. . . .
BAB 1 Sebaran Multivariat 1.1
Vektor Peubah Acak
De…nisi 1.1 Misalkan adalah ruang contoh suatu percobaan acak. Peubah acak Xi dari percobaan tersebut adalah suatu fungsi bernilai real Xi : ! R; i = 1; 2; :::; n dengan (X1 ; X2 ; :::; Xn ) disebut vektor peubah acak dimensin. Dalam bab ini, digunakan notasi vektor untuk menyatakan peubah acak X1 ; X2 ; :::; Xn : Sebagai contoh, (X1 ; X2 ; :::; Xn )0 merupakan vektor kolom X yang memiliki nilai (x1 ; x2 ; :::; xn )0 ; 8xi 2 R: X = x 0 (X1 ; X2 ; :::; X )0 = (x 0 1 ; x12 ; :::; xn ) 0 n1 x1 X1 B x2 C B X2 C B C B C B .. C = B .. C @.A @ . A xn Xn
1.2
Fungsi Sebaran Bersama
Fungsi sebaran bersama bagi vektor peubah acak tersebut dide…nisikan sebagai berikut FX (x) = P (X1
x1 ; :::; Xn
xn ) :
Jika n peubah acak X1 ; X2 ; :::; Xn adalah peubah acak diskret, maka 1
1.2 Fungsi Sebaran Bersama
FX (x) =
X
2
:::
w1 x1 ;:::;wn xn
X
p (w1 ; :::; wn ) ;
sedangkan jika n peubah acak tersebut adalah peubah acak kontinu, maka Z Z FX (x) = ::: f (w1 ; :::; wn ) dw1 :::dwn ; w1 x1 ;:::;wn xn n
@ FX (x) = f (x) ; @x1 :::@xn
dengan fungsi p dan f secara berturut-turut merupakan fungsi massa peluang dan fungsi kepekatan peluang bagi vektor peubah acak x. Contoh 1.1 Misalkan fungsi kepekatan peluang dari peubah acak X1 ; X2 ; X3 adalah sebagai berikut f (x1 ; x2 ; x3 ) = e
(x1 +x2 +x3 )
I (0 < x1 ; x2 ; x3 < 1) ;
maka fungsi sebaran bersama bagi X1 ; X2 ; X3 ialah FX1 ;X2 ;X3 (x1 ; x2 ; x3 ) = P (X1 x1 ; X2 x2 ; X3 x3 ) Rx1 Rx2 Rx3 (x +x +x ) = e 1 2 3 dx1 dx2 dx3 0 0 0
= (1
1.2.1
e
x1
) (1
e
x2
) (1
e
x3
) I (0 < x1 ; x2 ; x3 < 1) :
Fungsi Massa Peluang Marginal
De…nisi 1.2 Misalkan X1 ; :::; Xn adalah peubah acak diskret yang menyebar bersama dengan fungsi massa peluang bersama pX1 ;:::;Xn (x1 ; :::; xn ) : Fungsi massa peluang marginal dari peubah acak X1 ialah X X pX1 (x1 ) = ::: pX1 ;:::;Xn (x1 ; :::; xn ) : x2
1.2.2
xn
Fungsi Kepekatan Peluang Marginal
De…nisi 1.3 Misalkan X1 ; :::; Xn adalah peubah acak kontinu yang menyebar bersama dengan fungsi kepekatan peluang bersama fX1 ;:::;Xn (x1 ; :::; xn ) : Fungsi kepekatan peluang marginal dari peubah acak X1 ialah Z 1 Z 1 fX1 (x1 ) = ::: fX1 ;:::;Xn (x1 ; :::; xn ) dx2 :::dxn : 1
1
1.3 Nilai Harapan
1.3
3
Nilai Harapan
De…nisi 1.4 Misalkan Y = u (X1 ; X2 ; :::; Xn ) adalah fungsi terhadap vektor peubah acak (X1 ; X2 ; :::; Xn )0 : Jika X1 ; X2 ; :::; Xn adalah peubah acak diskret yang menyebar bersama dengan fungsi massa peluang bersama p (x1 ; x2 ; :::; xn ) ; maka nilai harapan dari Y dide…nisikan sebagai X X E (Y ) = ::: u (x1 ; x2 ; :::; xn ) p (x1 ; x2 ; :::; xn ) ; xn
x1
asalkan jumlah di atas konvergen mutlak. Jika X1 ; X2 ; :::; Xn adalah peubah acak kontinu yang menyebar bersama dengan fungsi kepekatan peluang bersama f (x1 ; x2 ; :::; xn ) ; maka nilai harapan dari Y dide…nisikan sebagai Z1 Z1 E (Y ) = ::: u (x1 ; x2 ; :::; xn ) f (x1 ; x2 ; :::; xn ) dx1 dx2 :::dxn 1
1
asalkan integral di atas konvergen mutlak. Teorema 1.1 Misalkan X1 ; X2 ; :::; Xn adalah peubah acak yang terde…nisi dalam ruang peluang yang sama dan k1 ; k2 ; :::; km adalah m konstanta bilangan real. Jika Yi = u (X1 ; X2 ; :::; Xn ), i = 1; 2; :::; m; adalah fungsi terhadap vektor peubah acak (X1 ; X2 ; :::; Xn )0 ; maka ! m m X X E ki Yi = ki E (Yi ) : i=1
i=1
Misalkan n Wm = (Wij ) merupakan matriks peubah acak berukuran n m yang berunsur peubah acak Wij , maka E (W) = (E (Wij )) 2 E (W11 ) E (W12 ) 6 E (W21 ) E (W22 ) 6 = 6 .. .. 4 . . E (Wn1 ) E (Wn2 )
3 ::: E (W1m ) ::: E (W2m ) 7 7 7: .. ... 5 . ::: E (Wnm )
Berikut merupakan teorema yang menunjukkan sifat linearitas dari nilai harapan. Teorema 1.2 Misalkan n Vm dan n Wm masing-masing merupakan matriks peubah acak; k An ; k Bn ; dan m Cp masing-masing merupakan matriks berunsur konstanta, maka E [AV + BW] = AE [V] + BE [W] E [AWC] = AE [W] C:
1.4 Kebebasan Vektor Peubah Acak
Bukti. Misal AV =
n P
aik Vkj
k=1
E [AV + BW] = =
E
"
n X
4
dan BW =
n P
bik Wkj ; maka
k=1 n X
aik Vkj +
k=1
aik E [Vkj ]
k=1
!
n X
bik Wkj
k=1
+
= AE [V] + BE [W] :
n X
#!
!
bik E [Wkj ]
k=1
Pembuktian E [AWC] = AE [W] C digunakan sebagai latihan.
1.4
z
Kebebasan Vektor Peubah Acak
Misalkan peubah acak X1 ; X2 ; :::; Xn memiliki fungsi kepekatan peluang bersama f (x1 ; x2 ; :::; xn ) dan fungsi kepekatan peluang marginal f1 (x1 ) ; f2 (x2 ) ; :::; fn (xn ) secara berturut-turut bagi x1 ; :::; xn : Peubah acak X1 ; X2 ; :::; Xn saling bebas jika f (x1 ; x2 ; :::; xn ) = f1 (x1 ) f2 (x2 ) :::fn (xn ) ; untuk kasus kontinu. Pada kasus diskret, X1 ; X2 ; :::; Xn dikatakan saling bebas jika p (x1 ; x2 ; :::; xn ) = p1 (x1 ) p2 (x2 ) :::pn (xn ) : Misalkan X1 ; X2 ; :::; Xn saling bebas, maka 1. P (a1 < X1 < b1 ; a2 < X2 < b2 ; :::; an < Xn < bn ) = P (a1 < X1 < b1 ) P (a2 < X2 < b2 ) :::P (an < Xn < bn ) n Q = P (ai < Xi < bi ) i=1
2. E
n Q
i=1
u (Xi ) =
n Q
E [u (Xi )] :
i=1
3. Fungsi pembangkit momen bagi peubah acak X1 ; X2 ; :::; Xn dinotasikan dengan MX (t1 ; t2 ; :::; tn ) dan dide…nisikan sebagai berikut MX (t1 ; t2 ; :::; tn ) = E [exp (t1 X1 + t2 X2 + ::: + tn Xn )] MX (t) = E [exp (t0 X)] ; 8t 2 B Rn ; dengan B = ft : hi < ti < hi ; i = 1; 2; :::; ng. Bagi fungsi sebaran marginal dari peubah acak Xi ; fungsi pembangkit momen peubah acak Xi dide…nisikan sebagai MX (0; 0; :::; 0; ti ; 0; :::; 0) ; i = 1; 2; :::; n:
1.5 Dekomposisi Spektrum
5
Teorema 1.3 Misalkan X1 ; X2 ; :::; Xn adalah peubah acak yang saling bebas dan fungsi pembangkit momen bagi Xi ialah MX i (t) ; 8i = 1; :::; n: Misalkan n P pula T = ki Xi ; dengan k1 ; :::; kn suatu konstanta, maka fungsi pembangkit i=1
momen bagi T ialah
MT (t) =
n Y i=1
MX i (ki t) ; min fhi g < t < min fhi g : i
i
Contoh 1.2 Misalkan X1 ; X2 ; X3 adalah peubah acak saling bebas yang masingmasing memiliki fungsi kepekatan peluang sebagai berikut f (x) = 2x I (0 < x < 1) : Fungsi kepekatan peluang bersama bagi peubah acak tersebut ialah f (x1 ; x2 ; x3 ) = f (x1 ) f (x2 ) f (x3 ) = 8x1 x2 x3 I (0 < x1 ; x2 ; x3 < 1) : Nilai harapan bagi 5X1 (X2 )3 + 3X2 (X3 )4 ialah Z1 Z1 Z1 0
0
5x1 (x2 )3 + 3x2 (x3 )4 8x1 x2 x3 dx1 dx2 dx3 = 2:
0
Jika peubah acak saling bebas memiliki sebaran yang sama, maka peubah acak tersebut disebut peubah acak bebas stokastik identik (bsi). Berikut ini merupakan akibat dari Teorema 1.3 untuk peubah acak bsi. Akibat 1.1 Misalkan X1 ; X2 ; :::; Xn adalah peubah acak bsi dengan fungsi pembangkit peluang MX (t) ; h < t < h dengan h > 0: Misalkan pula T = n P Xi ; maka fungsi pembangkit momen bagi T ialah
i=1
MT (t) = [MX (t)]n ; h < t < h:
1.5
Dekomposisi Spektrum
Dari aljabar linear diperoleh bahwa suatu matriks dapat didekomposisikan atau diuraikan menjadi perkalian beberapa matriks. Khususnya bagi matriks
1.5 Dekomposisi Spektrum
6
yang merupakan matriks n n, simetrik, dan semi-de…nit positif, maka dekomposisi spektrum dari ialah sebagai berikut 0
= di mana
;
merupakan matriks diagonal, = diag ( 1 ;
2 ; :::;
n) ;
::: 0 merupakan nilai eigen dari , dan kolom-kolom n matriks ialah v1 , v2 , :::, vn yang merupakan vektor eigen padanannya yang ortonormal. Nilai eigen tersebut tidak perlu ditata dari yang terbesar ke yang terkecil. Untuk analisis multivariat, tataan ini kita perlukan terkait dengan tataan ragam atau pentingnya peubah baru. Matriks merupakan 0 matriks ortogonal di mana 0 = = I. Matriks tidak bersifat khas, karena vektor eigen suatu matriks (walaupun dipilih yang merupakan vektor satuan) tidak bersifat khas. Penulisan dekomposisi tersebut dapat dituliskan dalam bentuk lain, yaitu 1
2
0
=
0
=
n X
0 i v i vi :
i=1
Secara intuisi, pendekatan matriks dengan matriks lain (misalnya yang berperingkat lebih rendah) dapat diperoleh dengan membuang beberapa matriks terakhir yang terkait dengan nilai eigen yang kecil. Karena nilai eigen dari matriks semi-de…nit positif selalu 0, maka matriks dapat ditulis dalam bentuk lain, yaitu 1 2
=
1 2
1 2
=
2
;
p p p 1 1 1 di mana 2 = 0 2 dengan 2 = diag 1; 2; : : : ; n : Misalkan merupakan matriks yang de…nit positif, yang berarti nilai eigennya selalu positif, maka 1 2
1
1 2
=
0
=
1 2
dengan 1 2
= diag
1 1 1 p ; p ;:::; p 1
2
: n
Contoh 1.3 Tentukan dekomposisi spektrum dari matriks berikut 2 3 3 0 1 =4 0 4 0 5: 1 0 3 Tentukan pula
1 2
dan
1 2
:
1.5 Dekomposisi Spektrum
7
Jawab. Berikut merupakan polinom karakteristik dari matriks 3 j
0 0 1
Ij =
1 0
4 0
3
= ( 1)2+2 (4 = (4 = (4 = (4
:
3
)
1 1
3
2
) (3 ) (3 )2 (2
) 1 + 1) (3 );
1)
sehingga nilai eigen dari matriks tersebut ialah 1
=
2
= 4;
3
= 2;
dan vektor-vektor eigen yang berpadanan dengan nilai eigen tersebut ialah 2 3 2 3 2 3 0 1 1 v1 = 4 1 5 ; v2 = 4 0 5 ; dan v3 = 4 0 5 : 0 1 1
Vektor-vektor ortonormal dari v1 ; v2 ; dan v3 tersebut secara berturut-turut ialah 2 2 3 3 2 3 1 1 0 1 1 w1 = 4 1 5 ; w2 = p 4 0 5 ; dan w3 = p 4 0 5 ; 2 2 1 1 0 sehingga matriks
dan 2
0
ialah sebagai berikut 3 2 0 p12 4 0 0 = 4 0 4 0 5; 0 = 4 1 0 0 p12 0 0 2
Jadi, dekomposisi spektrum dari matriks 2
3 0 4 0 4 1 0
3
=
2
0
0 1 5 4 0 1 = 3 0
p1 2
3
0 5:
p1 2
ialah
1=2 p1 2
0 p1 2
32 0 1 4 0 0 1 p 5 4 5 4 0 0 0 4 0 2 1 p1 p 0 0 2 0 2 2 p1 2
32
0 p1 2 p1 2
3
5:
1.6 Matriks Koragam
8 1=2
Selanjutnya, berikut merupakan matriks 1=2
1=2
=
2
0
2
0
1=2
32 0 1 2 0 0 5 4 0 2 0 5 4 p12 0 p p1 0 0 0 2 2 p 3 0 21 2 1 5: 2 p0 1 0 2 2+1 32
32 1 0 p12 p12 0 0 2 1 4 5 4 0 0 1 0 0 = 2 1 1 0 0 p12 0 p2 p2 p 2 1p 2 + 41 0 41 2 14 4 1 = 4 p0 2 p0 1 1 1 1 2 4 0 4 2+ 4 4
1.6
:
1=2
0 p12 p12 = 4 1 0 0 0 p12 p12 2 1p 2+1 2 4 = p0 1 2 1 2 =
1=2
dan
32 54 3
5:
0 p1 2 p1 2
1 0 0
0 p1 2 p1 2
0 p1 2 p1 2
3 5
3 5
z
Matriks Koragam
Misalkan Xi dan Xj masing-masing merupakan peubah acak ke-i dan ke-j dengan nilai harapan E[Xi ] = i dan E[Xj ] = j , serta koragam ij = 0 E [Xi i ][Xj j ] : Bila X = (X1 ; X2 ; :::; Xn ) adalah suatu vektor dari n peubah acak, maka 2 3 1
6 7 6 27 E (X) = 6 .. 7 ; 4.5 n
1.6 Matriks Koragam
9
dan matriks koragam (covariance matrix ) vektor peubah acak X ialah Cov (X) = E [X ] [X 2 E ([X1 1 ] [X1 6 E ([X2 2 ] [X1 6 = 6 .. 4 . E ([Xn n ] [X1 2 ::: 11 12 6 21 ::: 22 6 = 6 .. .. . . 4 . . . ::: n1 n2
]0 1 ])
::: E ([X1 ]) ::: E ([X2 1 ... 1m
1 ]) ::: 3
E ([Xn
7 .. 7 : . 5
2m 7
3
1 ] [Xm
m ])
2 ] [Xm
m ]) 7
.. . n ] [Xm
7 7 5 m ]) (1.1)
nm
Misalkan a adalah vektor berunsur konstanta yang berukuran n 1: Misalkan pula Y = a0 X adalah peubah acak, maka Y memiliki ragam bernilai nonnegatif, yaitu 0 V ar (Y ) = V ar (a0 X) = a0 Cov (X) a: Dengan demikian, matriks koragam pada 1.1 merupakan matriks semi-de…nit positif. Secara umum, kita dapat mende…nisikan matriks koragam antara vektor p-peubah acak X = (X1 ; X2 ; :::; Xp )0 dengan vektor q-peubah acak Y = (Y1 ; Y2 ; :::; Yq )0 sebagai Cov (X; Y) = E [X E (X)] [Y E (Y)]0 2 E ([X1 E (X1 )] [Y1 E (Y1 )]) 6E ([X2 E (X2 )] [Y1 E (Y1 )]) 6 = 6 .. 4 . E ([Xp E (Xp )] [Y1 E (Y1 )])
3 ::: E ([X1 E (X1 )] [Yq E (Yq )]) ::: E ([X2 E (X2 )] [Yq E (Yq )])7 7 7; .. ... 5 . ::: E ([Xp E (Xp )] [Yq E (Yq )])
sehingga Cov (X) merupakan Cov (X; X) : Selanjutnya, misalkan X dan Y merupakan vektor peubah acak dengan vektor nilai harapan X dan Y ; maka X;Y
= = = =
Cov (X; Y) E [X E (X)] [Y E (Y)]0 E (XY0 ) E (X) [E (Y)]0 0 E (XY0 ) X Y;
sehingga X
= X;X = E (XX0 )
X
0 X:
1.6 Matriks Koragam
10
Bila A dan B merupakan matriks konstanta, maka E (AX) = A E (BY) = B Y ; serta Cov (AX; BY) = = = = = = = =
X
dan
AX;BY
E [AX E (AX)] [BY E (BY)]0 E [AX AE (X)] [BY BE (Y)]0 E [AX A X ] [BY B Y ]0 0 E [A (X X )] [B (Y Y )] 0 0 E A (X X ) (Y Y) B 0 0 AE (X X ) (Y Y) B A X;Y B0 ;
sehingga Cov (AX) =
AX
=A
XA
0
:
Misalkan pula V = AX + W = BY + dengan
dan
merupakan vektor berunsur konstanta; maka E (V) = A E (W) = B Cov (V; W) = A
+ ; Y + ; 0 X;Y B ; X
sehingga Cov (V) = A
XA
0
:
Contoh 1.4 Misalkan X = [X; Y; Z]0 merupakan vektor peubah acak dengan E (X) = [1; 4; 6]0 dan matriks koragam 2 3 3 2 1 = 42 2 15 : 1 1 3
Tentukan nilai harapan serta matriks koragam dari peubah acak T dan W jika
T = 2X
Y + 3Z + 1; W =
X Y + 2Z + 2 : 2X + 4Y Z + 3
1.6 Matriks Koragam
11
Jawab. Peubah acak T dan W dapat dinyatakan sebagai suatu vektor, yaitu T = 2X Y + 3Z + 1 = [ 2; 1; 3] X+1; X Y + 2Z 1 1 2 W = = X+ 2X + 4Y Z 2 4 1
2 3
:
Selanjutnya, menentukan nilai harapan dan matriks koragam bagi masingmasing peubah acak. E (T ) = [ 2; 1; 3] E (X) + 1 2 3 1 = [ 2; 1; 3] 4 4 5 + 1 6 = 20 + 1 = 19 2 32 3 3 2 1 2 4 54 1 5 T = [ 2; 1; 3] 2 2 1 1 1 3 3 = 39 E (W) =
1 2
1 4
2 1
=
1 2
1 4
2 1
=
15 24
=
17 27
W
+
=
1 2
1 4
=
13 8 8 67
2 3
2 1 :
2 E (X) + 3 2 3 1 4 4 5+ 2 3 6
2 32 3 2 1 1 42 2 15 4 1 1 1 3 2
3 2 4 5 1 z
1.7 Sebaran Normal Multivariat
12
Contoh 1.5 Misalkan X = (X1 ; X2 ; X3 )0 , Y = (Y1 ; Y2 ; Y3 ; Y4 )0 , dan 2 3 1 3 2 5 Cov (X; Y) = 4 1 2 4 6 5 : 2 1 0 7 Tentukan :
1. Cov (X1 + 2X2
3X3 + 1; 2Y1 + Y2 + 4Y3
5Y4 + 2) :
2. Cov (V; W) jika V=
2
X1 + 2X2 3X3 + 3 4X1 2X2 + 3X3 + 4
dan W = 4
Y1
3 2Y2 + 3Y3 5Y4 + 7 5: 2Y1 + Y2 4Y3 Y4 Y1 + Y2 6Y3 + 2Y4
1. Misalkan U = X1 + 2X2 3X3 + 1 dan Z = 2Y1 + Y2 + 4Y3 maka U = [1; 2; 3] X + 1 dan Z = [2; 1; 4; 5] Y + 2:
2
Cov (U ;Z) = (1; 2; 3) 4 2. V =
1 4
2 2
3 1
Cov (V; W) =
=
1.7
X+
1 4
2 2 23 133
1 3 1 2 2 1 3 4
;
3 1
5Y4 + 2;
2
3 2 2 5 6 1 7 7 4 6 56 4 4 5 = 34: 0 7 5 2 3 2 3 1 2 3 5 7 4 5 4 4 1 Y+ 0 5 : W= 2 1 1 1 6 2 0 3
2 4
1 3 1 2 2 1
30 47 74 143
:
3
2
1 2 5 6 2 4 6 56 4 3 0 7 5
2 1 4 1
3 1 1 7 7 6 5 2
Sebaran Normal Multivariat
Pada subbab ini dibahas sebaran normal multivariat untuk vektor peubah acak dimensi-n. Misalkan vektor peubah acak Z = (Z1 ; :::; Zn )0 dengan Z1 ; :::; Zn
1.7 Sebaran Normal Multivariat
13
merupakan peubah acak bebas stokastik identik yang memiliki sebaran normal baku, Zi N (0; 1) ; i = 1; :::; n: Fungsi kepekatan peluang bagi Z ialah n Y 1 p exp fZ (z) = 2 i=1
=
1 2
=
1 2
n 2
n 2
exp
exp
1 2 z 2 i (
1X 2 z 2 i=1 i n
)
1 0 z z ; z 2 Rn : 2
Karena E (Zi ) = 0, V ar (Zi ) = 1; dan Cov (Zi ; Zj ) = 0 untuk 8i 6= j; maka 1. E (Z) = 0, 2. Cov (Z) =
Z
= E [Z
2 V ar (Z1 ) 6 0 6 =6 .. 4 . 0 2 1 0 60 1 6 = 6 .. .. . . 4. . . 0 0 = In ;
E (Z)] [Z
E (Z)]0
3 0 0 7 V ar (Z1 ) 0 7 7 .. .. .. 5 . . . 0 V ar (Zn ) 3 0 07 7 .. 7 .5 1
dengan In adalah matriks identitas berukuran n
n:
Selanjutnya, karena peubah acak Zi bebas stokastik identik, maka fungsi pembangkit momen bagi Z ialah
1.7 Sebaran Normal Multivariat
14
MZ (t) = E [exp ft0 Zg] " n # Y = E exp fti Zi g i=1
=
n Y i=1
= =
n Y i=1 n Y
E [exp fti Zi g] MZ (ti ) exp
i=1
= exp
(
1 2 t 2 i
1X 2 t 2 i=1 i n
)
1 0 t t ; 8t 2 Rn : 2
= exp
Dengan demikian, vektor peubah acak Z dikatakan memiliki sebaran normal multivariat dengan vektor nilai harapan 0 dan matriks koragam In yang dinotasikan dengan Z Nn (0; In ) : Misalkan Z memiliki sebaran Nn (0; In ) : Misalkan pula merupakan matriks simetrik dan semi-de…nit positif, serta adalah vektor berunsur konstanta. De…nisikan suatu vektor peubah acak X sebagai berikut X=
1 2
(1.2)
Z+ ;
maka diperoleh E (X) =
dan Cov (X) =
1 2
1 2
=
:
1.7 Sebaran Normal Multivariat
15
Kemudian, fungsi pembangkit momen bagi X ialah MX (t) = E [exp ft0 Xg] h n oi 1 = E exp t0 2 Z + t0 oi h n 1 = exp ft0 g E exp t0 2 Z = exp ft0 g exp
= exp ft0 g exp
1 1 2t 2 1 0 t t 2
0
1 2
t
1 = exp t0 + t0 t : 2 De…nisi 1.5 (Normal Multivariat) Vektor peubah acak X memiliki sebaran normal multivariat atau X Nn ( ; ) jika X memiliki fungsi pembangkit momen sebagai berikut 1 MX (t) = exp t0 + t0 t ; 2 untuk setiap t 2 Rn dan serta 2 Rn :
merupakan matriks simetrik, semi-de…nit positif,
1
Jika merupakan matriks de…nit positif, maka matriks 2 memiliki invers, sehingga transformasi satu-satu antara peubah acak X dan Z pada persamaan 1.2 1 2 (X Z= ) 1=2
dengan Jacobi bagi X, yaitu fX (x) =
= j j
1 (2 )
n=2
1=2
j j
1=2
exp
menghasilkan fungsi kepekatan peluang 1 (x 2
)0
1
(x
) ; x 2 Rn :
Teorema 1.4 Misalkan X Nn ( ; ). Misal Y = AX + b dengan A adalah matriks berukuran m n dan b 2 Rm , maka Y Nm (A + b; A A0 ) :
1.7 Sebaran Normal Multivariat
16
Bukti. 8t 2 Rm ; fungsi pembangkit momen bagi Y ialah MY (t) = E [exp ft0 Yg] = E [exp ft0 (AX + b)g] 0 = exp ft0 bg E exp (A0 t) X 1 0 0 = exp ft0 bg exp (A0 t) + (A0 t) (A0 t) 2 1 = exp t0 (A + b) + t0 A A0 t ; 2 di mana fungsi pembangkit momen tersebut adalah fungsi pembangkit momen bagi sebaran Nm (A + b; A A0 ) : z Misalkan X1 merupakan subvektor berdimensi m < n dari vektor peubah acak X; maka X dapat dituliskan menjadi X=
X1 X2
(1.3)
;
dengan X2 merupakan vektor berdimensi p = n m: Karena X dipartisi seperti pada persamaan 1.3, maka nilai harapan dan matriks koragam dari X juga dapat dipartisi sebagai berikut =
1 2
dan
=
11
12
21
22
;
(1.4)
dengan 11 merupakan matriks koragam bagi X1 dan 12 merupakan matriks koragam antara X1 dan X2 : Kemudian, de…nisikan matriks A sebagai berikut i h A = Im ... Omp ;
di mana Omp merupakan matriks nol m p; maka X1 = AX: Dengan menggunakan Teorema 1.4 pada transformasi tersebut, diperoleh akibat sebagai berikut:
Akibat 1.2 Misalkan X Nn ( ; ) : Jika X1 merupakan subvektor berdimensi m < n dari vektor peubah acak X (persamaan 1.3) ; maka X1 Nn ( 1 ; 11 ) : Akibat 1.2 dapat digunakan untuk mencari sebaran marginal dari peubah acak normal multivariat.
1.7 Sebaran Normal Multivariat
17
Teorema 1.5 Misalkan X Nn ( ; ) dan X dipartisi seperti pada persamaan 1.3 dan 1.4. X1 dan X2 saling bebas jika dan hanya jika 12 = O: z
Bukti. Disediakan untuk latihan.
Teorema 1.6 Misalkan X Nn ( ; ) dan X dipartisi seperti pada persamaan 1.3 dan 1.4. Asumsikan bahwa adalah matriks de…nit positif, maka sebaran bersyarat dari X1 jX2 ialah Nm
1
+
1 22
12
(X2
2) ;
11
1 22
12
Bukti. Perhatikan vektor peubah acak W = X1 maka 1 W Im X1 12 22 = X2 O Ip X2 Berdasarkan Teorema 1.4, E (W) = triks koragam Im O
Ip
11
=
1 22
12
12
1
12
11
12
21 1 22
21
12
: 1 22 X2
dan X2 ;
:
2; E
(X2 ) =
Im
22
O
O
1 22
21
12
1 22
2;
dan ma-
O Ip
:
22
Dengan demikian, berdasarkan Teorema 1.5, vektor peubah acak W dan X2 saling bebas. Karena saling bebas, sebaran bersyarat WjX2 sama dengan 1 1 sebaran marginal dari W Nm 1 12 22 2 ; 11 12 22 21 : Akibatnya, X1 jX2
Nm
1
12
1 22
jX2
Nm
1
2
+
12
1 22 X2 ;
11
12
1 22
1 22 X2 ;
11
21
;
atau W+
12
1 22 X2
12
1 22
2
+
12
12
1 22
z Contoh 1.6 Misalkan dalam suatu populasi, bobot badan dan tinggi badan pria memiliki sebaran normal bivariat. Jika diketahui bahwa rata-rata dan ragam dari bobot badan pria secara berturut-turut sebesar 60 kg dan 25 kg2 , kemudian rata-rata dan ragam dari tinggi badannya secara berturut-turut sebesar 165 cm dan 100 cm2 , serta besar korelasi antara bobot badan dan tinggi badan sebesar 0:6; maka tentukan :
21
:
1.7 Sebaran Normal Multivariat
18
a. P (160 < Y < 175) ; b. P (160 < Y < 175jX = 65) ; dengan X dan Y secara berturut-turut menyatakan bobot badan dan tinggi badan pria. Jawab. a. P (160 < Y < 175) 160
P (160 < Y < 175) = P
y
<
Y
y
y
160
= P
175
y
y y
165
= = = = =
<
175
165 10
b. P (160 < Y < 175jX = 65) Y X catatan:
2 y
=
11 ;
y
N2
;
x 2 x
=
22 ;
dan
12
=
21
11
12
21
22
=
x y:
Berdasarkan Teorema 1.6, Y jX
N2
12
(x
y
+
N2
y
+
x y 2 x
N2
+
y
y
22
(x
(x
x
10 (65 5 0:36) = 64:
E (Y jx = 65) = 165 + 0:6 V ar (Y jx = 65) = 100 (1
x) ;
12 11
21 22
x) ;
2 y
2 y
1
x) ;
60) = 171
x y 2 x 2
(
x y)
1.8 Latihan
19
Jadi, P (160 < Y < 175jX = 65) = P
160
171 8
175
171 8
= (0:5) ( 1:375) = (0:5) [1 (1:375)] = 0:6915 [1 0:9154] = 0:6069: z
1.8
Latihan
1. Misalkan X; Y; dan Z adalah tiga peubah acak diskret yang menyebar bersama dengan fungsi massa peluang pX;Y;Z (x; y; z) = c (x + y + z) I (x = 1; 2; y = 1; 2; z = 1; 3) a. Tentukan nilai c. b. Tentukan fungsi massa peluang marginal pX;Y (x; y) dan pX (x) : c. Tentukan E (X + Y + Z) : 2. Misalkan X; Y; dan Z adalah tiga peubah acak kontinu yang menyebar bersama dengan fungsi kepekatan peluang fX;Y;Z (x; y; z) = cxyz I (0
x
y
z
2)
a. Tentukan nilai c. b. Tentukan fungsi kepekatan peluang marginal fX;Y (x; y) dan fX (x) : c. Tentukan E (XY + Z) : 3. Misalkan X dan Y memiliki sebaran normal bivariat dengan 2 2 = 35 . Tentukan: y = 1; x = 16; y = 25; dan a. P (3 < Y < 8) : b. P (3 < Y < 8jX = 7) : c. P ( 3 < X < 3) : d. P ( 3 < X < 3jX =
4) :
x
= 3;
1.8 Latihan
20
4. Misalkan X N2 ( ; ). Tentukan sebaran dari vektor peubah acak (X1 + X2 ; X1 X2 ) serta tunjukkan bahwa peubah acak X1 + X2 dan X1 X2 saling bebas jika V ar (X1 ) = V ar (X2 ) : 5. Misalkan X = (X1 ; X2 ; X3 )0 memiliki sebaran N3 ( ; ) di mana (3; 2; 1)0 ; dan 2 3 5 1 2 =4 1 2 1 5 2 1 3
=
a. Tentukanlah sebaran dari vektor peubah acak (X1
X2 + 1; 2X2 + 3X3
4)0 ;
serta berikanlah korelasi dari kedua peubah acak tersebut. b. Carilah P (X1 > X2
2X3 + 3).
c. Carilah P (X1
X3 )2 > 10 .
X2
6. Buktikan bahwa X1 dan X2 saling bebas jika dan hanya jika 12 = O; di mana X Nn ( ; ) dan X dipartisi seperti pada persamaan 1.3 dan 1.4.
BAB 2 Beberapa Sebaran Kontinu 2.1
Sebaran Gamma
De…nisi 2.1 Fungsi Gamma yang dinotasikan ( ) dide…nisikan sebagai Z 1 y 1 e y dy ( )= 0
dengan Jika
> 0: = 1; maka (1) =
Z
1
e y dy = 1:
0
Jika
> 1; maka dengan menggunakan teknik integral parsial diperoleh Z 1 ( ) = ( 1) y 2 e y dy 0
= (
Oleh karena itu, jika maka
1) (
1) :
adalah bilangan bulat positif yang lebih besar dari 1,
( ) = ( = (
1) ( 1)!:
2) ::: (3) (2) (1) (1)
Misalkan suatu variabel baru y = x= di mana ( )=
Z
1
1
x
e
0
21
x=
1
> 0; maka dx
2.1 Sebaran Gamma
22
atau ekuivalen dengan 1=
Z
0
Karena
> 0;
> 0; dan f (x) =
1
1 ( )
1
x
e
x=
dx:
( ) > 0; maka 1 ( )
x
1
e
x=
I (x > 0)
merupakan fungsi kepekatan peluang dari suatu peubah acak kontinu. Peubah acak X yang memiliki fungsi kepekatan peluang tersebut disebut memiliki sebaran gamma dengan parameter dan , dinotasikan ( ; ) : Berikut merupakan ilustrasi dari sebaran gamma apabila salah satu parameternya dibuat tetap. Gambar 1 merupakan sebaran gamma dengan parameter tetap, yaitu = 2 dan parameter yang berbeda, yaitu = 1; 2; 4.
Gambar 1. Sebaran gamma dengan
= 2 dan
= 1; 2; 4
Selanjutnya, Gambar 2 merupakan sebaran gamma dengan parameter tetap, yaitu = 2 dan parameter yang berbeda, yaitu = 0:5; 1; 1:5.
2.1 Sebaran Gamma
23
Gambar 2. Sebaran gamma dengan = 0:5; 1; 1:5
= 2 dan
Fungsi pembangkit momen bagi peubah acak X yang menyebar gamma ialah Z 1 1 etx MX (t) = x 1 e x= dx ( ) Z0 1 1 x 1 e x(1 t)= dx = ( ) 0 1 = ( ) ( ) 1 t 1 1 = ;t < : (1 t) Selanjutnya, M 0 (t) = (
) (1
t)
1
(
)
dan M 00 (t) = (
)(
1) (1
t)
2
(
)2 :
Dengan demikian, sebaran gamma memiliki nilai harapan dan ragam sebagai berikut E (X) = M 0 (0) =
2.2 Sebaran Khi-Kuadrat
24
dan V ar (X) = M 00 (0) [E (X)]2 2 2 = ( + 1) 2 2 = : Teorema 2.1 Misalkan X1 ; X2 ; :::; Xn adalah peubah acak yang saling Pn bebas di mana Xi P ( i ; ) untuk i = 1; 2; :::; n: Misalkan pula Y = i=1 Xi ; maka Y ( ni=1 i ; ) :
Bukti. Dengan menggunakan asumsi kebebasan dan fungsi pembangkit momen dari sebaran gamma, diperoleh " ( n )# X MY (t) = E exp t Xi i=1
= =
n Q
i=1 n Q
E [exp ftXi g] (1
i=1
= (1
t)
t) i Pn
i=1
i
(2.1)
untuk t < P 1= : Persamaan 2.1 merupakan fungsi pembangkit momen dari z sebaran ( ni=1 i ; ) :
2.2
Sebaran Khi-Kuadrat
Sebaran khi-kuadrat merupakan kasus khusus dari sebaran gamma, yaitu jika parameter = 2r dan = 2 di mana r adalah bilangan bulat positif. Nilai harapan dan ragam dari sebaran khi-kuadrat ialah E (X) =
=
dan
r 2
2=r
r 22 = 2r: 2 Jadi, fungsi kepekatan peluang bagi peubah acak kontinu X yang memiliki 2 sebaran khi kuadrat dengan parameter r, dinotasikan dengan X (r), ialah 1 f (x) = xr=2 1 e x=2 I (x > 0) ; (r=2) 2r=2 V ar (X) =
2
=
2.2 Sebaran Khi-Kuadrat
25
di mana parameter r disebut sebagai derajat bebas dari sebaran 2 (r) : Gambar fungsi kepekatan peluang untuk r = 2; r = 4; dan r = 8 diberikan pada Gambar 1. Teorema 2.2 Misalkan X memiliki sebaran nilai harapan dari X k ada dan E X Bukti. E X
k
Z
k
=
r 2
2k
2
+k r 2
(r) : Jika k >
r=2; maka
:
1
1 x(r=2)+k 1 e x=2 dx r=2 (r=2) 2 0 r 1 +k 2r=2+k = r=2 (r=2) 2 2 r +k : = 2k 2 (r=2) =
z Akibat 2.1 Misalkan X1 ; X2 ; :::; Xn adalah peubah acak yangP saling bebas di 2 mana XiP (ri ) untuk i = 1; 2; :::; n: Misalkan pula Y = ni=1 Xi ; maka n 2 Y ( i=1 ri ) :
Bukti. Karena sebaran khi-kuadrat dengan derajat bebas r merupakan kasus khusus dari sebaran gamma yang memiliki parameter = 2r dan = 2; maka fungsi pembangkit momen bagi sebaran khi-kuadrat ialah M (t) = (1
t)
= (1
2t)
r=2
:
Dengan menggunakan asumsi kebebasan dan fungsi pembangkit momen dari sebaran khi-kuadrat, diperoleh " ( n )# X MY (t) = E exp t Xi i=1
= =
n Q
i=1 n Q
E [exp ftXi g] (1
i=1
= (1
2t)
2t) ri =2 Pn 1 2
r i=1 i
(2.2)
untuk t < 1=2: Pn Persamaan 2.2 merupakan fungsi pembangkit momen dari 2 sebaran ( i=1 ri ) : z
2.2 Sebaran Khi-Kuadrat
Teorema 2.3 Jika Z
26
N (0; 1) ; maka Z 2
2
(1) :
Bukti. Misalkan Y = Z 2 ; maka fungsi sebaran dari peubah acak Y ialah F (y) = = = = =
P (Y y) 2 P (Z y) p p y Z y P p 2P p0 Z y R y 1 2 =2 z 2 0 p2 e dz:
p Dengan menggunakan butir (8) pada Appendix untuk (y) = y; (y) = 0; 2 dan f (z; y) = p12 e z =2 ; maka diperoleh fungsi kepekatan peluang peubah acak Y yaitu f (y) = F 0 (y) = 0+2
1 p e 2
1 2
1 = p p y 1=2 e y=2 2 1 = y 1=2 1 e 1 1=2 2 2 Dengan demikian, Y = Z 2
Gamma
1 y 2
(py)
1 ;2 2
2
y=2
=
1=2
+0
I (y > 0) : 2
Akibat 2.2 Jika peubah acak X menyebar N ( ; acak V = (X )2 = 2 menyebar 2 (1) :
z
(1) : 2
);
2
> 0; maka peubah
Teorema 2.4 Jika X Nn ( ; ) dengan adalah matriks de…nit positif, 0 1 maka peubah acak W = (X ) (X ) memiliki sebaran 2 (n) : 1
1
1
Bukti. adalah matriks de…nit positif, maka = 2 2 dan 2 memi1 2 (X liki invers: Vektor peubah acak Z = ) Nn (0; In ) : Misalkan n P peubah acak W = Z0 Z = Zi2 : Karena untuk 8i = 1; 2; :::; n; Zi adalah i 1
peubah acak normal baku bebas, Zi
bsi
N (0; 1) ; maka
n P
i 1
baran
2
(n) :
Zi2 memiliki sez
2.3 Sebaran t
2.3
27
Sebaran t
Misalkan peubah acak Z menyebar N (0; 1) dan peubah acak U menyebar 2 (r) ; kedua peubah acak tersebut saling bebas. Fungsi kepekatan peluang bersama bagi Z dan U ialah f (z; u) = f (z) f (u) z2 1 = p exp 2 2
1 r 2
u(r=2) r=2 2
1
exp
u 2
I ( 1 < z < 1; u > 0)
De…nisikan suatu peubah acak Z : T =p U=r
z Dengan transformasi peubah t = p dan w = u, maka dapat diperoleh u=r fungsi kepekatan peluang gT (t) dari peubah acak T: Dari transformasi satusatu, p z t= p dan w = u , z = t w=r; u = w; u=r diperoleh
@z @t @u @t
J =
@z @w @u @w
p w=r ? = 0 1 p w = p : r Fungsi kepekatan peluang bersama bagi peubah acak T dan W = U ialah p g (t; w) = f t w=r; w jJj = p
r+1 1 w 2 r=2 2 r (r=2) 2
1
exp
w 2
1+
t2 r
I ( 1 < t < 1; w > 0) :
2.3 Sebaran t
28
Dengan demikian, fungsi kepekatan peluang marginal bagi T ialah Z1 gT (t) = g (t; w) dw 0
=
Z1 0
= p
r+1 1 p w 2 2 r (r=2) 2r=2
1 2 r (r=2) 2r=2
= p De…nisi 2.2 Jika Z
r+1 2
r
(r=2)
1 1+
1
exp
w 2
2 r+1 2 1+ !(r+1)=2 t2 r
t2 dw r !(r+1)=2
1+
t2 r
I ( 1 < t < 1) : (2.3)
2
(r) ; dan dua peubah acak tersebut Z disebut sebaran t dengan derajat saling bebas, maka sebaran dari T = p U=r bebas r, dinotasikan T t (r) ; serta fungsi kepekatan peluang dari T seperti pada persamaan 2.3. N (0; 1) ; U
Sebaran t ini dikenal juga sebagai sebaran t Student yang diperkenalkan pertama kali oleh W. S. Gosset dengan nama samaran Student. Berikut merupakan ilustrasi sebaran t dengan parameter r = 0:5; 1:5; dan 1:
Gambar 3. Sebaran t dengan parameter r = 0:5; 1:5; 1
2.3 Sebaran t
29
Teorema 2.5 Jika peubah acak T memiliki sebaran t dengan derajat bebas r, maka E (T ) = 0; V ar (T ) = Bukti. Karena T
dengan Z bebas.
r r
2
jika r
2
jika r
3:
;
t (r) ; maka
2
N (0; 1) ; U
Z T =p U=r
(r) ; dan dua peubah acak tersebut saling Z p U=r
E (T ) = E
!
= r1=2 E (Z) E U = 0:
1=2
Berdasarkan Teorema 2.2, E U
1=2
=2
r 2
1=2
1 2 r 2
;
1 > 0 , r > 1; sehingga E (T ) = 0 di mana E U 1=2 terde…nisi bila 2r 2 jika r 2: Selanjutnya, momen ke-2 dari peubah acak T ialah
E T2
Z2 U=r = rE Z 2 E U = E
1
(2.4)
:
Berdasarkan Teorema 2.2, E U
1
= 2 = =
r 2
1
r 2 r 2
1 2
r 2
1 r
1
2
;
1
1 r 2
1
2.3 Sebaran t
30
sehingga ruas kanan pada persamaan 2.4 menjadi 1 E T2 = r 1 r 2 r ; r 3: = r 2 Dengan demikian, (E (T ))2 V ar (T ) = E T 2 r = 0 r 2 r ; r 3: = r 2 z Contoh 2.1 Misalkan X1 ; X2 ; X3 ; X4 adalah peubah acak bebas dari sebaran normal baku. Tentukan nilai harapan dari peubah acak X 1 X2 + X3 W =p 2 : X1 + X22 + X32 + X42 Jawab. Karena Xi
dan
serta Xi2
2
N (0; 1) ; maka
X1
X2 + X3
N (0; 3)
X1
X + X3 p2 3
N (0; 1) ;
(1) ; sehingga X12 + X22 + X32 + X42
2
(4) :
Dengan demikian, peubah acak X1 X2 + X3 p 2 3 r = p W t (4) : 3 X12 + X22 + X32 + X42 4 Berdasarkan Teorema 2.5, nilai harapan dari W ialah p 3 2 E p W E (W ) = 2 3 p 3 = 0 2 = 0: z
2.4 Sebaran F
2.4
31
Sebaran F
Misalkan U dan Y adalah peubah acak bebas khi-kuadrat dengan derajat bebas r1 dan r2 : Fungsi kepekatan peluang bersama bagi peubah acak U dan Y ialah h (u; y) =
1 u(r1 =2) 1 y (r2 =2) 1 e (r1 =2) (r2 =2) 2(r1 +r2 )=2
(u+y)=2
I (u; y > 0) :
De…nisikan suatu peubah acak W =
U=r1 : Y =r2
u=r1 dan z = y; maka y=r2 dapat diperoleh fungsi kepekatan peluang gW (w) dari peubah acak W: Dari transformasi satu-satu,
Dengan transformasi satu-satu antara peubah w =
u=r1 dan z = y y=r2 , u = rr12 zw; y = z; w=
diperoleh J = = =
@u @z @y @z
@u @w @y @w r1 r2
z ? 0 1
r1 r2
z:
Fungsi kepekatan peluang g (w; z) dari peubah acak W dan Z = Y ialah (r =2) 1
1 r1 zw 1 z (r2 =2) g (w; z) = (r +r )=2 1 2 (r1 =2) (r2 =2) 2 r2 z r1 r1 z exp 1+ w I (0 < w; z < 1) : 2 r2 r2
1
2.4 Sebaran F
32
Dengan demikian, fungsi kepekatan peluang marginal bagi W ialah Z 1 gW (w) = g (w; z) dz 0
=
=
=
Z
(r1 =r2 )r1 =2 w(r1 =2) 1 z (r1 +r2 )=2 (r1 =2) (r2 =2) 2(r1 +r2 )=2 0 r1 r1 z z 1+ w dz: exp 2 r2 r2 1
1
(r1 =r2 )r1 =2 w(r1 =2) 1 r1 + r2 (r +r )=2 1 2 (r1 =2) (r2 =2) 2 2 2 I (w > 0) : (r1 +r2 )=2 r1 1 + r2 w (r1 =r2 )r1 =2 (r1 =2) (r2 =2)
r1 +r2 2
w(r1 =2) 1+
r1 w r2
1
(r1 +r2 )=2
I (w > 0) : (2.5)
De…nisi 2.3 Misalkan U dan Y peubah acak bebas khi-kuadrat dengan derajat bebas r1 dan r2 : Sebaran dari W =
U=r1 Y =r2
disebut sebaran F dengan derajat bebas r1 dan r2 ; dinotasikan F (r1 , r2 ) ; dengan fungsi kepekatan peluang seperti pada persamaan 2.5. Berikut merupakan ilustrasi dari sebaran F , yaitu F (5; 10) ; F (10; 5) ; dan F (10; 10) :
2.4 Sebaran F
33
Gambar 4. Sebaran F (5; 10) ; F (10; 5) ; dan F (10; 10) Teorema 2.6 Jika peubah acak W memiliki sebaran-F dengan derajat bebas r1 dan r2 , maka r2 E (X) = ; jika r2 3 r2 2 2r22 (r1 + r2 2) V ar (X) = ; jika r2 5: r1 (r2 2)2 (r2 4) z
Bukti. Analog dengan Teorema 2.5.
Contoh 2.2 Misalkan X1 ; X2 ; X3 ; X4 dan Y1 ; Y2 ; Y3 ; Y4 ; Y5 adalah peubah acak bebas dari sebaran normal baku. Tentukan ragam dari peubah acak U= Jawab. Karena Xi
5 (X12 + X22 + X32 + X42 ) : 4 (Y12 + Y22 + Y32 + Y42 + Y52 ) N (0; 1) dan Yi
N (0; 1) ; maka
X12 + X22 + X32 + X42
2
(4)
dan Y12 + Y22 + Y32 + Y42 + Y52
2
(5) ;
sehingga (X12 + X22 + X32 + X42 ) 4 U= (Y12 + Y22 + Y32 + Y42 + Y52 ) 5
F (4; 5) :
2.5 Teorema Student
34
Berdasarkan Teorema 2.6, ragam dari U ialah 2 (5)2 (4 + 5 V ar (U ) = 4 (5 2)2 (5 350 = 36 = 9:72:
2) 4)
z
2.5
Teorema Student
Teorema 2.7 Misalkan X1 ; X2 ; :::; Xn adalah peubah acak bebas stokastik identik yang menyebar N ( ; 2 ) : De…nisikan peubah acak 1X 1 X X= Xi dan S 2 = Xi n i=1 n 1 i=1 n
maka a. X
N
;
2
n
n
X
2
;
:
b. X dan S 2 saling bebas. 2 c. (n 1) S 2 = 2 (n 1) : X p memiliki sebaran t dengan derajat d. Peubah acak T = S= n bebas n 1: Bukti. Misalkan X = (X1 ; X2 ; :::; Xn )0 : Karena X1 ; X2 ; :::; Xn adalah peubah acak bebas stokastik identik dari sebaran N ( ; 2 ) ; maka X memiliki sebaran normal multivariat N ( 1; 2 I) di mana 1 merupakan vektor yang berunsur 1. Misalkan v0 = (1=n; :::; 1=n) = (1=n) 10 ; maka X = v0 X: De…n0 isikan vektor peubah acak Y = X1 X; :::; Xn X : Perhatikan transformasi peubah berikut. W=
X Y
=
v0 I 1v0
X:
Karena W adalah transformasi linear dari vektor peubah acak normal multivariat, maka berdasarkan Teorema 1.4, W memiliki sebaran normal multivariat dengan nilai harapan E (W) =
v0 I 1v0
E (X) =
v0 I 1v0
1=
0n
;
(2.6)
2.5 Teorema Student
35
di mana 0n adalah vektor yang berunsur 0 dan matriks koragam v0 I 1v0
=
v0 I 1v0
I
1=n 00n 0n I 1v0
2
=
2
0
(2.7)
:
Karena koragamnya bernilai nol, maka X saling bebas dengan Y: Dengan demikian, X juga saling bebas dengan S 2 = (n 1) 1 Y0 Y: Selanjutnya, 2 berdasarkan persamaan 2.6 dan 2.7 diperoleh bahwa X N ; n : Misalkan suatu peubah acak V =
n X
2
Xi
;
i=1
maka berdasarkan Teorema 2.2, 8i = 1; :::; n; sehingga V =
n X
2
Xi
menyebar
2
(1) ;
2
Xi
2
(n)
i=1
(lihat Akibat 2.1). Peubah acak V juga dapat dituliskan menjadi V
=
n X
Xi
!2
X + X
i=1
=
n X
Xi
X
2
+
i=1
=
(n
1) S 2 2
+
X p = n
X p = n
2
2
(2.8)
:
Karena X dan S 2 saling bebas, dua bagian pada ruas kanan persamaan 2.8, 2 2 (n 1) S 2 X X p p yaitu dan juga saling bebas. Peubah acak 2 = n = n merupakan kuadrat dari peubah acak normal baku, sehingga memiliki sebaran 2 (1) : Selanjutnya, fungsi pembangkit momen dari kedua ruas pada persamaan 2.8, yaitu (1
2t)
n=2
= E exp t
(n
1) S 2 2
(1
2t)
1=2
:
2.6 Latihan
36
Dengan demikian, E exp t
sehingga
(n
1) S 2 2
2
(n
1) S 2 2
(n
(1
2t)
n=2
(1
2t)
1=2
= (1
2t)
(n 1)=2
=
;
1) :
Selanjutnya, dapat disimpulkan bahwa peubah acak T , yaitu p X = ( = n) T = p (n 1) S 2 = ( 2 (n 1)) X p = S= n memiliki sebaran t dengan derajat bebas (n
z
1) :
Contoh 2.3 Diketahui X N (10; 25) dan X1 ; X2 ; :::; X501 adalah contoh acak dari populasi X. Tentukan nilai harapan dari ragam contoh S 2 : Jawab. Berdasarkan Teorema 2.7, E
(501 500 25
1) S 2 25
(501
1) S 2 25
2
(500) ; sehingga
= 500
E S2
= 500
E S2
=
25 500 = 25:
(500)
z
2.6
Latihan
1. Misalkan X1 dan X2 merupakan contoh acak dari sebaran dengan fkp f (x) = exp ( x)I(x > 0), maka tunjukkanlah bahwa Z = X1 =X2 merupakan peubah acak bersebaran F. Tentukan pula derajat bebasnya. 2. Tunjukkan bahwa fungsi kepekatan peluang bagi peubah acak W = U=r1 adalah seperti pada persamaan 2.5, serta tentukan momen ke-k V =r2 dari peubah acak W:
2.6 Latihan
37
W di mana W N (0; 1) dan V 3. Misalkan peubah acak T = p V =r 2 (r) saling bebas. Tunjukkan bahwa memiliki sebaran-F dengan parameter r1 = 1 dan r2 = r: 4. Misalkan X1 ; X2 ; X3 adalah tiga peubah acak bebas khi-kuadrat dengan derajat bebas masing-masing adalah r1 ; r2 ; dan r3 : a. Tunjukkan bahwa Y1 = 2 Y2 (r1 + r2 ) :
X1 X2
dan Y2 = X1 + X2 saling bebas serta
X1 =r1 X3 =r3 dan merupakan peubah X2 =r2 (X1 + X2 ) = (r1 + r2 ) acak bebas yang memiliki sebaran-F.
b. Tunjukkan bahwa
BAB 3 Pendugaan Parameter 3.1
Penduga Titik
Dalam statistika, populasi adalah sekumpulan data yang mempunyai karakteristik yang sama dan menjadi objek inferensi. Statistika inferensia mendasarkan diri pada dua konsep dasar, yaitu populasi sebagai keseluruhan data dan sampel sebagai bagian dari populasi yang digunakan untuk melakukan pendekatan terhadap populasi. Suatu populasi biasanya dijelaskan oleh suatu peubah acak X: Jika informasi mengenai sebaran f (x; ) dari peubah acak X diketahui, maka informasi mengenai populasi tersebut juga akan diketahui. Misalkan X1 ; X2 ; :::; Xn adalah peubah acak yang memiliki fungsi kepekatan peluang f (x; ) yang sama dengan populasi, maka X1 = x1 ; X2 = x2 ; :::; Xn = xn merupakan data atau nilai amatan sampel yang digunakan untuk mewakili populasi. Misalkan X adalah peubah acak yang memiliki fungsi kepekatan peluang f (x; ) atau fungsi massa peluang p (x; ), di mana merupakan suatu bilangan real atau vektor bilangan real yang tidak diketahui. Asumsikan bahwa 2 merupakan himpunan bagian dari Rp untuk p 1: Dalam tulisan ini, kadangkala notasi f (x; ) digunakan baik sebagai fungsi kepekatan peluang atau fungsi massa peluang peubah acak X, yang hasilnya berlaku baik untuk kasus peubah acak kontinu maupun diskret. Sebagai contoh, merupakan vektor ( ; 2 ) jika X N ( ; 2 ) atau merupakan peluang sukses p jika X memiliki sebaran binomial. Informasi mengenai parameter dapat diketahui berdasarkan sampel X1 ; X2 ; :::; Xn : De…nisi 3.1 Peubah acak X1 ; X2 ; :::; Xn disebut sebagai sampel acak dari 38
3.2 Metode Pendugaan Titik
39
peubah acak X jika peubah-peubah acak tersebut saling bebas dan masingmasing memiliki sebaran yang sama dengan sebaran X. De…nisi 3.2 Misalkan n peubah acak X1 ; X2 ; :::; Xn merupakan sampel acak dari X yang memiliki sebaran f (x; ). Fungsi dari sampel yang tidak bergantung pada parameter , yaitu T = T (X1 ; X2 ; :::; Xn ) disebut sebagai statistik. Statistik T yang dide…nisikan pada de…nisi 3.2, digunakan untuk menduga parameter : Dalam hal ini, T (X1 ; X2 ; :::; Xn ) disebut sebagai penduga (estimator) titik bagi yang dilambangkan dengan ^ dan T (x1 ; x2 ; :::; xn ) disebut sebagai dugaan (estimate) titik bagi : Sebagai contoh, andaikan X1 ; X2 ; :::; Xn merupakan sampel acak dari suatu sebaran dengan nilai harapan dan ragam 2 ; maka 1 X 1X Xi dan ^ 2 = S 2 = Xi n i=1 n 1 i=1 n
^=X=
n
X
2
merupakan penduga titik bagi dan 2 ; serta dugaan titik bagi ialah n n 1X 1 X 2 x= xi dan s = (xi x)2 : n i=1 n 1 i=1
dan
2
Pada pendugaan titik secara parametrik, diasumsikan bahwa sebaran populasi f (x; ) diketahui, sehingga pendugaan yang dilakukan hanya pada parameter yang tidak diketahui, yaitu parameter atau fungsi dari parameter ; misalkan k ( ) : Pendugaan tersebut dilakukan berdasarkan informasi yang tersedia dari sampel. Terdapat beberapa metode untuk melakukan pendugaan titik, di antaranya metode momen dan metode kemungkinan maksimum.
3.2 3.2.1
Metode Pendugaan Titik Metode Momen
Misalkan X1 ; X2 ; :::; Xn merupakan sampel acak dari populasi X dengan fungsi kepekatan atau fungsi massa peluang f (x; 1 ; 2 ; :::; m ) di mana 1 ; 2 ; :::; m merupakan parameter-parameter yang tidak diketahui. Misalkan pula E X k = gk ( 1 ;
2 ; :::; m )
3.2 Metode Pendugaan Titik
40
merupakan momen ke-k dari populasi. Selanjutnya, misalkan 1X k X n i=1 i n
Mk =
merupakan momen ke-k dari sampel. Dengan menggunakan metode momen, penduga bagi m-parameter diperoleh dengan cara mencari solusi dari persamaan penduga m-momen pertama (jika ada) yang memberi solusi tunggal (khas) dari X; yaitu g1 ^1 ; ^2 ; :::; ^m
= M1
g2 ^1 ; ^2 ; :::; ^m
= M2
g3 ^1 ; ^2 ; :::; ^m
= M3
gm ^1 ; ^2 ; :::; ^m
.. . = Mm :
Contoh 3.1 Misalkan X1 ; X2 ; :::; Xn adalah sampel acak dari populasi X dengan fungsi kepekatan peluang 1 f (x; ) = I (0 < x < ) Tentukan penduga bagi
dengan menggunakan metode momen.
Jawab. Berdasarkan fungsi kepekatan peluang f (x; ) ; maka X
ser-
agam (0; ) ; sehingga E (X) = = g1 ( ) : Dengan menggunakan metode 2 momen diperoleh g1 ^
= M1 ; ^ 2
Jadi, penduga bagi
= X:
ialah ^ = 2X: z
Contoh 3.2 Misalkan X N ( ; 2 ) dan X1 ; X2 ; :::; Xn adalah contoh acak dari populasi X. Tentukan penduga bagi dan 2 dengan menggunakan metode momen.
3.2 Metode Pendugaan Titik
Jawab. Karena X
41 2
N( ;
), maka
E (X) = E X2 =
2
+
2
;
sehingga g1 g2
; ;
2
= =
2
2
+
2
:
Dengan metode momen, g1 ^ ; ^ 2 g2 ^ ; ^
= M1
2
= M2 ;
sehingga 1X Xi = X; n i=1 n
^ =
1X 2 X = n i=1 i n
2
^ +^
2
^
2
1X 2 = X n i=1 i
^2
=
X2
n
1X 2 X n i=1 i n
1X Xi = n i=1 n
Jadi, penduga bagi parameter 1 Pn 2 dan ^ 2 = X : i=1 Xi n
2
dan
X
2
:
secara berturut-turut ialah ^ = X z
Contoh 3.3 Misalkan X1 ; X2 ; :::; Xn adalah sampel acak dari populasi X dengan fungsi kepekatan peluang f (x; ) = x
1
I (0 < x < 1)
di mana 0 < < 1 ialah parameter yang tidak diketahui. Dengan menggunakan metode momen, tentukan penduga bagi . Jika x1 = 0:2; x2 = 0:6; x3 = 0:5; x4 = 0:3 adalah nilai amatan dari empat sampel acak, maka tentukan dugaan bagi :
3.2 Metode Pendugaan Titik
42
Jawab. Nilai harapan bagi X dengan f (x; ) = x
E (X) =
Z1
xf (x; ) dx
=
Z1
x x
1
I (0 < x < 1) ialah
0
1
dx
0
=
+1
;
sehingga g1 ( ) =
+1
:
Dengan metode momen, M1 = g1 ^ ^ X =
^+1 X ^ = ; 1 X
dengan X adalah rata-rata dari sampel. Dengan demikian, statistik adalah penduga bagi ; ^=
X 1
X
X
: 1 X Karena x1 = 0:2; x2 = 0:6; x3 = 0:5; x4 = 0:3, diperoleh x = 0:4, sehingga dugaan bagi ialah 0:4 2 = : 1 0:4 3 z Contoh 3.4 Misalkan X1 ; X2 ; :::; Xn adalah sampel acak dari sebaran seragam ( ; ) ; < : Dengan menggunakan metode momen, tentukan penduga bagi dan . Untuk ukuran sampel n = 9 dengan nilai-nilai amatan 0:5; 0:6; 0:1; 0:9; 1:3; 1:6; 0:7; 0:9; dan 1:0, tentukanlah dugaan bagi dan :
3.2 Metode Pendugaan Titik
43
Jawab. Karena E (X) = +2 = g1 ( ; ) dan E (X 2 ) = g2 ( ; ) ; maka dengan metode momen diperoleh
1 3
^+^ 1X = Xi = Q1 ; 2 n i=1
2
+
+
2
n
1X 2 X = Q2 : n i=1 i
(3.1)
n
2 1 2 ^ + ^^ + ^ 3
=
(3.2)
Dari persamaan 3.1 dan 3.2, diperoleh ^ + ^ = 2Q1 , ^ = 2Q1 ^ 2
^ 2 + ^ ^ + ^ = 3Q2 2 , 2Q1 ^ + 2Q1 2 , ^
2 ^ Q1 + 4Q21 q
2Q1 , ^ 1;2 = , ^ 1;2 = Q1 , ^ 1;2 = Q1
Karena ^ < ^ ; maka
^ ^ + ^ 2 = 3Q2
4Q21
3Q2 = 0 4(4Q21 3Q2 )
p 2 p3 (Q2 3 (Q2
Q21 ) Q21 ):
q ^ = Q1 3 (Q2 q ^ = Q1 + 3 (Q2
Q21 ) Q21 ):
Untuk ukuran sampel n = 9 dengan nilai-nilai amatan 0:5; 0:6; 0:1; 0:9; 1:3; 1:6; 0:7; 0:9; dan 1:0 akan diperoleh dugaan bagi Q1 sebesar 0:84 dan dugaan bagi Q2 sebesar 0:89 serta dugaan bagi sebesar 0:096 dan dugaan bagi sebesar 1:584: z Dari Contoh 3.4, dugaan yang diperoleh dengan metode momen tidak memberikan dugaan yang layak, karena untuk menduga yang seharusnya bernilai lebih besar sama dengan 1:6, diperoleh dugaannya sebesar 1:584:
3.2.2
Metode Kemungkinan Maksimum
De…nisi 3.3 Misalkan X1 ; X2 ; :::; Xn adalah sampel acak dari populasi X dengan fungsi kepekatan peluang f (x; ), di mana adalah parameter yang
=
3.2 Metode Pendugaan Titik
44
tidak diketahui dalam ruang parameter . Fungsi kemungkinan atau likelihood function; L ( ; x) ; dide…nisikan sebagai berikut L ( ; x) =
n Y
f (xi ; ) :
i=1
Catatan : L ( ; x) adalah fungsi kepekatan bersama dari sampel. Karena L ( ; x) merupakan fungsi dari , maka kita juga dapat menggunakan notasi L( ): De…nisi 3.4 Suatu fungsi dari X, katakanlah ^ = ^ (X) disebut penduga kemungkinan maksimum bagi bila ^ = Arg sup L ( ; X) : 2
Berikut merupakan langkah-langkah untuk menentukan penduga kemungkinan maksimum. 1. De…nisikan fungsi kemungkinan L ( ) untuk amatan sampel x1 ; x2 ; :::; xn ; n Y L( ) = f (xi ; ) : i=1
2. Perhatikan bahwa setiap nilai yang memaksimumkan L ( ) juga akan memaksimumkan fungsi log-kemungkinan ln L ( ), sehingga untuk memudahkan perhitungan kita tentukan yang memaksimumkan ln L ( ) : 3. Nyatakan sebagai ^ untuk memperoleh penduga kemungkinan maksimum bagi dengan menggantikan amatan sampel dengan peubah acaknya. Contoh 3.5 Misalkan dan X1 ; X2 ; :::; Xn adalah sampel acak dari populasi X dengan fungsi kepekatan peluang 1 f (x; ) = I (0 < x < ) : Tentukan penduga bagi mum.
dengan menggunakan metode kemungkinan maksi-
3.2 Metode Pendugaan Titik
45
Jawab. Fungsi kemungkinan dari contoh ialah L( ) = =
n Y
i=1 n Y
f (xi ; ) 1
;
> xi (i = 1; 2; :::; n)
i=1
1
= ln L ( ) = ln = Ruang parameter
n
> max fx1 ; :::; xn g
; 1
n
n ln :
terhadap L ( ) ialah = f 2 R j xmax <
Selanjutnya, tentukan dari ln L ( ) ialah
< 1g = (xmax ; 1) :
yang memaksimumkan ln L ( ) : Turunan pertama d d ln L ( ) = [ n ln ] d d n = < 0:
Karena d lndL( ) < 0; maka ln L ( ) merupakan fungsi turun. Dengan demikian, = xmax memaksimumkan fungsi ln L ( ) : Jadi, penduga kemungkinan maksimum bagi ialah ^ = X(n) ; di mana X(n) adalah statistik tataan ke-n dari sampel.
z
Contoh 3.6 Jika X1 ; X2 ; :::; Xn adalah sampel acak dengan fungsi kepekatan peluang f (x; ) = e x I (x > 0) ; maka tentukan penduga kemungkinan maksimum bagi :
3.2 Metode Pendugaan Titik
46
Jawab. Fungsi kemungkinan dari sampel ialah L( ) =
n Y
f (xi ; )
i=1
ln L ( ) = ln = =
"
n X
n Y
i=1 n X
#
f (xi ; )
i=1
ln f (xi ; ) ln
xi
e
i=1
=
n X
[ln
xi ]
i=1
n X
= n ln
xi :
i=1
Kemudian, tentukan nilai maksimum dari ln L ( ) :
d d
"
n ln
d ln L ( ) = 0 d # n X xi = 0
n
i=1 n X
xi = 0
i=1
n
=
n X
xi
i=1
=
1 : x
Turunan kedua bagi ln L ( ) ialah d2 ln L ( ) n = 2 2 d 2 d ln L ( ) = nx2 < 0: 2 d Dengan demikian, penduga kemungkinan maksimum bagi ^= 1: X
ialah
3.2 Metode Pendugaan Titik
47
z Contoh 3.7 Jika X1 ; X2 ; :::; Xn adalah sampel acak dengan fungsi kepekatan peluang f (x; ) = (1 ) x I (0 < x < 1) ; maka tentukan penduga kemungkinan maksimum bagi : Jawab. Fungsi kemungkinan dari sampel ialah L( ) =
n Y
f (xi ; )
i=1
ln L ( ) = ln =
"
n X
n Y
#
f (xi ; )
i=1
ln f (xi ; )
i=1
=
n X
ln (1
) xi
i=1
= n ln (1
)
n X
ln xi :
i=1
Kemudian, tentukan nilai maksimum dari ln L ( ) :
d d
"
n ln (1
) n 1
d ln L ( ) = 0 d # n X ln xi = 0 i=1 n X
ln xi = 0
i=1
1X = ln xi n i=1 n = 1 + Pn : i=1 ln xi n
1
1
Turunan kedua bagi ln L ( ) ialah d2 ln L ( ) = d 2 =
n (1 )2 P 2 ( ni=1 ln xi ) < 0: n
3.2 Metode Pendugaan Titik
48
Dengan demikian, L ( ) maksimum bila n
= 1 + Pn
i=1
ln xi
;
sehingga penduga kemungkinan maksimum bagi
ialah
^ = 1 + Pn n : i=1 ln Xi
z
Contoh 3.8 Misalkan dan X1 ; X2 ; :::; Xn adalah sampel acak dari populasi X yang menyebar N ( 1 ; 2 ) : Tentukan penduga bagi 1 dan 2 dengan menggunakan metode kemungkinan maksimum. Jawab. Fungsi kemungkinan dari sampel tersebut ialah L ( 1;
2)
=
n Y
f (xi ;
1; 2)
i=1
=
n Y i=1
= (2 ln L ( 1 ;
2)
=
1 p 2 2)
exp 2 n=2
n ln (2 ) 2
exp
"
2 " P n
n ln 2
2 1)
(xi
2
2
i=1 (xi 2 2 Pn
#
i=1
2 1)
(xi 2 2
# 1)
2
:
3.2 Metode Pendugaan Titik
49
Kemudian, tentukan nilai maksimum dari ln L ( 1 ; @ ln L ( 1 ; @ 1 Pn 2 i=1 (xi 2 2
2)
2) :
= 0
1)
1 1
^1
= 0 Pn i=1 xi = n = x; = X;
@ ln L ( 1 ; 2 ) = 0 @ 2 Pn 2 (xi n 1) + i=1 = 0 2 2 2 ( 2 )2 Pn 2 n 1) i=1 (xi = 2 2 2 2 ( 2) Pn i=1 (xi 2 = n
(3.3)
2 1)
:
(3.4)
Selanjutnya, substitusikan 3.3 pada 3.4 untuk menentukan penduga kemungkinan maksimum bagi 2 ; yaitu ^2 =
Pn
i=1
Xi n
X
2
: z
Contoh 3.9 Misalkan dan X1 ; X2 ; :::; Xn adalah sampel acak dari populasi X yang menyebar gamma dengan parameter dan : Tentukan penduga bagi dan dengan menggunakan metode kemungkinan maksimum.
3.2 Metode Pendugaan Titik
50
Jawab. Fungsi kemungkinan dari sampel tersebut ialah L( ; ) = =
n Y
i=1 n Y i=1
f (xi ; ; ) 1 ( )
1 = [ ( )]n ln L ( ; ) =
1
xi
n
e
n Y i=1
n ln ( )
xi =
xi
!
1
n ln + (
n 1X
exp
xi
i=1
1)
n X
!
ln xi
i=1
n 1X
xi :
i=1
Kemudian, tentukan nilai maksimum dari ln L ( ; ) : @ ln L ( ; ) = 0 @ Pn xi n = 0 + i=12 Pn i=1 xi n = =
n ( )
0
( )
x
(3.5)
;
@ ln L ( ; ) = 0 @ n X n ln + ln xi = 0 i=1
0
( ) ( )
n 1X ln + ln xi = 0 n i=1 0
( ) + ln ( )
=
1X ln xi : n i=1 n
(3.6)
3.2 Metode Pendugaan Titik
51
Selanjutnya, substitusikan 3.5 pada 3.6 untuk menentukan penduga kemungkinan maksimum bagi ; 0
0
0
( ) + ln ( )
1X ln xi n i=1 n
=
x 1X ( ) + ln = ln xi ( ) n i=1 n
( ) + ln x ( ) 0
( ) ( )
1X = ln xi n i=1 n
ln
1X = ln xi n i=1 n
ln
ln x:
(3.7)
Perhatikan bahwa persamaan 3.7 merupakan persamaan implisit, sehingga dibutuhkan analisis numerik untuk menentukan penduga kemungkinan maksimum bagi ; yaitu ^ dan penduga kemungkinan maksimum bagi ialah ^ = X: ^
(3.8)
z Penduga kemungkinan maksimum ^ bagi parameter memiliki sifat invarian. Sifat invarian tersebut menyatakan bahwa jika ^ adalah penduga kemungkinan maksimum bagi , maka g ^ adalah penduga kemungkinan maksimum bagi g ( ) : Sifat tersebut dinyatakan dalam teorema berikut. Teorema 3.1 Misalkan ^ adalah penduga kemungkinan maksimum bagi , maka penduga kemungkinan maksimum bagi g ( ) adalah g ^ : Berikut merupakan contoh yang menjelaskan Teorema 3.1. Contoh 3.10 Jika X1 ; X2 ; :::; Xn adalah sampel acak dengan fungsi kepekatan peluang f (x; ) = e x I (x > 0) ; p 2 maka tentukan penduga kemungkinan maksimum bagi + 5:
Jawab. Berdasarkan Contoh 3.6, diperoleh penduga kemungkinan maksimum dari ialah ^= 1; X
3.3 Sifat-Sifat Penduga
52
makap dengan menggunakan Teorema 3.1, penduga kemungkinan maksimum 2 + 5 ialah bagi r 1 + 5: X2 z
3.3
Sifat-Sifat Penduga
Secara umum, perbedaan penggunaan metode pendugaan akan menghasilkan penduga yang berbeda. Seperti pada Contoh 3.1 dan Contoh 3.5, jika X seragam (0; ) dan X1 ; X2 ; :::; Xn adalah sampel acak dari populasi X, maka penduga yang diperoleh dengan metode momen ialah ^1 = 2X; sedangkan penduga yang diperoleh dengan metode kemungkinan maksimum ialah ^2 = X(n) : Untuk menentukan manakah penduga yang lebih baik, perlu diperiksa apakah penduga tersebut memenuhi sifat-sifat penduga yang baik. Suatu penduga dikatakan baik apabila memenuhi sifat-sifat berikut, yaitu ketakbiasan, memiliki ragam minimum, dan konsisten.
3.3.1
Ketakbiasan
De…nisi 3.5 Misalkan X adalah peubah acak dengan fungsi kepekatan atau fungsi massa peluang f (x; ) ; 2 : Misalkan pula X1 ; X2 ; :::; Xn adalah sampel acak dari X dan T merupakan suatu statistik. T dikatakan penduga takbias bagi jika E (T ) = ; 8 2 : Jika E (T ) 6= ; maka T disebut penduga bias bagi : Bias dari ^; yang dinotasikan B ^; ; dide…nisikan sebagai B ^;
=E ^
:
Jika lim B ^;
n!1
= 0 atau lim E (T ) = ; n!1
maka ^ merupakan penduga takbias asimtotik bagi :
3.3 Sifat-Sifat Penduga
53
Contoh 3.11 Misalkan X1 ; X2 ; :::; Xn adalah sampel acak dari sebaran normal dengan nilai harapan dan ragam 2 : Apakah penduga bagi dan 2 yang telah ditunjukkan pada Contoh 3.2 merupakan penduga takbias? 2
Jawab. Berdasarkan Contoh 3.2, penduga bagi dan ialah n 1X 2 2 ^ = X dan ^ = Xi X : n i=1 Karena X bagi :
N
;
2
n
; maka E X
# n 1X 2 = E Xi X n i=1 " n n 1 1 X = E Xi n n 1 i=1 " n n 1 1 X = E Xi n n 1 i=1 n
=
1
n 2
= Karena
n
1 2
S2
2
n
E
Pn
i=1
n
1 2
#
S2 ;
(3.9)
2
=
6= Xi
X
2
#
E S2
=
1 n
X
2
1), maka persamaan 3.9 menjadi
(n
E ^2
Jadi, ^ 2 =
= : Jadi, X adalah penduga takbias
"
E ^2
berturut-turut
X
2
n n
(n 1
1) 2
n 2 :
merupakan penduga bias bagi
2
:
z
3.3 Sifat-Sifat Penduga
54
Pada Contoh 3.11, B ^2;
lim B ^ 2 ;
= E ^2 n 1 = n
2
2
=
n!1
2 2
2
n
lim
1
2
2
n
n!1
2
=
lim
n
n!1
= 0: = 0; maka ^ 2 merupakan penduga takbias asimtotik n 1 2 2 bagi 2 : Selanjutnya, berdasarkan fakta bahwa (n 1) ; maka S 2
Karena lim B ^ 2 ;
2
n!1
n
E
1 2
S2
=n
1;
yang berarti bahwa 2
E S
2
=
n
1
Jadi, 1
2
S =
n
1
n X
(n
Xi
1) =
X
2
:
2
i=1
merupakan penduga takbias bagi 2 : Penduga takbias kadang dapat memberi dugaan yang tidak layak seperti pada contoh berikut. Contoh 3.12 Misalkan X
P oisson ( ) ;
f (x; ) =
> 0 dengan
x
e x!
I (x = 0; 1; 2; :::) :
Ingin diperoleh penduga takbias bagi e 3 : Untuk peubah acak tersebut, berikan penduga bagi fungsi parameter g ( ) = e 3 :
3.3 Sifat-Sifat Penduga
55
Jawab. Untuk sampel acak berukuran satu; yaitu X; T (X) = ( 2)X ; diperoleh E (T (X)) = E ( 2)X =
1 X
( 2)x
x!
x=0
= e
x
e
n X ( 2 )x x! x=1
= e e = e 3:
2
Jadi, T (X) = ( 2)X merupakan penduga takbias bagi e 3 ; tetapi dugaan yang diperoleh akan kurang dari nol bila x merupakan bilangan gasal, suatu dugaan yang tidak layak digunakan bagi suatu fungsi parameter yang positif. z
3.3.2
E…siensi Relatif Penduga
De…nisi 3.6 Misalkan ^1 dan ^2 adalah dua penduga takbias bagi : Penduga ^1 dikatakan lebih e…sien daripada ^2 jika V ar ^1 < V ar ^2 : Rasio dide…nisikan sebagai berikut ^1 ; ^2 =
V ar ^2 V ar ^1
;
merupakan e…siensi relatif dari ^1 terhadap ^2 : Contoh 3.13 Misalkan X1 ; X2 ; X3 adalah tiga sampel acak dari populasi dengan nilai harapan dan ragam 2 > 0: Jika statistik X dan Y =
X1 + 2X2 + 3X3 6
adalah dua penduga takbias bagi ; maka penduga manakah yang lebih e…sien?
3.3 Sifat-Sifat Penduga
56
Jawab. Ragam dari X dan Y ialah V ar X
= V ar
X1 + X2 + X3 3
1 [V ar (X1 ) + V ar (X2 ) + V ar (X3 )] 9 1 3 2 = 9 1 2 12 2 = = 3 36
=
dan V ar (Y ) = V ar
X1 + 2X2 + 3X3 6
1 [V ar (X1 ) + 4V ar (X2 ) + 9V ar (X3 )] 36 1 = 14 2 36 14 2 = : 36
=
2 2 Jadi, 12 = V ar X < V ar (Y ) = 14 ; sehingga X merupakan penduga 36 36 yang lebih e…sien daripada Y: E…siensi relatif dari X terhadap Y ialah
X; Y =
14 7 = : 12 6 z
3.3.3
E…siensi dan Pertaksamaan Rao-Cramèr
Pada subbab sebelumnya dibahas e…siensi relatif dari dua penduga takbias dengan cara membandingkan ragamnya. Berdasarkan de…nisi e…siensi relatif penduga tersebut, timbul pertanyaan apakah terdapat penduga yang paling e…sien di antara beberapa penduga takbias tersebut? Untuk mengetahui hal tersebut, kita dapat menentukan apakah ada penduga yang paling e…sien berdasarkan batas bawah pertaksamaan Rao-Cramèr. Jika suatu penduga memiliki ragam yang nilainya sama dengan batas bawah pertaksamaan RaoCramèr, maka penduga tersebut adalah penduga yang paling e…sien.
3.3 Sifat-Sifat Penduga
57
De…nisi 3.7 Misalkan X adalah peubah acak dengan fungsi kepekatan peluang f (x; ). Andaikan f (x; ) kontinu dan terturunkan dua kali; maka informasi Fisher, dinotasikan I ( ) ; dide…nisikan sebagai Z 1 2 d ln f (x; ) f (x; ) dx: I( )= d 1 h i2 Dengan kata lain, I ( ) adalah nilai harapan dari peubah acak d ln fd(X; ) ; yaitu ! 2 d ln f (X; ) I( )=E : d Lema berikut adalah formula alternatif untuk informasi Fisher. Lema 3.1 Informasi Fisher I ( ) juga dapat dide…nisikan sebagai I( )=
E
d2 ln f (X; ) d 2
:
Bukti. Karena f (x; ) adalah fungsi kepekatan peluang, maka Z 1 f (x; ) dx = 1:
(3.10)
1
Turunkan persamaan 3.10 terhadap ; Z 1 d f (x; ) dx = 0: d 1
(3.11)
Selanjutnya, persamaan 3.11 dapat ditulis menjadi Z 1 df (x; ) 1 f (x; ) dx = 0 d f (x; ) 1 Z
Z
Z
1
d ln f (x; ) f (x; ) dx = 0 d 1
1 1 1
d ln f (x; ) df (x; ) d2 ln f (x; ) f (x; ) + dx = 0 2 d d d
d2 ln f (x; ) d ln f (x; ) df (x; ) 1 f (x; ) + f (x; ) dx = 0 2 d d f (x; ) d 1 # Z 1" 2 2 d ln f (x; ) d ln f (x; ) f (x; ) + f (x; ) dx = 0 d d 2 1
3.3 Sifat-Sifat Penduga
58
Jadi, berdasarkan persamaan di atas diperoleh Z 1 2 Z 1 2 d ln f (x; ) d ln f (x; ) f (x; ) dx: f (x; ) dx = d d 2 1 1 Dengan demikian, berdasarkan De…nisi 3.7 diperoleh Z 1 2 d ln f (x; ) I( )= f (x; ) dx: d 2 1
z
Lema 3.2 Jika X1 ; X2 ; :::; Xn adalah sampel acak dari sebaran X dengan fungsi kepekatan peluang f (x; ), maka informasi Fisher dari sampel berukuran n ialah In ( ) = nI ( ) : Bukti. Dengan menggunakan De…nisi 3.7, In ( ) = = = = =
d2 ln f (X1 ; X2 ; :::; Xn ; ) d 2 d2 E [ln f (X1 ; ) + ::: + ln f (Xn ; )] d 2 d2 ln f (X1 ; ) d2 ln f (Xn ; ) E ::: E d 2 d 2 I ( ) + ::: + I ( ) nI ( ) : E
z Contoh 3.14 Misalkan X adalah peubah acak dari sebaran eksponensial dengan fungsi kepekatan peluang 1 f (x; ) = e
x=
I (0
x < 1) ;
> 0:
Tentukan I ( ) dengan menggunakan De…nisi 3.7 dan Lema 3.1. Jawab. Karena f (x; ) = 1 e pertama dari ln f (x; ) terhadap
x=
, maka ln f (x; ) = ialah
d ln f (x; ) = d 2 d ln f (x; ) = d
1
+
x 2
1
2x
2
3
+
x2
4:
ln
x
: Turunan
3.3 Sifat-Sifat Penduga
59
Karena X eksponensial( ) ; maka E (X) = dan E (X 2 ) = 2 2 ; sehingga dengan menggunakan De…nisi 3.7 diperoleh # " 2 d ln f (X; ) I( ) = E d = =
1
2
2
3
+
2
2
4
1
2:
Jika menggunakan Lema 3.1, maka diperlukan turunan kedua dari ln f (x; ) terhadap ; yaitu 1 2x d2 ln f (x; ) = 2 2 3: d Dengan demikian, I( ) = =
d2 ln f (X; ) E d 2 1 2X E 2 3
=
2
1
=
2
3
1
2:
z Contoh 3.15 Misalkan X1 ; X2 ; :::; Xn adalah sampel acak dari sebaran normal dengan parameter dan 2 : Tentukan informasi Fisher In ( ) : Jawab. Misalkan X
N( ;
2
) ; maka
ln f (x; ) = ln
p
= ln
p
1 2
2
1 2
exp
"
2
(x
) 2
)2
(x 2
2
2
2
#!
;
sehingga turunan pertama dan kedua dari ln f (x; ) ialah d ln f (x; ) x = 2 d 2 d ln f (x; ) 1 = : 2 d 2
3.3 Sifat-Sifat Penduga
60
Jadi, In ( ) = nI ( ) = n = n
E 1 2
d2 ln f (X; ) d 2
: z
Teorema 3.2 (Pertaksamaan Rao-Cramèr) Misalkan X1 ; X2 ; :::; Xn adalah sampel dari sebaran X f (x; ) ; 2 : Misalkan pula Y = u (X1 ; X2 ; :::; Xn ) adalah statistik dengan nilai harapan E (Y ) = k ( ) : Andaikan L ( ) adalah fungsi kemungkinan (likelihood function) yang memenuhi Z 1 Z 1 d u (x1 ; x2 ; :::; xn ) L ( ) dx1 dxn d 1 1 Z 1 Z 1 d = u (x1 ; x2 ; :::; xn ) L ( ) dx1 dxn ; d 1 1 maka V ar (Y )
(k 0 ( ))2 : nI ( )
Bukti. Nilai harapan E (Y ) = k ( ) dapat dituliskan menjadi Z 1 Z 1 u (x1 ; x2 ; :::; xn ) f (x1 ; ) f (xn ; ) dx1 k( ) = 1 1 Z 1 Z 1 = u (x1 ; x2 ; :::; xn ) L ( ) dx1 dxn 1
dxn
1
Turunkan k ( ) terhadap , sehingga Z 1 Z 1 dL ( ) 1 0 u (x1 ; x2 ; :::; xn ) k ( ) = L ( ) dx1 dxn d L( ) 1 1 Z 1 Z 1 d ln L ( ) = u (x1 ; x2 ; :::; xn ) L ( ) dx1 dxn d 1 1 " n # Z 1 Z 1 X 1 df (xi ; ) = u (x1 ; x2 ; :::; xn ) L ( ) dx1 dxn f (x ; ) d i 1 1 # " i=1 Z 1 Z 1 n X d ln f (xi ; ) = u (x1 ; x2 ; :::; xn ) L ( ) dx1 dxn : (3.12) d 1 1 i=1
3.3 Sifat-Sifat Penduga
61
De…nisikan peubah acak Z sebagai n X d ln f (Xi ; ) ; Z= d i=1
maka E (Z) = 0 dan V ar (Z) = nI ( ) : Persamaan 3.12 dapat ditulis menjadi p k 0 ( ) = E (Y Z) = E (Y ) E (Z) + Y nI ( )
dengan adalah koe…sien korelasi antara Y dan Z: Karena E (Z) = 0 dan 2 1; maka k0 ( ) p = nI ( ) Y
dan
[k 0 ( )]2 2 Y nI ( )
1:
Dengan demikian, terbukti bahwa 2 Y
[k 0 ( )]2 : nI ( ) z
De…nisi 3.8 Misalkan Y adalah penduga takbias bagi parameter . Statistik Y disebut penduga e…sien jika ragam dari Y sama dengan batas bawah pertaksamaan Rao-Cramèr. E…siensi penduga takbias Y bagi parameter dide…nisikan sebagai [k 0 ( )]2 100%: nI ( ) V ar (Y ) Jika
[k 0 ( )]2 lim = 1; n!1 nI ( ) V ar (Y )
maka penduga takbias Y disebut sebagai penduga e…sien asimtotik. Akibat 3.1 Berdasarkan asumsi pada Teorema 3.2, jika Y = u (X1 ; X2 ; :::; Xn ) adalah penduga takbias bagi , k ( ) = ; maka pertaksamaan Rao-Cramèr menjadi 1 V ar (Y ) : nI ( )
3.3 Sifat-Sifat Penduga
62
Contoh 3.16 Misalkan X1 ; X2 ; :::; Xn adalah sampel acak dari sebaran Poisson dengan nilai harapan > 0: Tunjukkan bahwa X adalah penduga e…sien bagi . Jawab. d d ln f (x; ) = (x ln d d x = 1 =
x
I( ) = E =
ln x!)
"
d ln f (X; ) d
2
#
)2
E (X 2 2
=
2
=
2
= Karena X
1
:
Poisson( ), maka V ar X =
V ar (X) = : n n
Batas bawah Rao-Cramèr: 1 = = V ar X ; nI ( ) n sehingga X merupakan penduga e…sien bagi : E…siensi penduga X bagi sebesar 1= [nI ( )] =n 100% = 100% = 100%: =n V ar X z Contoh 3.17 Misalkan X1 ; X2 ; :::; Xn adalah sampel acak dari sebaran normal dengan nilai harapan dan ragam : Tentukan e…siensi bagi penduga takbias , yaitu Pn 2 X i=1 Xi 2 S = : n 1
3.3 Sifat-Sifat Penduga
63
Jawab. d d ln f (x; ) = d d =
1 ln 2 2 1 1 + 2 (x 2 2
d2 ln f (x; ) 1 = 2 d 2 2 I( ) =
E
1 3
1 ln 2
1 (x 2
)2
)2 )2
(x
d2 ln f (X; ) d 2 1 )2 3 E (X
1 2 2 1 1 = 2 3 2 1 = : 2 2 Batas bawah pertaksamaan Rao-Cramèr: =
1 1 2 2 = 1 = : nI ( ) n n2 2 Karena Y =
Pn
i=1
Xi
X
2 2
(n
1), maka V ar (Y ) = 2 (n
(n
1)
S2 =
Y;
2
V ar S 2
=
V ar (Y )
1)2
(n 2
=
(n 1)2 2 2 = : (n 1)
2 (n
1)
Dengan demikian, V ar S 2 = E…siensi penduga S 2 bagi
2 2 1 2 2 > = : (n 1) nI ( ) n
sebesar
1= [nI ( )] V ar (S 2 )
100% =
n
1 n
100%
1) dan
3.3 Sifat-Sifat Penduga
64
yang akan sama dengan 100% untuk n ! 1, sehingga S 2 merupakan penduga e…sien asimtotik bagi : z
3.3.4
Kekonsistenan
Misalkan X1 ; X2 ; :::; Xn adalah contoh acak dari populasi X dengan fungsi kepekatan peluang f (x; ) : Misalkan ^ adalah penduga bagi sampel berukuran n: Jelas bahwa penduga tersebut akan bergantung pada ukuran contoh n: Oleh karena itu, untuk menunjukkan bahwa ^ bergantung pada n; maka notasikan ^ sebagai ^n : De…nisi 3.9 Misalkan X1 ; X2 ; :::; Xn adalah sampel acakndari o populasi X dengan fungsi kepekatan peluang f (x; ) : Barisan penduga ^n disebut konn o sisten jika barisan ^n konvergen dalam peluang ke ; yaitu ^n
8" > 0; lim P n!1
" = 0:
Teorema 3.3 Misalkan X1 ; X2 ; :::; Xn adalahnsampel acak dari sebaran X o dengan fungsi kepekatan peluang f (x; ) dan ^n merupakan barisan penduga bagi berdasarkan sampel. Jika ragam dari ^n ada untuk setiap n dan berhingga, serta 2 ^n lim E = 0; n!1
maka ^n
8" > 0; lim P n!1
" = 0:
Bukti. Berdasarkan pertaksamaan Markov diperoleh
^n
P
2
untuk setiap " > 0: Karena ^n maka
P
^n
2
2
^n
E "2
"2 2
"2 equivalen dengan ^n
E "2
=P
^n
"
^n "2
2
";
3.3 Sifat-Sifat Penduga
65
untuk setiap n 2 N: Perhatikan bahwa jika 2
^n
lim E
n!1
=0
maka lim P
n!1
^n
" = 0:
ialah B ^;
Bias bagi penduga
= E ^n
diperoleh merupakan penduga takbias, maka B ^; ditunjukkan bahwa ^
E
2
h = V ar ^ + B ^;
z . Jika penduga yang = 0: Selanjutnya, akan i2
:
(3.13)
Perhatikan bahwa E
^
2
2 = E ^
2^ +
2
2 = E ^
Jika
2 E ^ + 2 h i2 h i2 2 E ^ + E ^ 2 E ^ + = E ^ h i2 = V ar ^ + E ^ 2 E ^ + 2 h i2 = V ar ^ + E ^n h i2 = V ar ^ + B ^; : lim V ar ^ = 0 dan lim B ^;
n!1
n!1
= 0;
2
(3.14)
maka berdasarkan persamaan 3.13, lim E
n!1
^
2
= 0:
Dengan kata lain, untuk menunjukkan bahwa suatu penduga konsisten, kita cukup menunjukkan persamaan 3.14.
3.3 Sifat-Sifat Penduga
66
Contoh 3.18 Misalkan X1 ; X2 ; : : : ; Xn adalah sampel acak dari populasi normal dengan nilai harapan dan ragam 2 > 0: Tentukan apakah penduga bagi 2 ; yaitu n 1X 2 2 Xi X ^ = n i=1
merupakan penduga konsisten bagi
2
?
Jawab. Karena ^ 2 bergantung terhadap n, maka notasikan ^ 2 sebagai ^ 2n ; sehingga n 1X 2 2 ^n = Xi X : n i=1
Ragam bagi ^ 2n ialah V ar ^ 2n
= V ar =
1 V ar n2
lim V ar ^ 2n
2 (n
X
2
!
1) S 2 2
(n 1) S 2 (n V ar ; 2 2 n 2 (n 1) 4 = n2 1 1 = 2 4; 2 n n 1 1 = lim 2 4 = 0: 2 n!1 n n 4
=
n!1
n 1X Xi n i=1
1) S 2 2
2
(n
1)
3.4 Penduga Selang
Bias B ^ 2n ;
2
67
ialah B ^ 2n ;
2
= E ^ 2n
2
1X Xi n i=1 n
= E 1 = E n
=
n (n
2
2
1) S 2
2 (n
2
2
2
=
X
!
(n
E
1) S 2
2
2 2
1) n
2
2
= lim B ^ 2n ;
3.4
1 n
Pn
i=1
Xi
X
2
; 2
2
n!1
Jadi,
n
=
lim
n!1
n
= 0:
adalah penduga konsisten bagi
2
:
z
Penduga Selang
De…nisi 3.10 Misalkan X1 ; X2 ; :::; Xn adalah sampel acak dari populasi X dengan fungsi kepekatan peluang f (x; ) ; di mana adalah parameter yang tidak diketahui. Penduga selang bagi dengan peluang (1 ) adalah selang statistik [L (X1 ; X2 ; :::; Xn ) ; U (X1 ; X2 ; :::; Xn )] dengan L U sedemikian sehingga P ([L (X1 ; X2 ; :::; Xn ) dengan 0 <
U (X1 ; X2 ; :::; Xn )]) = 1
(3.15)
< 1:
Pada persamaan 3.15, P (L U ) menyatakan bahwa peluang parameter berada di antara selang acak tersebut adalah sebesar (1 ), di mana (1 ) disebut sebagai koe…sien kepercayaan. Setelah diperoleh titik atau amatan sampel, maka selang [L (x1 ; x2 ; :::; xn ) ; U (x1 ; x2 ; :::; xn )] disebut sebagai selang kepercayaan 100 (1 ) % bagi : Selang [L (x1 ; x2 ; :::; xn ) ; U (x1 ; x2 ; :::; xn )] tentunya dapat mencakup atau tidak mencakup nilai yang sebenarnya, tetapi bila sampel ini diperoleh sebanyak m kali, maka harapan kita (1 ) m kali selang ini akan mencakup nilai .
3.4 Penduga Selang
68
Contoh 3.19 Misalkan X1 ; X2 ; :::; Xn adalah sampel acak dari sebaran N ( ; dengan asumsi 2 > 0 diketahui: Misalkan pula p X merupakan nilai tengah dari sampel, maka peubah acak X = ( = n) memiliki sebaran normal baku. Dengan kata lain, X p = n
);
2
);
N (0; 1) :
Tentukan selang kepercayaan 100 (1 Jawab. Untuk 0 <
2
) % bagi :
< 1; de…nisikan bahwa ! X p P > z =2 = 2 = n
sedemikian sehingga 1
X p
= P
z
= P
p z n
=2
p z n
X
= P
Jadi, selang kepercayaan 100 (1
di mana
<X =2
=2 ;
=2
<X+p z n
<
) % bagi
p z n
x
=2
=2
!
=2
:
ialah
x+ p z n
;
=2
1X x= xi : n i=1 n
z
Contoh 3.20 Misalkan X1 ; X2 ; :::; Xn adalah sampel acak dari sebaran N ( ; dengan asumsi 2 tidak diketahui: Misalkan X dan S 2 merupakan nilai tengah dan ragam dari sampel. Tentukan selang kepercayaan 100 (1 ) % bagi : Jawab. Karena X1 ; X2 ; :::; Xn 2
X
N
;
n
dan
N( ; n
1 2
2
), maka
S2
2
(n
1) ;
3.4 Penduga Selang
dengan X dan
69
n 1 2 S n
saling bebas. Oleh karena itu, peubah acak X p S= n
T =
Untuk 0 <
t (n
1) :
(X p )
>t
X p
!
< 1; de…nisikan bahwa P
S= n
=
=2
2
sedemikian
sehingga 1
= P
t
=2
S p t =2 < X n S X p t =2 < n
= P = P
Jadi, selang kepercayaan 100 (1
di mana
S < p t =2 n S <X+p t n
) % bagi
s p t n
x
=2 ;
=2
=2
:
ialah
s x+ p t n
=2
;
1 X 1X xi dan s2 = (xi x= n i=1 n 1 i=1 n
n
x)2 : z
Contoh 3.21 Misalkan X1 ; X2 ; :::; Xn adalah sampel acak dari sebaran N ( ; dengan asumsi 2 tidak diketahui: Misalkan X dan S 2 merupakan nilai tengah dan ragam dari sampel. Tentukan selang kepercayaan 100 (1 ) % bagi 2 : Jawab. Karena X1 ; X2 ; :::; Xn n
1 2
Untuk 0 <
N( ;
S2
2 =2
2
(n
), maka 1) :
< 1; de…nisikan bahwa P
n
1 2
S2 <
2 =2
(n
1)
=
2
2
);
3.4 Penduga Selang
70
sedemikian sehingga 1
2
= P
=2 2 =2
= P
(n
1) <
(n
1)
(n
= P
2 1
1 2
1) S 2 < 1) =2 (n
Jadi, selang kepercayaan 100 (1
1
S2 <
2
<
1) S 2
(n
n
2 1
< 2
) % bagi
2 1 =2
(n
=2
(n
(n
1)
1) S 2
1) S 2 < 2 1) =2 (n (n
1) !
!
:
2
ialah ! (n 1) s2 (n 1) s2 ; ; 2 1) 2 =2 (n 1) 1 =2 (n
di mana 1
2
s =
n
1
n X
(xi
x)2 :
i=1
z
Contoh 3.22 Misalkan X adalah peubah acak Bernoulli dengan peluang sukses sebesar p dan X1 ; X2 ; :::; Xn adalah sampel acak dari sebaran X. Misalkan Pn p^ = X adalah proporsi sampel yang menyatakan sukses, dengan p^ = 1 p) = p (1 p) =n: Tentukan sei=1 Xi merupakan nilai tengah dan V ar (^ n lang kepercayaan bagi p. Jawab. Berdasarkan Teorema Limit Pusat, sebaran dari peubah acak p^ p Z=p p (1 p) =n
mendekati sebaran N (0; 1) : Bila p (1 p^ (1 p^) ; maka 1
p^
p) diganti dengan penduganya, yaitu
p
!
z
=2
Jadi, selang kepercayaan 100 (1 ) % bagi ialah p p p z =2 p (1 p) =n; p + z =2 p (1 dengan p menyatakan dugaan dari p:
p) =n ; z
3.4 Penduga Selang
3.4.1
71
Selang Kepercayaan Beda Dua Nilai Tengah
Misalkan X1 ; X2 ; :::; Xm adalah sampel acak dari sebaran X dan Y1 ; Y2 ; :::; Yn adalah sampel acak dari sebaran Y . Asumsikan bahwa masing-masing sam2 pel saling bebas dan ragam dari X dan Y berhingga, Pm dinotasikan dengan Pn 1 = 1 1 2 V ar (X) dan 2 = V ar (Y ) : Misalkan X = m i=1 Xi dan Y = n i=1 Yi adalah nilai tengah sampel dari sebaran X dan Y: Dengan demikian, X Y memiliki sebaran dengan E X
dan V ar X
2 1
2 2
+ m n Berdasarkan asumsi kebebasan sampel dan Teorema Limit Pusat, peubah acak X Y x y r Z= N (0; 1) : 2 2 S1 S2 + m n Jadi, selang kepercayaan 100 (1 ) % bagi x y ialah ! r r s21 s22 s21 s22 + ; (x y) + z =2 + (3.16) (x y) z =2 m n m n Y =
x
y
Y =
dengan s21
=
s22 =
1 m
1 1
n
1
m X
i=1 n X
(xi
(yi
x)2 ; y)2 :
i=1
Selang kepercayaan bagi beda dua nilai tengah yang dihasilkan pada persamaan 3.16 merupakan suatu pendekatan. Berikut ini akan dijelaskan hasil eksak untuk selang kepercayaan bagi beda dua nilai tengah jika diasumsikan bahwa sebaran X dan Y adalah normal dengan ragam yang sama, yaitu 21 = 22 : Asumsikan X N ( x ; 2 ) dan Y N y ; 2 saling bebas. Misalkan n = n1 + n2 adalah total dari ukuran sampel. Misalkan pula X1 ; X2 ; :::; Xn1 adalah sampel acak dari sebaran X dan Y1 ; Y2 ; :::; Yn2 adalah sampel acak dari sebaran Y . Penduga bagi x Y dengan E X Y = x y adalah X y dan 2 2 V ar X Y = n1 + n2 . Karena X dan Y saling bebas, maka X
Y q
x 1 n1
+
1 n2
y
N (0; 1) :
3.4 Penduga Selang
72
Misalkan
1) S12 + (n2 1) S22 : n1 + n2 2 Perhatikan bahwa Sp2 merupakan penduga tak bias bagi Sp2 =
(n1
1) S12 =
2
2
(n1
(n1
serta S12 dan S22 saling bebas, maka (n demikian, X T = X
=
1) S22 =
1) dan (n2
Y q (n
x
2) Sp2 = =
y
2) Sp2 = (n
Y x h q i Sp n11 + n12
2)
2 2
1 n1 2
: Karena 2
2
h q
2
+
(n2
(n
1 n2
1) ; 2) : Dengan
i
y
memiliki sebaran-t dengan derajat bebas (n 2) ; sehingga dapat disimpulkan bahwa selang kepercayaan 100 (1 ) % bagi 1 2 ialah r r 1 1 1 1 (x y) t( =2;n 2) sp + ; (x y) + t( =2;n 2) sp + n1 n2 n1 n2 dengan 1) s21 + (n2 1) s22 ; n1 + n2 2 n1 1 X = (xi x)2 ; n1 1 i=1
s2p = s21
s22 =
3.4.2
(n1
1
n2
1
n2 X
(yi
y)2 :
i=1
Selang Kepercayaan Nisbah Dua Ragam
Misalkan X1 ; X2 ; :::; Xn adalah sampel acak dari sebaran X maka Pn 2 X i=1 Xi 2 (n 1) : V = 2
N(
x;
2 x) ;
Misalkan pula Y1 ; Y2 ; :::; Ym adalah sampel acak dari sebaran Y maka Pm 2 Y i=1 Yi 2 W = (m 1) : 2
N
y;
2 y
x
y
;
3.4 Penduga Selang
73
Karena peubah acak V dan W saling bebas, maka W= (m 1) V = (n 1) sehingga untuk 0 < 1
= P
F
=2
F (m
1) ;
< 1; (m
1; n
Pm
Pni=1
1)
= P
F
=2
(m
1; n
1)
= P
F
=2
(m
1; n
1)
i=1 2 Sy = 2y Sx2 = 2x 2 Sx2 x 2 Sy2 y
Jadi, selang kepercayaan 100 (1 F
1; n
=2 (m
1; n
Yi
Y =
Xi
X =
1)
s2x ; F1 s2y
1)
=2
(m
1; n
1)
F1
=2
(m
1; n
1)
ialah
=2 (m
1; n
1)
s2x s2y
dengan s2x
1
=
n
1 1
s2y =
m
n X
1
x)2 ;
(xi
i=1 m X
y)2 :
(yi
i=1
Catatan: Misalkan Z= atau
W= (m 1) V = (n 1)
1 V = (n 1) = Z W= (m 1)
F (m
1; n
1)
F (n
1; m
1) ;
maka F
=2
(m
Bukti. Karena Z
1; n
1) =
F (m
1; n
P Z ,
P
F 1 Z
=2
1 F1
=2
(n
1; m
1)
1) ; maka (m
F1
1)
F1
2 x 2 y
) % bagi
2 y (m 2 (n x
1; n
1 F =2 (m 1;n 1)
1) = = 2:
2
:
Sx2 Sy2
=2
:
(m
1; n
1)
!
3.5 Latihan
Karena
1 Z
74
F (n
1) ; maka
1; m F1
, F
=2
=2
(n
(m
1; m 1; n
1
1) = 1) =
F
F1
(m 1; n 1 1; m =2 (n =2
1) 1)
: z
3.5
Latihan
1. Misalkan X1 ; X2 ; :::; Xn adalah sampel acak dari sebaran dengan fungsi kepekatan peluang f (x; ) = Tentukan penduga dari
dan
1
I( < x < )
dengan menggunakan metode momen:
2. Misalkan X1 ; X2 ; :::; Xn adalah sampel acak dari sebaran dengan fungsi kepekatan peluang r 1 2 exp (x )2 I (x f (x; ) = ) 2 Tentukan penduga kemungkinan maksimum bagi : 3. Andaikan X1 ; X2 ; :::; Xn merupakan sampel acak dari sebaran dengan fungsi kepekatan peluang f (x; ) = I (
0:5
x
+ 0:5)
dan Y1 < Y2 < ::: < Yn merupakan statistik-statistik tataan (order statistics)-nya. Carilah penduga bagi dengan menggunakan: (a) metode momen, (b) metode kemungkinan maksimum. Jelaskan bahwa (Y1 +Yn )=2 dan (4Y1 + 2Yn + 1)=6 masing-masing merupakan penduga kemungkinan maksimum bagi . 4. Misalkan X1 ; X2 ; :::; Xn adalah sampel acak dari sebaran mana merupakan parameter yang tidak diketahui.
(2; ) ; di
3.5 Latihan
75
P (a) Carilah sebaran dari Y jika Y = ni=1 Xi dan tentukan konstanta c sedemikian sehingga cY adalah penduga tak bias bagi :
(b) Jika n = 5, tunjukkan bahwa P 9:59 <
2Y
< 34:2 = 0:95:
5. Misalkan X1 ; X2 ; :::; Xn adalah sampel acak dari sebaran dengan fungsi kepekatan peluang f (x; ) = e
(x
)
I (x > )
di mana 1 < < 1: Periksa apakah penduga X(1) dan X 1 merupakan penduga tak bias bagi ? Di antara penduga tersebut, manakah penduga yang lebih e…sien? 6. Misalkan X1 ; X2 ; :::; Xn adalah sampel acak dari sebaran X P oisson ( ) dengan > 0: Tentukan penduga bagi dan periksa apakah penduga tersebut merupakan penduga konsisten bagi : 7. Misalkan X1 ; X2 ; :::; Xn adalah sampel acak dari sebaran dengan fungsi kepekatan peluang f (x; ) = e di mana
x
I (x > 0)
> 0:
(a) Tentukanlah I ( ) ; informasi Fisher bagi : (b) Berikanlah penduga takbias bagi : (c) Berikanlah batas bawah pertaksamaan Rao-Cramèr untuk penduga yang diperoleh dari butir b. (d) Carilah e…siensi penduga yang diperoleh dari butir b. 8. Andaikan fungsi kepekatan peluang f (x; ) = exp ( Y = (X1 + X2 + ::: + Xn )=n, maka :
x) I (x > 0) dan
(a) Tunjukkanlah bahwa W = 2nY = memiliki sebaran Khi-kuadrat dengan derajat bebas 2n. (b) Berikanlah selang kepercayaan (1
) bagi .
9. Misalkan X1 ; X2 ; :::; X11 adalah sampel acak dari sebaran normal P11 den2 gan nilai tengah (tidak diketahui) dan ragam = 9:9: Jika i=1 xi = 132; tentukanlah konstanta p k sedemikian p sehingga 90% selang kepercayaan bagi ialah 12 k 0:9; 12 + k 0:9 :
3.5 Latihan
76
10. Misalkan X dan Y adalah nilai tengah dari dua sampel acak yang saling bebas dari sebaran N ( x ; 2 ) dan N y ; 2 dengan asumsi ragam tidak diketahui. Tentukan n sedemikian sehingga P X
Y
=5 <
x
y
<X
Y + =5 = 0:90:
BAB 4 Kecukupan 4.1
Statistik Cukup
De…nisi 4.1 Misalkan X1 ; X2 ; :::; Xn adalah sampel acak dari populasi X dengan fungsi kepekatan peluang atau fungsi massa peluang f (x; ) ; 2 : Andaikan Y = u (X1 ; X2 ; :::; Xn ) merupakan statistik dengan fungsi kepekatan peluang atau fungsi massa peluang gY (y; ) ; 2 ; maka Y adalah statistik cukup bagi jika f (x1 ; :::; xn ; ) = H (x1 ; :::; xn ) ; gY (u (x1 ; :::; xn ) ; ) dengan H (x1 ; :::; xn ) tidak bergantung pada
2 :
Contoh 4.1 Misalkan X1 ; X2 ; :::; Xn adalah sampel acak dari sebaran dengan fP (x; ) = x (1 )1 x I (x = 0; 1) di mana 0 < < 1: Tunjukkan bahwa n Y = i=1 Xi adalah statistik cukup bagi : Jawab.
n Y
f (x1 ; :::; xn ; ) =
xi
(1
)1
(1
)n
xi
I (xi = 0; 1)
i=1
n x i=1 i
=
n x i=1 i
n Y
I (xi = 0; 1) :
i=1
Karena Xi
Bernoulli ( ) ; maka Y = gY (y; ) =
n y
y
Pn
i=1
)n
(1 77
y
Xi
binomial (n; ) sehingga
I (y = 0; 1; :::; n) :
4.1 Statistik Cukup
78
Sebaran bersyarat dari X1 ; X2 ; :::; Xn untuk Y = n x i=1 i
f (x1 ; :::; xn ; ) = gY (y; )
(1
n x i=1 i
n n x i=1 i
Pn
i=1
Xi = y ialah n x i=1 i
)n
n x i=1 i
)n
(1
1
=
n n x i=1 i
=
1 n y
Pn
(tidak bergantung pada parameter ) : Jadi, Y = tistik cukup bagi :
i=1
Xi merupakan staz
Contoh 4.2 Misalkan X1 ; X2 ; :::; Xn adalah sampel acak dari sebaran dengan f (x; ) = e (x ) I (x > ) : Tunjukkan bahwa Y = X(1) adalah statistik cukup bagi : Jawab. Fungsi kepekatan peluang bagi Y = X(1) ialah F (y)]n Z y e
gY (y; ) = nf (y; ) [1 = ne
(y
)
1
= ne
(y
)
1
= ne
(y
)
e
= ne
n(y
)
1 (y
e
1
I (y > ) n 1
(x
(y
)
)
dx n 1
) n 1
I (y > ) :
Sebaran bersyarat dari X1 ; X2 ; :::; Xn untuk Y = X(1) = min (Xi ) ialah Yn e (xi ) f (x1 ; :::; xn ; ) i=1 = gY (y; ) ne n(min(xi ) ) Pn exp (n i=1 xi ) = n exp ( n (min (xi ) )) Pn exp ( i=1 xi ) = n exp ( n min (xi )) (tidak bergantung pada parameter ) : Jadi, Y = X(1) merupakan statistik cukup bagi : z Teorema 4.1 (Faktorisasi Neyman) Misalkan X1 ; X2 ; :::; Xn adalah sampel acak dari sebaran dengan fungsi kepekatan peluang atau fungsi massa
4.1 Statistik Cukup
79
peluang f (x; ) ; 2 : Statistik Y1 = u1 (X1 ; X2 ; :::; Xn ) merupakan statistik cukup bagi jika dan hanya jika terdapat dua fungsi nonnegatif k1 dan k2 sehingga n Y
f (xi ; ) = k1 (u1 (x1 ; x2 ; :::; xn ) ; ) k2 (x1 ; x2 ; :::; xn )
i=1
dengan k2 (x1 ; x2 ; :::; xn ) tidak bergantung pada : Bukti. ()) Jika Y1 adalah statistik cukup, maka f (x1 ; x2 ; :::; xn ; ) = gY1 (u1 (x1 ; x2 ; :::; xn ) ; ) H (x1 ; x2 ; :::; xn ) n Y f (xi ; ) = k1 (u (x1 ; x2 ; :::; xn ) ; ) k2 (x1 ; x2 ; :::; xn ) : i=1
(() Misalkan X merupakan peubah acak kontinu. Dalam pembuktian ini, peubah y1 = u1 (x1 ; x2 ; :::; xn ) ; y2 = u2 (x1 ; x2 ; :::; xn ) ; :::; yn = un (x1 ; x2 ; :::; xn ) ditransformasikan satu-satu. Peubah y1 ; y2 ; ::: dan yn memiliki invers x1 = w1 (y1 ; y2 ; :::; yn ) ; x2 = w2 (y1 ; y2 ; :::; yn ) ; :::; xn = wn (y1 ; y2 ; :::; yn ) dan determinan matriks Jacobi J: Fungsi kepekatan peluang bagi Y1 ; Y2 ; ::: dan Yn ialah g (y1 ; y2 ; :::; yn ; ) = k1 (y1 ; ) k2 (w1 ; w2 ; :::; wn ) jJj di mana wi = wi (y1 ; y2 ; :::; yn ) ; i = 1; 2; :::; n: Fungsi kepekatan peluang bagi Y1 ialah Z 1 Z 1 g (y1 ; y2 ; :::; yn ; ) dy2 :::dyn gY1 (y1 ; ) = ::: 1 1 Z 1 Z 1 = k1 (y1 ; ) ::: k2 (w1 ; w2 ; :::; wn ) jJj dy2 :::dyn : Misalkan m (y1 ) =
R1
1
:::
R1
1
1
1
k2 (w1 ; w2 ; :::; wn ) jJj dy2 :::dyn ; maka
gY1 (y1 ; ) = k1 (y1 ; ) m (y1 ) :
Jika m (y1 ) = 0; maka gY1 (y1 ; ) = 0: Jika m (y1 ) > 0; maka fungsi k1 (y1 ; ) dapat dituliskan menjadi k1 (u1 (x1 ; x2 ; :::; xn ) ; ) =
gY1 (u1 (x1 ; x2 ; :::; xn ) ; ) m (u1 (x1 ; x2 ; :::; xn ))
dan faktorisasinya menjadi n Y i=1
f (xi ; ) = gY1 (u1 (x1 ; x2 ; :::; xn ) ; )
k2 (x1 ; x2 ; :::; xn ) ; m (u1 (x1 ; x2 ; :::; xn ))
4.1 Statistik Cukup
80
di mana fungsi k2 dan m tidak bergantung pada : Dengan demikian, berdasarkan de…nisinya dengan H (x1 ; :::; xn ) =
k2 (x1 ; x2 ; :::; xn ) ; m (u1 (x1 ; x2 ; :::; xn )) z
maka Y1 merupakan statistik cukup bagi :
Contoh 4.3 Misalkan X1 ; X2 ; :::; Xn adalah sampel acak dari sebaran N ( ; 2 ), 1 < < 1; di mana 2 > 0 diketahui. Dengan menggunakan Teorema 4.1 (Faktorisasi Neyman), tunjukkan bahwa X adalah statistik cukup bagi : Jawab. Jika x = n X
(xi
2
)
Pn
i=1
xi
n n X
=
i=1
, maka (xi
i=1 n X
=
)2
x+x
x)2 + 2 (xi
(xi
x) (x
) + (x
)2
i=1
n X
=
(xi
x)2 + n (x
)2 ;
i=1
Pn
x) = 0: Fungsi kepekatan peluang bersama bagi
karena (x ) i=1 (xi X1 ; X2 ; :::; Xn ialah f (x1 ; x2 ; :::; xn ; ) =
n Y
f (xi ; )
i=1
= =
1 p 2 ( " exp
= k1 (x; )
n
exp n (x 2
" P n
(xi 2 2 #) (
2
)
i=1
2
) 2
exp
#
Pn
i=1 (xi p 2
x)2 =2 n
k2 (x1 ; x2 ; :::; xn ) :
Yn Karena f (xi ; ) dapat difaktorkan menjadi k1 dan k2 di mana k2 tidak i=1 bergantung pada parameter ; maka berdasarkan Teorema 4.1, X merupakan statistik cukup bagi : z Akibat 4.1 Jika Y adalah statistik cukup bagi ; maka penduga kemungkinan maksimum bagi adalah fungsi dari Y .
2
)
4.1 Statistik Cukup
81
Bukti. Berdasarkan Teorema 4.1, fungsi kemungkinan L ( ) dapat difaktorisasi menjadi L( ) =
n Y
f (xi ; )
i=1
= k1 (y; )
k2 (x) ;
sehingga untuk memaksimumkan L ( ) ; hanya perlu memaksimumkan k1 (y; ) : Dengan demikian, penduga kemungkinan maksimum bagi merupakan fungsi dari statistik cukup Y: z Teorema 4.2 (Rao-Blackwell) Misalkan X1 ; X2 ; :::; Xn adalah sampel acak dari sebaran yang memiliki fungsi kepekatan peluang atau fungsi massa peluang f (x; ) ; 2 : Misalkan Y1 = u1 (X1 ; X2 ; :::; Xn ) merupakan statistik bagi dan Y2 = u2 (X1 ; X2 ; :::; Xn ) penduga takbias bagi : Jika E (Y2 jy1 ) = ' (y1 ) ; maka E (' (Y1 )) = dan V ar (' (Y1 )) V ar (Y2 ) : Bukti. Misalkan X merupakan peubah acak kontinu. Karena E (Y2 jy1 ) = ' (y1 ) ; maka Z 1 ' (y1 ) fY1 (y1 ; ) dx E (' (Y1 )) = 1 Z 1 Z 1 = y2 f (y2 jy1 ) dy2 fY1 (y1 ; ) dy1 1 1 Z 1 Z 1 f (y1 ; y2 ; ) dy2 fY1 (y1 ; ) dy1 = y2 fY1 (y1 ; ) 1 1 Z 1Z 1 y2 f (y1 ; y2 ; ) dy2 dy1 = 1
= E (Y2 ) = :
1
4.1 Statistik Cukup
E [(Y2
82
' (Y1 )) (' (Y1 )
)] =
Z Z
Z Z
(y2
' (y1 )) (' (y1 )
) f (y1 ; y2 ; ) dy1 dy2
' (y1 )) (' (y1 ) ) f (y2 jy1 ) fY1 (y1 ; ) dy1 dy2 Z Z = (' (y1 ) ) (y2 ' (y1 )) f (y2 jy1 ) dy2 fY1 (y1 ; ) dy1 Z = (' (y1 ) ) (' (y1 ) ' (y1 )) fY1 (y1 ; ) dy1
=
(y2
= 0
V ar (Y2 ) = E (Y2 )2 = E (Y2 ' (Y1 ) + ' (Y1 ) )2 = E (Y2 ' (Y1 ))2 + 2E [(Y2 ' (Y1 )) (' (Y1 ) +E (' (Y1 ) )2 = E (Y2 ' (Y1 ))2 + E (' (Y1 ) )2 = E (Y2 ' (Y1 ))2 + V ar (' (Y1 )) : Karena E (Y2
' (Y1 ))2
)]
(4.1)
0; maka persamaan 4.1 menjadi V ar (Y2 )
V ar (' (Y1 )) :
z Berdasarkan Teorema 4.2, jika Y1 adalah statistik cukup untuk suatu parameter , maka untuk mendapatkan penduga takbias dengan ragam minimum atau Minimum Variance Unbiased Estimator (MVUE), cukup dengan mencari fungsi dari statistik Y1 ; ' (Y1 ) ; sedemikian sehingga E (' (Y1 )) = : Contoh 4.4 Misalkan X1 ; X2 ; :::; Xn adalah sampel acak dengan f (x; ) = 1 e x= I (x > 0) : Tentukan MVUE bagi : Jawab. L( ) =
n Y
f (xi ; )
i=1
L( ) =
n
exp
Pn
i=1
xi
:
(4.2)
P Berdasarkan Teorema 4.1, statistik Y1 = ni=1 Xi merupakan statistik cukup. Fungsi log-likelihood dari persamaan 4.2 adalah n 1X xi ; ln L ( ) = n ln i=1
4.1 Statistik Cukup
83
sehingga diperoleh penduga kemungkinan maksimum bagi Pn Karena Xi (1; ) ; maka Y1 = i=1 xi (n; ) : E X =E
Y1 n
=
adalah X =
Y1 : n
1 1 E (Y1 ) = n = ; n n z
sehingga X merupakan MVUE bagi :
Misalkan ' (Y1 ) = E (Y2 jY1 ) adalah penduga takbias yang memiliki ragam lebih kecil daripada penduga takbias bagi ; yaitu Y2 : Misalkan pula suatu fungsi dari suatu statistik Y3 , dinotasikan dengan (Y3 ) dan amatannya dide…nisikan sebagai (y3 ) = E (' (Y1 ) jY3 = y3 ) ; di mana Y3 bukan statistik cukup. Berdasarkan Teorema 4.2 (Rao-Blackwell), E ( (Y3 )) = dan (Y3 ) memiliki ragam lebih kecil daripada ' (Y1 ) : Oleh karena itu, seharusnya (Y3 ) merupakan penduga takbias yang lebih baik jika dibandingkan dengan ' (Y1 ) : Namun, hal ini tidak benar karena Y3 bukan statistik cukup, sehingga sebaran bersyarat dari Y1 jika diketahui Y3 = y3 dan nilai harapan bersyarat dari Y3 masih mengandung : Jadi, meskipun E ( (Y3 )) = ; (Y3 ) bukanlah suatu statistik karena masih bergantung pada paramater yang tidak diketahui. Sebagai contoh, misalkan X1 ; X2 ; X3 adalah sampel acak dari sebaran eksponensial dengan nilai harapan > 0; maka fungsi kepekatan peluang bersama dari sampel acak tersebut ialah f (x1 ; x2 ; x3 ; ) =
1
3
exp
x1 + x2 + x3
3 Y i=1
I (0 < xi < 1) :
Berdasarkan Teorema 4.1, Y1 = X1 + X2 + X3 merupakan statistik cukup bagi : Nilai harapan dari Y1 ialah E (Y1 ) = E (X1 + X2 + X3 ) = 3 ; dan Y1 =3 = X ialah fungsi dari statistik cukup yang merupakan penduga takbias bagi : Misalkan Y2 = X2 +X3 dan Y3 = X3 : Transformasi satu-satu x1 = y1 y2 ; x2 = y2 y3 ; x3 = y3 memiliki determinan matriks Jacobi sama dengan J = det = = 1
1 0 0
@x @y0 1 1 0
0 1 1
4.1 Statistik Cukup
84
dan fungsi kepekatan peluang bersama bagi Y1 ; Y2 ; dan Y3 ialah 3
1
g (y1 ; y2 ; y3 ; ) =
y1
exp
I (0 < y3 < y2 < y1 < 1) :
Fungsi kepekatan peluang marginal bagi Y1 dan Y3 ialah g13 (y1 ; y3 ; ) =
Z
y1
3
1
y1
exp
dy2
y3
=
1
3
(y1
y1
y3 ) exp
I (0 < y3 < y1 < 1) :
Karena Y3 = X3 ; maka fungsi kepekatan peluang bagi Y3 ialah g3 (y3 ; ) =
1
exp
y3
I (0 < y3 < 1) ;
sehingga fungsi kepekatan peluang bersyarat bagi Y1 jika diketahui Y3 = y3 ialah g1j3 (y1 jy3 ) =
g13 (y1 ; y3 ; ) g3 (y3 ; ) 1
=
E
Y1 y3 3
2
(y1
Y1
= E 1 = 3
y3 ) exp
Z
Y3 3
1
1
1
y3 + E
(y1
Y3 y3 3
2
(y1
y3
y3 ) I (0 < y3 < y1 < 1) :
y3 )2 exp
1
(y1
y3 ) dy1 +
y3 3
1 (3) 3 y3 + 2 3 3 y3 2 + = 3 3 = (y3 ) :
=
Jelas bahwa E ( (Y3 )) = dan V ar ( (Y3 )) V ar (Y1 =3), tetapi (Y3 ) bukan statistik karena bergantung pada parameter dan tidak dapat digunakan sebagai penduga bagi :
4.2 Kelengkapan dan Kekhasan
4.2
85
Kelengkapan dan Kekhasan
De…nisi 4.2 Misalkan Z adalah peubah acak dengan fungsi kepekatan atau fungsi massa peluang h (z; ) ; 2 : Jika E (u (Z)) = 0; 8 2 memerlukan u (Z) = 0 kecuali pada himpunan berpeluang nol untuk setiap h (z; ) ; 2 ; maka famili fh (z; ) : 2 g disebut famili lengkap dari fungsi kepekatan atau fungsi massa peluang. Berikut merupakan beberapa contoh famili lengkap dan famili tak lengkap. Contoh 4.5 Misalkan X1 ; X2 ; :::; Xn adalah sampel P acak dari sebaran Poisson dengan parameter > 0. Tunjukkan bahwa Y1 = ni=1 Xi adalah statistik cukup bagi dan himpunan fungsi massa peluang bagi Y1 merupakan famili lengkap. Jawab. Karena Xi n Y
P oisson ( ) ; maka
f (xi ; ) =
i=1
n Y
xi
e I (xi = 0; 1; 2; : : :) xi !
i=1
e n Y = Qn I (xi = 0; 1; 2; : : :) i=1 (xi !) i=1
=
n
xi
xi
e
n
1 i=1 (xi !) k2 (x1 ; x2 ; :::; xn ) :
Qn
= k1 (y1 ; ) P Berdasarkan Teorema 4.1, Y1 = ni=1 Xi merupakan statistik cukup bagi : Kemudian, fungsi massa peluang bagi Y1 ialah (n )y1 e g (y1 ; ) = y1 !
n
I (y1 = 0; 1; 2; : : :) :
Misalkan fg (y1 ; ) : > 0g merupakan famili dari fungsi massa peluang. Misalkan pula u (Y1 ) adalah fungsi dari Y1 sedemikian sehingga E (u (Y1 )) = 0: Akan ditunjukkan bahwa bila E (u (Y1 )) = 0 memerlukan u (Y1 ) = 0 ke-
4.2 Kelengkapan dan Kekhasan
86
cuali pada himpunan berpeluang nol untuk setiap g (y1 ; ) ; > 0: E (u (Y1 )) = 0
e Karena e
n
n
"
1 X
y1
(n )y1 e u (y1 ) y1 ! =0
n
=0
n (n )2 u (0) + u (1) + u (2) + 1! 2!
6= 0; maka u (0) + [nu (1)] +
n2 u (2) 2
2
+
#
= 0:
= 0:
Catatan: Jika suatu deret (pangkat) takhingga konvergen ke nol untuk setiap > 0; maka setiap koe…siennya sama dengan nol. Dengan demikian, n2 u (2) = 0; : 2 = 0: Jadi, fg (y1 ; ) :
u (0) = 0; nu (1) = 0; Artinya, u (0) = u (1) = u (2) = famili lengkap.
> 0g merupakan z
Contoh 4.6 Misalkan Z adalah peubah acak dari famili fh (z; ) : mana 1 h (z; ) = e z= I (0 < z < 1) : Tunjukkan bahwa famili fh (z; ) :
2 g di
2 g merupakan famili lengkap.
Jawab. Misalkan pula u (Z) adalah fungsi dari peubah acak Z sedemikian sehingga E (u (Z)) = 0; yaitu Z 1 1 u (z) e z= dz = 0; > 0: (4.3) 0
Catatan: Misalkan £ merupakan operator transformasi Laplace. Bila £ f = £ g; maka f = g pada titik-titik kekontinuannya: Dengan kata lain, Z 1 Z 1 st f (t) e dt = g (t) e st dt ) f (t) = g (t) : 0
0
Karena ruas kiri pada persamaan 4.3 merupakan transformasi Laplace bagi fungsi u (z) ; maka u (z) = 0 pada titik-titik kekontinuannya. Jadi, fh (z; ) : merupakan famili lengkap.
2 g
z
4.2 Kelengkapan dan Kekhasan
87
Contoh 4.7 Tunjukkan bahwa famili yang anggotanya sebagai berikut bukan merupakan famili lengkap. a. f (x; ) =
1 2
I (jxj = 1; 2; :::; ) ;
b. f (x; ) =
1 2
I (jxj < ) :
2 N:
Jawab. a. Karena peubah acak X memiliki fungsi massa peluang f (x; ) =
1 I (jxj = 1; 2; :::; ) ; 2 N; 2
maka X
E (X) =
xf (x; )
x=
X
=
x=
x
1 2
= 0;
tetapi tidak mengharuskan X = 0 sehingga f (x; ) bukan anggota famili lengkap. b. Karena peubah acak X memiliki fungsi kepekatan peluang f (x; ) =
1 I (jxj < ) 2
maka E (X) = =
Z Z
xf (x; ) dx x
1 2
dx
= 0; tetapi tidak mengharuskan X = 0 sehingga f (x; ) bukan anggota famili lengkap.
4.3 Kelas Eksponen
88
z Misalkan X1 ; X2 ; : : : ; Xn adalah sampel acak dengan fungsi kepekatan atau fungsi massa peluang f (x; ) dan Y1 = u (X1 ; X2 ; : : : ; Xn ) adalah statistik cukup bagi : Misalkan pula ' (Y1 ) dan (Y1 ) masing-masing adalah fungsi dari statistik cukup Y1 (tidak bergantung pada ) sedemikian sehingga E (' (Y1 )) = dan E ( (Y1 )) = ; 8 2 . Nilai harapan dari selisih kedua fungsi tersebut ialah E (' (Y1 )
(Y1 )) = 0; 2 :
Jika famili ffY1 (y1 ; ) : 2 g merupakan famili lengkap, maka ' (y1 ) (y1 ) = 0 kecuali pada himpunan yang berpeluang nol. Dengan kata lain, untuk setiap penduga takbias (Y1 ) bagi ; ' (y1 ) =
(y1 ) ;
kecuali pada himpunan yang berpeluang nol. Dengan demikian, ' (Y1 ) merupakan fungsi dari statistik cukup Y1 yang khas dan memiliki ragam minimum jika dibandingkan dengan penduga takbias lainnya (Teorema 4.2). Hal tersebut dinyatakan dalam teorema berikut. Teorema 4.3 (Lehmann dan Sche¤é) Misalkan X1 ; X2 ; : : : ; Xn adalah sampel acak dengan fungsi kepekatan atau fungsi massa peluang f (x; ) : Misalkan pula Y1 = u (X1 ; X2 ; : : : ; Xn ) adalah statistik cukup bagi dan famili ffY1 (y1 ; ) : 2 g merupakan famili lengkap. Jika terdapat fungsi Y1 yang merupakan penduga takbias bagi ; maka fungsi Y1 merupakan penduga takbias dengan ragam minimum yang khas atau Unique Minimum Variance Unbiased Estimator (U M V U E).
4.3
Kelas Eksponen
De…nisi 4.3 Suatu fungsi kepekatan atau fungsi massa peluang f (x; ) = exp [p ( ) K (x) + S (x) + q ( )] I (x 2 W ) ;
<
<
(4.4)
disebut sebagai anggota kelas eksponen biasa fungsi kepekatan peluang kontinu atau fungsi massa peluang diskret jika 1: W tak bergantung pada parameter : 2: p ( ) fungsi kontinu nontrivial dari : 3: a. Jika X peubah acak kontinu, maka setiap K 0 (x) 6= 0 dan S (x)
4.3 Kelas Eksponen
89
fungsi kontinu dari x, x 2 W: b. Jika X peubah acak diskret, maka K (x) adalah fungsi nontrivial dari x 2 W: Contoh 4.8 Misalkan X
N (0; ) : Apakah anggota dari famili ff (x; ) : 0 <
< 1g
merupakan anggota kelas eksponen biasa fungsi kepekatan peluang kontinu? Jawab. 1 2 e x =2 2 = exp [ln f (x; )] p 1 2 = exp x ln 2 2
f (x; ) = p
I ( 1 < x < 1) :
(4.5)
Berdasarkan persamaan 4.5, W = ( 1; 1) tidak bergantung pada parameter , f (x; ) = exp [p ( ) K (x) + S (x) + q ( )] p 1 2 x ln 2 = exp 2 p 1 ; K (x) = x2 ; S (x) = 0; q ( ) = ln 2 ; 2 0 K (x) = 2x 6= 0 dan S (x) merupakan fungsi kontinu pada x 2 ( 1; 1) : Jadi, N (0; ) anggota kelas eksponen biasa fungsi kepekatan peluang kontinu. z p( ) =
Contoh 4.9 Misalkan X
P oisson ( ) : Apakah anggota dari famili ff (x; ) : 0 <
< 1g
merupakan anggota kelas eksponen biasa fungsi massa peluang diskret? Jawab. x
f (x; ) = e
I (x = 0; 1; 2; : : :) x! = exp [ln f (x; )] I (x = 0; 1; 2; : : :) 1 = exp (ln ) x + ln I (x = 0; 1; 2; : : :) x!
(4.6)
4.3 Kelas Eksponen
90
Berdasarkan persamaan 4.6, W = f0; 1; 2; : : :g tidak bergantung pada parameter , f (x; ) = exp [p ( ) K (x) + S (x) + q ( )] 1 I (x = 0; 1; 2; : : :) = exp (ln ) x + ln x! p ( ) = ln ; K (x) = x; S (x) = ln
1 x!
; q( ) =
;
dan K (x) = x merupakan fungsi nontrivial dari x 2 W: Jadi, x
f (x; ) = e
x!
I (x = 0; 1; 2; : : :)
anggota kelas eksponen biasa fungsi massa peluang diskret. z 1 Misalkan X seragam (0; ) ; maka f (x; ) = I (0 < x < ) juga dapat dituliskan seperti persamaan 4.6. Namun, perhatikan bahwa interval (0; ) bergantung pada parameter sehingga fungsi kepekatan peluang sebaran seragam (0; ) bukan anggota kelas eksponen biasa fungsi kepekatan peluang kontinu. Misalkan X1 ; X2 ; : : : ; Xn adalah sampel acak dari sebaran yang merupakan anggota kelas eksponen biasa. Fungsi kepekatan atau fungsi massa peluang bersama dari X1 ; X2 ; : : : ; Xn ialah n Y i=1
f (xi ; ) =
n Y i=1
exp [ln f (xi ; )] "
= exp p ( ) "
= exp p ( )
n X
i=1 n X
K (xi ) +
n X i=1
S (xi ) + nq ( ) #
K (xi ) + nq ( ) exp
i=1
#
"
n X i=1
#
S (xi )
n Y i=1
I (xi 2 W ) :
P Berdasarkan Teorema 4.1, Y1 = ni=1 K (xi ) merupakan statistik cukup bagi parameter : Selanjutnya, teorema berikut ini menyatakan kelengkapan dari statistik cukup Y1 tersebut. Teorema 4.4 Misalkan f (x; ) ; < < ; adalah fungsi kepekatan atau fungsi massa peluang dari peubah acak X yang merupakan anggota kelas eksponen biasa. Jika X1 ; X2 ; : : : ; Xn adalah contoh acak dari sebaran X, maka Y1 =
n X i=1
K (xi )
4.3 Kelas Eksponen
91
merupakan statistik cukup bagi dan famili ffY1 (y1 ; ) : < < g dari fungsi kepekatan atau fungsi massa peluang Y1 adalah famili lengkap. Dengan kata lain, Y1 adalah statistik cukup lengkap. Contoh 4.10 Misalkan X1 ; X2 ; : : : ; Xn adalah sampel acak dari sebaran Pn nor2 2 mal N ( ; ) ; 1 < < 1; > 0. Tunjukkan bahwa Y1 = i=1 Xi merupakan statistik cukup lengkap dan Y1 =n merupakan UMVUE bagi : Jawab. Karena X
2
), maka fungsi kepekatan peluangnya ialah # " 1 (x )2 f (x; ) = p exp I ( 1 < x < 1) 2 2 2 N( ;
atau f (x; ) = exp
2
p ln 2
x2 2 2
x
2 2
2
I ( 1 < x < 1) ;
2
sehingga p( ) =
; K (x) = x; S (x) = 2
x2 2 2
p ln 2
2 2;
q( ) =
2
2
:
P Berdasarkan Teorema 4.4, Y1 = ni=1 Xi merupakan statistik cukup lengkap. Karena E (Y1 ) = n ; maka ' (Y1 ) = Y1 =n = X adalah penduga takbias khas bagi dan fungsi dari statistik cukup Y1 yang memiliki ragam minimum. Dengan demikian, X merupakan UMVUE bagi : z Contoh 4.11 Misalkan X1 ; X2 ; : : : ; Xn adalah sampel acak dari sebaran binomial dengan parameter (1; ) ; 0 < < 1: Tentukan UMVUE bagi dan UMVUE bagi V ar X . Jawab. f (x; ) =
x
(1
x
)1
I (x = 0; 1)
x
=
1
= exp x ln p ( ) = ln
1
(1 1
) I (x = 0; 1) + ln (1
) I (x = 0; 1)
; K (x) = x; S (x) = 0; q ( ) = ln (1
):
4.3 Kelas Eksponen
92
Karena K (x) = x adalah fungsi nontrivial dari x 2 f0; 1g ; maka b (1; ) anggota P kelas eksponen biasa fungsi massa peluang diskret. Dengan demikian, Y = ni=1 Xi merupakan statistik cukup lengkap bagi dan Y b (n; ) ; sehingga nilai harapan dan ragam dari Y ialah E (Y ) = n dan V ar (Y ) = n (1 Y Y = dan V ar = (1 E n n n
); ):
Jadi, Y =n adalah UMVUE bagi : Selanjutnya ingin ditentukan UMVUE bagi V ar Yn = n (1 ) ; di mana n (1 ) merupakan fungsi dari parameter : Misalkan = (1 ) ; maka dugaan kemungkinan maksimum bagi n diberikan sebagai fungsi dari statistik cukup, yaitu 1 Y n n 1 = E n 1 = E n
E
Karena E
Y n
=
E
dan E Y n
1 n
Y2 n2
=
Y n
1
Y n
1
=
Y n Y n
n
: Y n
1 E
(1
=
Y2 n2 2
)+
(n
; maka
1) n
:
n
(1
);
sehingga E
n n
1
1 n
Y n
Y n
1
n
=
n
=
n
1
1 n
E
(1
):
Y n
=
Y n
1
Y n
Dengan kata lain, statistik ^= adalah UMVUE bagi
n n
1
1 Y n n
1
(ragam dari Y/n) :
n n
1 z
4.3 Kelas Eksponen
93
Contoh 4.12 Misalkan X1 ; X2 ; : : : ; Xn adalah sampel acak dari sebaran normal N ( ; 1). Tentukan UMVUE dari fungsi yang dide…nisikan sebagai berikut Z c 2 1 p e (x ) =2 dx = (c ); P (X c) = 2 1 di mana c adalah suatu konstanta. Jawab. Misalkan u (X1 ) adalah fungsi dari X1 : Kemudian, hitung nilai harapan bersyarat dari statistik takbias jika diketahui statistik cukup X; yaitu E u (X1 ) jX = x = ' (x) : Berdasarkan Teorema Rao-Blackwell dan Lehmann-Sche¤é, ' X adalah UMVUE bagi (c ): Misalkan fungsi u (x1 ) = I ( 1 < x1 < c) ; maka nilai harapan dari E (u (X1 )) = 1 P (X1
c
)=
(c
):
Dengan demikian, u (X1 ) adalah penduga takbias takbias bagi (c ): Selanjutnya akan ditentukan fungsi kepekatan peluang bersama bagi X1 dan X serta fungsi kepekatan peluang bersyarat dari X1 jika diketahui X: Dari fungsi kepekatan peluang bersyarat tersebut, dapat ditentukan nilai harapan bersyarat E u (X1 ) jX = x = ' (x) : Fungsi kepekatan peluang bersama bagi X1 dan X adalah normal bivariat dengan vektor nilai harapan ( ; ) p 2 2 dan ragam 1 = 1, 2 = 1=n; serta koe…sien korelasi = 1= n; sehingga fungsi kepekatan peluang bersyarat dari X1 jika diketahui X = x adalah normal dengan nilai harapan +
1
(x
)=x
2
dan ragam 2 1
1
2
=
n
1
: n Jadi, nilai harapan bersyarat dari u (X1 ) jika diketahui statistik cukup X = x ialah r Z 1 n 1 1 n (x1 x) p exp ' (x) = u (x1 ) dx1 n 2 (n 1) 2 1 Z c r n 1 1 n (x1 x) p exp = dx1 : n 2 (n 1) 2 1
4.4 Latihan
94
Dengan pemisalan peubah z = bersyarat tersebut menjadi ' (x) =
Z
c0 1
p
p x) = n
n (x1
1 p e 2
z 2 =2
dz =
1; maka nilai harapan
(c0 ) ;
p p di mana c0 = n (c x) = n 1: Dengan demikian, UMVUE bagi untuk setiap konstanta c ialah ! p n c X p : ' X = n 1
(c
)
z
4.4
Latihan
1. Misalkan X1 ; X2 ; : : : ; Xn adalah sampel acak dari sebaran dengan fungsi kepekatan peluang f (x; ) =
(1 + x)
+1
I (x
0) ;
> 0:
Tentukan statistik cukup bagi parameter : 2. Misalkan X1 ; X2 ; : : : ; Xn adalah sampel acak dari sebaran dengan Pnfungsi x kepekatan peluang f (x; ) = e I(x > 0) ; > 0: Y = i=1 Xi merupakan statistik cukup bagi : Tunjukkan bahwa (n 1) =Y adalah MVUE bagi : 3. Misalkan fh (x; ) : 2 g merupakan famili dari fungsi kepekatan peluang, di mana h (x; ) = 1 I (x > 0) : Tunjukkan bahwa famili tersebut tidak lengkap jika = f : > 1g : 4. Misalkan X1 ; X2 ; : : : ; Xn adalah sampel acak dari sebaran dengan fungsi kepekatan peluang f (x; ) = 2 xe x I(0 < x < 1) ; > 0: (a) Tunjukkan bahwa Y = bagi :
Pn
i=1
Xi merupakan statistik cukup lengkap
(b) Hitung E (1=Y ) dan carilah fungsi dari Y yang merupakan UMVUE bagi :
4.4 Latihan
95
5. Andaikan peubah acak X dengan fungsi kepekatan peluang f (x; ) = B( )h(x) exp[Q( )R(x)]I (a < x < b) merupakan anggota kelas eksponen biasa. Tunjukkanlah bahwa E[R(X)] =
B 0 ( ) =[(B ( ) Q0 ( )]:
BAB 5 Pendugaan Bayes 5.1
Prinsip Minimax
Misalkan X1 ; X2 ; : : : ; Xn merupakan sampel acak dari sebaran yang memiliki fungsi kepekatan atau fungsi massa peluang f (x; ) ; 2 : Misalkan pula Y = U (X1 ; X2 ; : : : ; Xn ) merupakan statistik yang digunakan untuk menduga parameter dan (y) merupakan fungsi nilai amatan dari statistik Y yang menjadi dugaan titik bagi parameter : Fungsi disebut juga sebagai fungsi keputusan. Suatu nilai dari fungsi keputusan, sebut saja (y) ; disebut sebagai putusan. Putusan tersebut dapat benar atau salah. Hal tersebut dapat menjadi ukuran dari perbedaan, jika ada, antara nilai sebenarnya dari dengan dugaan titik (y) : Oleh karena itu, de…nisikan $ [ ; (y)] sebagai fungsi kehilangan (loss function). Nilai harapan dari fungsi kehilangan disebut sebagai fungsi risiko (risk function), dinotasikan dengan R ( ; ). Jika Y merupakan peubah acak kontinu dengan fY (y; ) ; 2 ; merupakan fungsi kepekatan peluang dari Y; maka fungsi risiko dapat dihitung sebagai berikut Z 1 $ [ ; (y)] fY (y; ) dy: R ( ; ) = E ($ [ ; (Y )]) = 1
Contoh 5.1 Misalkan X1 ; X2 ; : : : ; X25 merupakan sampel acak dari sebaran N ( ; 1) ; 1 < < 1: Misalkan Y = X; nilai tengah dari sampel acak, dan misalkan $ [ ; (y)] = [ (y)]2 : Bandingkanlah dua fungsi keputusan berikut: 1
(y) = y;
2
(y) = 0: 96
5.1 Prinsip Minimax
97
Jawab. Fungsi risiko untuk masing-masing
1
(y) dan
2
(y) ialah
1 25 = 2:
R( ;
1)
= E (
Y )2 =
R( ;
2)
= E (
0)2
Jelas bahwa jika pada kenyataannya = 0; maka 2 (y) = 0 adalah keputusan yang tepat dan R (0; 2 ) = 0: Tetapi, jika 6= 0; maka 2 (y) = 0 adalah keputusan yang kurang tepat. Sebagai contoh, misalkan pada kenyataannya 1 = 2; maka R (2; 2 ) = 4 > R (2; 1 ) = 25 : Secara umum, R ( ; 2 ) < 1 1 R ( ; 1 ) jika 5 < < 5 dan untuk selainnya R ( ; 2 ) R ( ; 1 ) : Dengan demikian, kadang kala suatu fungsi keputusan lebih baik daripada fungsi keputusan lainnya untuk beberapa nilai dan fungsi keputusan lainnya lebih baik untuk nilai lainnya, sehingga jika kita membatasi fungsi keputusan ; seperti E ( (Y )) = untuk setiap nilai ; 2 ; maka 2 (y) = 0 tidak termasuk ke dalam pertimbangan sebagai fungsi keputusan. Berdasarkan hal tersebut, fungsi risiko merupakan ragam dari penduga takbias (Y ) : Misalkan kita tidak ingin membatasi sendiri fungsi keputusan ; seperti E ( (Y )) = untuk setiap nilai ; 2 : Misalkan kita katakan bahwa fungsi keputusan yang meminimumkan fungsi risiko yang maksimum merupakan fungsi keputusan terbaik. Karena pada contoh ini R ( ; 2 ) = 2 tak terbatas, maka berdasarkan kriteria tersebut, 2 (y) = 0 bukanlah fungsi keputusan terbaik. Dengan demikian, kita peroleh maxR ( ;
1)
= max
1 25
=
1 : 25
Oleh karena itu, 1 (y) = y = x merupakan fungsi keputusan terbaik berdasarkan 1 kriteria minimax karena 25 nilainya terkecil. z Berdasarkan Contoh 5.1, dapat disimpulkan bahwa tanpa pemberian batasan pada fungsi keputusan, sulit untuk mencari fungsi keputusan yang memiliki fungsi risiko yang secara umum lebih kecil daripada fungsi risiko dari putusan yang lain, suatu prinsip mengenai pemilihan fungsi keputusan terbaik disebut sebagai prinsip minimax. Prinsip tersebut dapat dinyatakan sebagai berikut: Misalkan diberikan fungsi keputusan maxR ( ;
0
(y))
0
(y) ; untuk setiap
maxR ( ; (y))
2 ;
5.2 Sebaran Prior dan Posterior
98
untuk setiap fungsi keputusan (y) ; maka (y) disebut sebagai fungsi keputusan minimax (minimax decision function). Dengan pemberian batasan bahwa E ( (Y )) = dan fungsi kehilangan $ [ ; (y)] = [ (y)]2 ; fungsi keputusan yang meminimumkan fungsi risiko menghasilkan penduga takbias dengan ragam minimum.
5.2
Sebaran Prior dan Posterior
De…nisi 5.1 Misalkan X1 ; X2 ; : : : ; Xn adalah sampel acak dengan sebaran f (xj ) ; di mana adalah parameter yang tidak diketahui. Fungsi kepekatan peluang dari peubah acak disebut sebaran prior bagi ; dinotasikan dengan h( ): De…nisi 5.2 Misalkan X1 ; X2 ; : : : ; Xn adalah sampel acak dengan sebaran f (xj ) ; di mana adalah parameter yang tidak diketahui. Fungsi kepekatan peluang bersyarat dari peubah acak jika diberikan sampel x1 ; x2 ; : : : ; xn disebut sebaran posterior bagi ; dinotasikan dengan k ( jx1 ; x2 ; : : : ; xn ) : Catatan 5.1 Jika X1 ; X2 ; : : : ; Xn adalah sampel acak dari populasi yang memiliki fungsi kepekatan peluang f (xj ) ; maka fungsi kepekatan peluang bersama antara sampel dan parameter ialah g (x1 ; : : : ; xn ; ) = L (x1 ; : : : ; xn j ) h ( ) Q dengan L (x1 ; : : : ; xn j ) = ni=1 f (xi j ) : Fungsi kepekatan peluang marginal bagi X ialah Z g1 (x1 ; : : : ; xn ) =
1
g (x1 ; : : : ; xn ; ) d :
1
Selanjutnya, dengan menggunakan formula Bayes diperoleh
g (x1 ; : : : ; xn ; ) g1 (x1 ; : : : ; xn ) L (x1 ; : : : ; xn j ) h ( ) = : g1 (x1 ; : : : ; xn )
k ( jx1 ; x2 ; : : : ; xn ) =
bsi
Contoh 5.2 Misalkan Xi j P oisson ( ) dan tahui. Tentukan sebaran posterior bagi :
( ; );
dan
dike-
5.2 Sebaran Prior dan Posterior
99
Jawab. Misalkan X0 = (X1 ; X2 ; : : : ; Xn ) dan x0 = (x1 ; x2 ; : : : ; xn ) : L (xj ) =
xi
n Q
e xi !
i=1
dan sebaran prior bagi
I (xi = 0; 1; 2; : : :) ;
>0
ialah 1
e ( )
h( ) =
=
I ( > 0) :
Fungsi kepekatan peluang bersama antara x dan g (x; ) = L (xj ) h ( ) 1 n Q e = = I ( > 0) ( ) i=1
ialah
xi
e xi !
I (xi = 0; 1; 2; : : :)
sehingga fungsi kepekatan peluang marginal bagi x ialah g1 (x) =
Z
1
xi +
0
=
x1 !
1
exp
=(n +1)
x1 ! xn ! ( ) P ( ni=1 xi + )
xn ! ( )
(n + 1= )
Dengan demikian, sebaran posterior bagi xi +
L (xj ) h ( ) k ( jx) = = g1 (x)
1
d xi +
ialah exp
n Q
I (xi = 0; 1; 2; : : :) :
i=1
=(n +1)
I ( > 0) : P ( ni=1 xi + ) [ = (n + 1)] xi + P tersebut merupakan sebaran ( ni=1 xi + ; = (n + 1)) :
Sebaran posterior bagi z Pada Contoh 5.2 terlihat bahwa tidak perlu menentukan fungsi kepekatan peluang marginal g1 (x) untuk mencari sebaran posterior k ( jx) : Jika kita membagi L (xj ) h ( ) dengan g1 (x) ; maka diperoleh faktor yang bergantung pada amatan peubah, x; tetapi tidak bergantung pada ; misalkan disebut c (x) ; dan xi + 1 e [ =(n +1)] ; yaitu k ( jx) = c (x)
xi +
1
exp
= (n + 1)
I ( > 0)
dengan xi = 0; 1; 2; : : : dan i = 1; 2; : : : ; n: Faktor c (x) tersebut harus berupa konstanta sedemikian sehingga membuat k ( jx) sebagai suatu fungsi kepekatan peluang, yaitu c (x) =
1 Pn ( i=1 xi + ) [ = (n + 1)]
xi +
:
5.3 Metode Pendugaan Bayes
100
Oleh karena itu, seringkali k ( jx) dituliskan proporsional dengan L (xj ) h ( ) ; yaitu k ( jx) / L (xj ) h ( ) : (5.1) Perhatikan bahwa ruas kanan pada 5.1, faktor yang bergantung pada peubah x dan berupa konstanta dapat diabaikan. Sebagai ilustrasi, untuk menyelesaikan soal pada Contoh 5.2, k ( jx) dapat dituliskan proporsional dengan xi + 1 e [ =(n +1)] ; yaitu k ( jx) /
xi +
1
exp
= (n + 1)
I ( > 0) :
(5.2)
Selanjutnya, tentukan konstanta c (x) sedemikian sehingga membuat k ( jx) sebagai suatu fungsi kepekatan peluang.PJelas bahwa k ( jx) harus berupa fungsi kepekatan peluang dari sebaran ( ni=1 xi + ; = (n + 1)) ; sehingga c (x) =
1 Pn ( i=1 xi + ) [ = (n + 1)]
xi +
:
Misalkan terdapat statistik cukup Y = u (X) untuk parameter sehingga L (xj ) = g [u (x) j ] H (x) ; di mana g (yj ) adalah fungsi kepekatan peluang dari Y; jika diketahui = : Karena faktor H (x) tidak bergantung pada ; maka dapat kita abaikan, sehingga k ( jx) / g [u (x) j ] h ( ) :
Dengan demikian, jika statistik Y untuk parameter ada, maka kita dapat memulai dengan fungsi kepekatan peluang Y dan menuliskan k ( jy) / g [yj ] h ( ) ;
(5.3)
di mana k ( jy) adalah fungsi kepekatan peluang bersyarat dari jY = y: Dalam kasus statistik cukup Y , kita juga akan menggunakan g1 (y) ; fungsi kepekatan peluang marginal dari Y; yaitu Z 1 g1 (y) = g [yj ] h ( ) d : 1
5.3
Metode Pendugaan Bayes
Dugaan Bayes adalah fungsi keputusan yang meminimumkan Z 1 E f$ [ ; (x)] jX = xg = $ [ ; (x)] k ( jx) d ; 1
5.3 Metode Pendugaan Bayes
jika
101
adalah peubah acak kontinu, yaitu Z 1 $ [ ; (x)] k ( jx) d ; (x) = Arg min 1
di mana $ [ ; (x)] adalah fungsi kehilangan. Peubah acak terkait (X) disebut penduga Bayes bagi : Jika fungsi kehilangan yang diberikan ialah $ [ ; (x)] = [
(x)]2 ;
maka dugaan Bayes ialah (x) = E [ jx] ; nilai harapan dari sebaran bersyarat jX = x: Hal tersebut berdasarkan fakta bahwa E (W b)2 (jika ada) adalah minimum ketika b = E (W ) : Jika fungsi kehilangan yang diberikan ialah $ [ ; (x)] = j (x)j ; maka dugaan Bayes ialah median dari sebaran bersyarat jX = x: Hal tersebut berdasarkan fakta bahwa E (jW bj) (jika ada) adalah minimum ketika b = median (W ) : Secara umum, misalkan ( ) adalah suatu fungsi dari : Untuk fungsi kehilangan $ [ ( ) ; (x)] ; dugaan Bayes dari ( ) adalah fungsi keputusan yang meminimumkan Z 1 $ [ ( ) ; (x)] k ( jx) d : E f$ [ ; (x)] jX = xg = 1
Peubah acak (X) disebut penduga Bayes bagi ( ) : Nilai harapan bersyarat dari $ [ ; (x)] jX = x mende…nisikan peubah acak yang merupakan fungsi dari contoh X. Nilai harapan fungsi dari X (dalam kasus kontinu) diberikan sebagai berikut Z 1 Z 1 $ [ ; (x)] k ( jx) d g1 (x) dx 1 1 Z 1 Z 1 = $ [ ; (x)] L (xj ) dx h ( ) d ; (5.4) R1
1
1
di mana 1 $ [ ; (x)] L (xj ) dx adalah fungsi risiko yang dinotasikan dengan R ( ; ). Oleh karena itu, persamaan 5.4 adalah nilai harapan dari risiko. Karena dugaan Bayes (x) meminimumkan Z 1 $ [ ; (x)] k ( jx) d 1
untuk setiap x di mana g (x) > 0; maka harapan dari risiko.
(x) juga meminimumkan nilai
5.3 Metode Pendugaan Bayes
102
Contoh 5.3 Diketahui sebaran bsi
Xi j Tentukan dugaan Bayes bagi
binomial (1; ) beta ( ; ) :
Jawab. Sebaran prior bagi
ialah
( + ) ( ) ( )
h( ) =
(x)]2 :
jika $ [ ; (x)] = [
1
(1
1
)
I (0 <
< 1) ;
Pn di mana dan adalah konstanta positif. Statistik cukup Y = i=1 xi menyebar binomial(n; ) ; sehingga fungsi kepekatan bersyarat Y j = ialah n y
g (yj ) =
y
(1
)n
y
)n
y
I (y = 0; 1; :::; n) :
Dengan menggunakan 5.3, k ( jy) /
y
(1
1
(1
1
)
I (0 <
< 1) ;
sehingga sebaran posterior jY = y menyebar beta dengan parameter ( + y; + n dan fungsi kepekatan peluangnya ialah k ( jy) =
(n + + ) ( + y) (n +
+y 1
y)
(1
+n y 1
)
I (0 <
< 1; y = 0; 1; :::; n) :
Untuk $ [ ; (x)] = [ (x)]2 ; maka (y) merupakan nilai harapan dari sebaran beta dengan parameter ( + y; + n y) ; yaitu +y + +n + + +n
(y) = =
n
+
+
+
y : +n n
Dugaan Bayes yang diperoleh ini merupakan rata-rata terbobot antara dugaan yang diperoleh dari sebaran prior, yaitu dengan dugaan yang diperoleh + y dari sebaran bersyarat Y j , yaitu : z n Contoh 5.4 Diketahui sebaran Xi j
N
bsi
N
0;
; 2 0
Tentukan dugaan Bayes bagi
2
; di mana
; di mana
0
2
dan
diketahui 2 0
jika $ [ ; (x)] = [
diketahui. (x)]2 :
y)
5.3 Metode Pendugaan Bayes
103
Jawab. Karena Y = X adalah statistik cukup bagi ; maka Yj Sebaran prior bagi
bsi
N
N
2
; 2 0
0;
2
=n ; di mana
; di mana
0
dan
diketahui 2 0
diketahui.
ialah
1 h( ) = p 2
1
exp
2 0
2 0
2
2 0)
(
I( 1 <
< 1) :
Dengan menggunakan 5.3, k ( jy) / p 2 / exp
1
1 p p = n 2 (
2
2 0
2
+
exp 0
=n)
"
(y )2 2 ( 2 =n)
2
2 (y 2 2 ( =n)
2 2 =n 0+ 0 2 2 =n 0+ 2 2 ( =n) 20 2 2 =n 0+
y
6 6 / exp 6 4
sehingga sebaran posterior y
2 0+ 2 0 3 2
2 0)
( 2 0
2
2 0
#
=n)
7 7 7; 5
jY = y menyebar normal dengan parameter 2 2 =n 0+ 0 ; 2 2 =n 0+
( 2 =n) 20 2 2 =n 0+
(5.5)
:
Untuk $ [ ; (x)] = [ (x)]2 ; maka (y) merupakan nilai harapan dari sebaran normal dengan parameter 5.5; yaitu (y) = =
y
2 2 =n 0+ 0 2 2 =n 0+ 2 0 2 2 =n + 0
2
y+
2 0
+
=n 2 =n
0:
Dugaan Bayes yang diperoleh ini merupakan rata-rata terbobot antara dugaan yang diperoleh dari sebaran prior, yaitu 0 dengan dugaan yang diperoleh dari sebaran bersyarat Y j , yaitu y: z
5.3 Metode Pendugaan Bayes
104
Berikut ini merupakan contoh yang membandingkan penggunaan prinsip minimax dan metode pendugaan Bayes. Misalkan diketahui sebaran prior bagi peubah acak ialah sebagai berikut: P( P(
= =
1)
= 0:6 2 ) = 0:4
Misalkan 1 menyatakan Bogor hujan di sore hari dan 2 menyatakan Bogor tidak hujan di sore hari. Kemudian, terdapat tambahan informasi Y mengenai kondisi cuaca di Gunung Salak, yaitu Gunung Salak cerah Gunung Salak berawan Gunung Salak gelap
y1 : y2 : y3 :
dengan peluang bersyarat Y j ialah sebagai berikut: P (Y j ) 1 2
y1 y2 0:05 0:25 0:425 0:375
y3 0:7 0:2
Selanjutnya, misalkan fungsi kehilangan $ [ ; (y)] diberikan sebagai berikut: nY
Putusan ( ) 1
1
(membawa payung)
2
1
1
(tidak membawa payung) Prinsip minimax P R ( j ; j ) = 3i=1 $ [ j ;
j
(yi )] P (Y = yi j j ) ; j = 1; 2:
Putusan ( ) 1
1
$ [ 1; Membawa payung
1
(y)]
1
(y)]
2
(y)]
2
$ [ 2;
2
1
$ [ 1;
Tidak membawa 2 payung $ [ 2 ; 2 (y)] Putusan minimax:
2
y1 y2 y3 6 3 1 12 5 2 10 15 20 0 2 4
y1 y2 y1 R ( ; ) 0:05 0:25 0:7 1:75 6 3 1 0:425 0:375 0:2 7:375 12 5 2 0:05 0:25 0:7 18:25 10 15 20 0:425 0:375 0:2 1:033 0 2 4
= arg min max R ( ; ) =
1:
5.4 Latihan
105
Sebaran bersama dan sebaran marginal bagi peubah acak sebagai berikut: P ( ;Y )
dan Y diperoleh
y1 y2 y3 P ( j ) 0:03 0:15 0:42 0.6 0.17 0.15 0.08 0.4 0.2 0.3 0.5 1
1 2
P (yi ) di mana P(
= ; Y = y) = P (Y = yj = ) P ( = ) 3 X P ( j) = P ( = j ; Y = yi ) ; j = 1; 2 i=1
P (yi ) =
2 X
P(
=
j; Y
= yi ) ; i = 1; 2; 3:
j=1
Sebaran posterior
jY ialah P ( jY ) 1 2
y1 y2 y3 0.15 0.5 0.84 0.85 0.5 0.16
Pendugaan Bayes Amatan Putusan E jy ($ [ ; y1 (6 0:15) + (12 1 (10 0:15) + (0 2 y2 (3 0:5) + (5 1 (15 0:5) + (2 2 y3 (1 0:84) + (2 1 (20 0:84) + (4 2
(y)]) 0:85) = 11:1 0:85) = 1:5 0:5) = 4 0:5) = 8:5 0:16) = 1:16 0:16) = 17:44
Jadi, putusan Bayes bergantung pada amatan Y yang diperoleh. Jika Y yang diperoleh y1 ; maka putusan Bayes ialah 2 ; sedangkan jika Y yang diperoleh y2 atau y3 ; maka putusan Bayes ialah 1 :
5.4
Latihan
1. Misalkan X adalah peubah acak sedemikian sehingga E (X b)2 ada untuk setiap bilangan Real b. Tunjukkan bahwa E (X b)2 minimum ketika b = E (X) :
5.4 Latihan
106
2. Misalkan X adalah suatu peubah acak kontinu. Tunjukkan bahwa Z b (b x) f (x) dx E (jX bj) = E (jX mj) + 2 m
di mana m adalah median dari sebaran X: 3. Andaikan Yn merupakan statistik tataan ke-n dari suatu sampel acak berukuran n dari sebaran dengan fungsi kepekatan peluang f (x; ) = 1 I (0 < x < ). Andai pula merupakan amatan dari peubah acak 1 dengan fungsi kepekatan peluang h ( ) = I( > ); > 0; > 0. Bila fungsi kehilangan $ [ ; (yn )] = [ (yn )]2 , maka tentukanlah solusi Bayes (yn ) yang merupakan dugaan titik bagi . 4. Misalkan merupakan nilai amatan dari peubah acak kepekatan peluang h( ) = ( ( )
)
1
1
e
=
dengan fungsi
I ( > 0)
dan > 0; > 0 merupakan bilangan yang diketahui. Misalkan pula bahwa X1 ; X2 ; : : : ; Xn merupakan sampel acak dari sebaran Poisson dengan nilai tengah . Bila Y = ni=1 Xi dan fungsi kehilangannya ialah $ [ ; (y)] = [ (y)]2 , maka tentukan solusi Bayes (y) sebagai dugaan titik bagi . 5. Misalkan merupakan nilai amatan dari peubah acak bersebaran N (a; b), a dan b masing-masing merupakan konstanta yang diketahui, a 2 R dan b > 0. Misalkan pula Y merupakan rata-rata dari sampel acak X1 ; X2 ; : : : ; Xn yang bersebaran N ( ; 25), 2 R. Bila fungsi kerugian $ [ ; (y)] = j (y)j maka berikan dugaan Bayes (y) sebagai dugaan titik bagi .
BAB 6 Pengujian Hipotesis Misalkan X peubah acak untuk suatu populasi dengan parameter yang tidak diketahui, di mana 2 : Misalkan pula X1 ; X2 ; : : : ; Xn ialah sampel acak dari sebaran peubah acak X yang memiliki fungsi kepekatan atau fungsi massa peluang f (x; ) : Suatu hipotesis statistika adalah pernyataan tentang sebaran dari populasi X: Pernyataan tersebut biasanya berkaitan dengan parameter jika kita sedang berhadapan dengan statistika parametrik, selain itu pernyataan tersebut ialah berkaitan dengan bentuk sebaran X. Hipotesis statistika disebut sebagai hipotesis sederhana jika hipotesis tersebut secara keseluruhan menunjukkan sebaran suatu populasi, sebaliknya disebut sebagai hipotesis majemuk. De…nisikan suatu hipotesis sebagai berikut H0 : H1 :
2 !0 2 !1
di mana ! 0 dan ! 1 ialah himpunan bagian dari dan ! 0 [ ! 1 = : Hipotesis H0 disebut sebagai hipotesis nul dan H1 disebut sebagai hipotesis alternatif atau hipotesis tandingan. Misalkan D adalah ruang dari sampel, yaitu D = ruangf(X1 ; X2 ; : : : ; Xn )g : Pengujian H0 lawan H1 tersebut berdasarkan himpunan bagian C dari D: Himpunan bagian C disebut sebagai daerah kritis dan himpunan tersebut berpadanan dengan aturan sebagai berikut: Tolak H0 (Terima H1 ) ; jika (X1 ; X2 ; : : : ; Xn ) 2 C Tidak Tolak H0 (Tolak H1 ) ; jika (X1 ; X2 ; : : : ; Xn ) 2 C c : Penerimaan suatu hipotesis tidak berarti bahwa hipotesis tersebut benar, tetapi karena tidak ada bukti yang cukup untuk menolak atau mena…kannya. 107
108
Dalam pengujian hipotesis, ada dua kemungkinan kesalahan yang dapat kita lakukan, yaitu: 1. Kesalahan untuk menolak H0 , sedangkan kenyataanya H0 benar. 2. Kesalahan untuk tidak menolak H0 , sedangkan kenyataanya H0 salah. Kesalahan menolak H0 yang benar disebut sebagai kesalahan jenis I dan kesalahan tidak menolak H0 yang salah disebut kesalahan jenis II. Peluang terjadinya salah jenis I dinotasikan dengan ; sedangkan peluang terjadinya salah jenis II dinotasikan dengan :
Tolak H0 Tidak Tolak H0
H0 benar H0 salah Salah Jenis I Putusan benar Putusan benar Salah Jenis II
Ukuran atau taraf nyata dari suatu uji hipotesis adalah peluang dari salah jenis I, yaitu = maxP [(X1 ; X2 ; : : : ; Xn ) 2 C] : 2! 0
P [(X1 ; X2 ; : : : ; Xn ) 2 C] merupakan peluang bahwa (X1 ; X2 ; : : : ; Xn ) 2 C ketika adalah parameter yang benar. Berdasarkan semua kemungkinan daerah kritis C berukuran , kita menginginkan daerah kritis dengan peluang salah jenis II yang minimum atau daerah kritis dengan peluang dari komplemen salah jenis II maksimum. Komplemen salah jenis II ialah menolak H0 ketika H1 benar, di mana hal tersebut adalah putusan yang benar. Dengan demikian, untuk 2 ! 1 ; kita ingin memaksimumkan 1
P [Salah jenis II] = P [(X1 ; X2 ; : : : ; Xn ) 2 C] :
(6.1)
Peluang pada ruas kanan persamaan 6.1 disebut sebagai kuasa dari uji pada : Jadi, meminimumkan peluang salah jenis II sama dengan memaksimumkan kuasa. Selanjutnya, de…nisikan fungsi kuasa dari daerah kritis C sebagai C
( ) = P [(X1 ; X2 ; : : : ; Xn ) 2 C] ;
2 :
Untuk H0 sederhana lawan H1 sederhana, yaitu H0 : H1 :
= =
0 00
fungsi kuasanya ialah C ( 0 ) = dan C ( 00 ) = 1 : Misalkan terdapat dua daerah kritis C1 dan C2 yang berukuran : C1 dikatakan lebih baik dari C2 jika C1 ( ) 2 !1: C2 ( ) untuk setiap
109
Contoh 6.1 Misalkan X sis berikut
N( ;
2
) : Tentukan daerah kritis C untuk hipote-
H0 : H1 :
= >
0 0
di mana 0 diketahui. Asumsikan bahwa ukuran dari uji hipotesis ini ialah , untuk 0 < < 1: Jawab. Misalkan X1 ; X2 ; : : : ; Xn adalah sampel acak dari sebaran N ( ; 2 ) : Misalkan X dan S 2 adalah nilai harapan dan ragam sampel. Secara intuisi, aturan penolakan H0 ialah jika X > 0 : Kemudian, kita dapat mengetahui sebaran p dari statistik X: Berdasarkan hipotesis H0 ; statistik T = 1) : X 0 = (S= n) memiliki sebaran t-Student dengan derajat bebas (n Dengan menggunakan sebaran T , daerah penolakan berukuran ialah p T = X t (n 1) ; 0 = S= n di mana t (n 1) adalah batas atas titik kritis dari sebaran t–Student dengan derajat bebas (n 1) ; yaitu = P (T > t (n 1)) : Biasanya hal tersebut disebut t-test dari H0 : = 0 : Dengan demikian, daerah kritis C berukuran ialah p t (n 1) C = x : t = (x 0 ) = s= n p = x:x 1) s= n : 0 + t (n z Contoh 6.2 Misalkan X1 ; X2 ; : : : ; X10 adalah sampel acak dari sebaran Poisson dengan nilai harapan : Daerah kritis untuk pengujian H0 : = 0:1 lawan H1 : > 0:1 diberikan sebagai berikut Y =
10 X
Xi
3:
i=1
Statistisk Y memiliki sebaran dengan nilai harapan 10 ; sehingga bila nilai harapan Y ialah 1: Taraf nyata dari uji ini ialah = P (Y
3) = 1
P (Y
= 0:1;
2) = 1 0:920 = 0:080: P Jika daerah kritis dide…nisikan sebagai 10 4; maka taraf nyatanya i=1 Xi ialah = P (Y 4) = 1 P (Y 3) = 1 0:981 = 0:019:
6.1 Uji Paling Kuasa
110
Sebagai contoh, jika taraf nyata yang diinginkan ialah = 0:05; maka hal tersebut dapat disesuaikan dengan cara sebagai berikut. Misalkan W merupakan peubah acak yang menyebar Bernoulli dengan peluang sukses sebesar P (W = 1) =
0:050 0:080
31 0:019 = : 0:019 61
Asumsikan bahwa W dipilih secara bebas dari sampel. Perhatikan aturan penolakan berikut : Tolak H0 jika
10 X
xi
4 atau jika
i=1
10 X
xi = 3 dan W = 1:
i=1
Berdasarkan aturan penolakan tersebut, diperoleh taraf nyata sebesar PH0 (Y
4) + PH0 (fY = 3g \ fW = 1g) = PH0 (Y
4) + PH0 (Y = 3) P (W = 1) 31 = 0:019 + 0:061 61 = 0:05:
Proses melakukan percobaan tambahan untuk memutuskan apakah akan menolak H0 atau tidak ketika Y = 3 disebut sebagai uji acak (randomized test) :
6.1
Uji Paling Kuasa
Misalkan f (x; ) adalah fungsi kepekatan atau fungsi massa peluang dari suatu peubah acak X di mana 2 = f 0 ; 00 g : Misalkan pula ! 0 = f 0 g dan ! 1 = f 00 g ; serta X0 = (X1 ; X2 ; : : : ; Xn ) adalah sampel acak dari sebaran peubah acak X: Selanjutnya, de…nisikan daerah kritis terbaik untuk uji hipotesis sederhana antara hipotesis nul H0 dan hipotesis alternatif H1 : De…nisi 6.1 Misalkan C adalah himpunan bagian dari ruang sampel. C disebut sebagai daerah kritis terbaik berukuran untuk uji hipotesis sederhana H0 : = 0 dan H1 : = 00 jika P 0 [X 2 C] = dan untuk setiap himpunan bagian A dari ruang sampel, P 0 [X 2 A] =
) P 00 [X 2 C]
P 00 [X 2 A] :
Teorema 6.1 (N eyman P earson) Misalkan X1 ; X2 ; : : : ; Xn adalah sampel acak dari sebaran yang memiliki fungsi massa atau kepekatan peluang f (x; ) ; maka fungsi kemungkinan dari X1 ; X2 ; : : : ; Xn ialah L ( ; x) =
n Q
i=1
f (xi ; ) ; untuk x0 = (x1 ; x2 ; : : : ; xn ) :
6.1 Uji Paling Kuasa
111
Misalkan 0 dan 00 adalah nilai dari sedemikian sehingga = f : = 0 ; 00 g dan k adalah bilangan positif. Misalkan pula 0 C adalah himpunan bagian L( ;x) dari ruang sampel sedemikian sehingga: (a) L( k untuk setiap x 2 C; 00 ;x) 0
L( ;x) (b) L( k untuk setiap x 2 C c ; dan (c) = PH0 [X 2 C] ; maka C 00 ;x) adalah daerah kritis terbaik berukuran untuk pengujian hipotesis sederhana H0 : = 0 dan H1 : = 00 :
Bukti. Misalkan X adalah peubah acak kontinu. Jika C adalah satusatunya daerah kritis berukuran R R ; maka teorema tersebut terbukti. Untuk penyederhanaan, misalkan L ( ; x1 ; x2 ; : : : ; xn ) dx1 dx2 : : : dxn menjadi R R L ( ) : Jika terdapat daerah kritis berukuran yang lain, misalkan daerah R tersebut adalah A, maka Z Z 0 L( ) = L ( 0) = : A
C
Kemudian yang ingin dibuktikan ialah Z Z 00 L( ) L ( 00 ) C
0:
A
Karena C adalah gabungan dari himpunan saling lepas C \ A dan C \ Ac ; maka Z Z 00 L( ) L ( 00 ) AZ Z Z ZC 00 00 00 L( ) L( ) L ( 00 ) L( ) + = c c A\C A\C ZC\A ZC\A L ( 00 ) L ( 00 ) : (6.2) = C\Ac
A\C c
Berdasarkan hipotesis pada teorema tersebut, L ( 00 ) setiap x 2 C; juga untuk setiap x 2 C \ Ac ; sehingga Z Z 1 00 L( ) L ( 0) k c c C\A C\A dan L ( 00 ) sehingga
(1=k) L ( 0 ) untuk
(1=k) L ( 0 ) untuk setiap x 2 C c ; juga untuk setiap x 2 A \ C c ; Z Z 1 00 L( ) L ( 0) : k c c A\C A\C Berdasarkan pertaksamaan tersebut diperoleh Z Z Z Z 1 1 00 00 0 L( ) L( ) L( ) L ( 0) ; (6.3) k k C\Ac A\C c C\Ac A\C c
6.1 Uji Paling Kuasa
112
dan dari persamaan 6.2 diperoleh Z Z Z 1 00 00 L( ) L( ) L ( 0) k c C A C\A Dengan demikian, Z =
ZC\A
Z
00
L( )
c
Z
00
C
L ( 0) :
A\C c
L ( 00 )
A\C c
Z
00
L( ) + L( ) c C\A C\A Z Z 00 = L( ) L ( 00 )
=
Z
00
L( )
A\C
Z
L ( 00 )
A\C c
A
= 0:
Jika hasil tersebut disubstitusi ke pertaksamaan 6.3, maka diperoleh Z Z 00 L( ) L ( 00 ) 0: C
A
Jika peubah acak X adalah peubah acak diskret, maka pembuktian teorema tersebut sama seperti kasus kontinu, hanya saja notasi integral diubah menjadi notasi sigma (penjumlahan). z Akibat 6.1 Misalkan C adalah daerah kritis terbaik berukuran untuk pengujian hipotesis sederhana H0 : = 0 dan H1 : = 00 : Misalkan taraf nyata dari pengujian tersebut ialah : Misalkan pula C ( 00 ) = P 00 [X 2 C] 00 menyatakan kuasa dari pengujian tersebut, maka C ( ): Contoh 6.3 Misalkan X0 = (X1 ; X2 ; : : : ; Xn ) adalah sampel acak dari sebaran yang memiliki fungsi kepekatan peluang ! 1 (x )2 f (x; ) = p exp ; 1 < x < 1: 2 2 Tentukan daerah kritis terbaik C berukuran H0 : H1 : Jawab.
= =
0 00
untuk hipotesis sederhana berikut =0 = 1:
p Pn 2 n 1= 2 exp ( i=1 xi =2) p Pn n 1= 2 exp 1)2 =2 i=1 (xi ! n X n = exp xi + : 2 i=1
L ( 0 ; x) = L ( 00 ; x)
6.2 Uji Selalu Paling Kuasa
113
Jika k > 0, maka himpunan dari semua titik (x1 ; x2 ; : : : ; xn ) sedemikian sehingga Pn n k exp i=1 xi + 2 Pn n , P i=1 xi + 2 log k n n , log k = c i=1 xi 2 P adalah daerah kritis terbaik, yaitu C = f(x1 ; x2 ; : : : ; xn ) : ni=1 xi cg ; di mana c adalah suatu konstanta yang dapat ditentukan sedemikian sehingga Pn daerah kritis tersebut berukuran : Kejadian i=1 Xi c ekuivalen dengan kejadian X c=n = c1 : Sebagai contoh, misalkan uji hipotesis tersebut berdasarkan statistik X: Jika H0 benar, = 0 = 0; maka X N (0; 1=n) : Berdasarkan ukuran contoh n dan taraf nyata ; konstanta c1 dapat ditentukan dengan melihat tabel sebaran normal sedemikian sehingga PH 0 X
c1 = :
Dengan demikian, jika nilai dari X1 ; X2 ; : : : ; Xn berturut-turut adalah x1 ; x2 ; : : : ; xn ; P maka x = ni=1 xi =n: Jika x c1 , maka hipotesis H0 ditolak pada taraf nyata ; jika x c1 , maka hipotesis H0 tidak ditolak. Peluang menolak H0 padahal H0 benar ialah ; peluang menolak H0 ketika H0 salah adalah nilai dari kuasa uji hipotesis pada = 00 = 1; yaitu ! Z 1 (x 1)2 1 p p exp dx: PH 1 X c1 = 2 (1=n) 2 1=n c1
Misalkan n p= 25 dan = 0:05; maka berdasarkan tabel sebaran normal c1 = 1:645= 25 = 0:329 dan kuasa dari uji terbaik H0 lawan H1 ialah 0:05 ketika H0 benar dan ! Z 1 Z 1 1 1 (x 1)2 2 p e w =2 dw p p dx = exp 2 (1=25) 2 2 1=25 0:329 3:355 = P (Z = 0:9996
ketika H1 benar.
6.2
3:355)
z
Uji Selalu Paling Kuasa
Uji selalu paling kuasa atau uniformly most powerful test ini digunakan untuk menguji hipotesis nul sederhana dengan hipotesis alternatif majemuk. Berikut merupakan contoh dari pengujian tersebut.
6.2 Uji Selalu Paling Kuasa
114
Contoh 6.4 Misalkan X1 ; X2 adalah sampel acak dari sebaran yang memiliki fungsi kepekatan peluang 1 f (x; ) = e x= I (x > 0) : Tentukan daerah kritis terbaik C berukuran H0 : H1 :
=2 = ;
untuk hipotesis berikut > 2:
Jawab. L ( 0 ; x) L (2) = 00 L( ) L ( ; x) 1 exp [ (x1 + x2 ) =2] 22 = : 1 exp [ (x1 + x2 ) = ] ( )2 Jika k > 0, maka himpunan dari semua titik (x1 ; x2 ) sedemikian sehingga 1 exp [ 22 1 exp [ ( )2
(x1 + x2 ) =2] (x1 + x2 ) = ]
k
adalah daerah kritis terbaik berkuran : 1 exp [ (x1 + x2 ) =2] 22 k 1 exp [ (x1 + x2 ) = ] ( )2
, log 4 (x1 + x2 ) =2 + log ( )2 + (x1 + x2 ) = 1 , (x1 + x2 ) 1 k1 2
, (x1 + x2 ) karena 8
> 2;
1 2
1
1 2
1
k2 ;
log k (6.4)
> 0; maka pertaksamaan 6.4 dapat ditulis menjadi (x1 + x2 )
k3 ;
sehingga daerah kritis C = f(x1 ; x2 ) : (x1 + x2 )
k3 g :
= P (X 2 CjH0 ) 0:05 = P =2 (X1 + X2 k2 ) 0:05 = 1 P (X1 + X2 < k2 ) Z k3 Z k3 x1 1 0:05 = 1 exp [ (x1 + x2 ) =2] dx2 dx1 4 0 0 k3 0:05 = e k3 =2 1 + 2 k3 = 9:5: z
6.3 Uji Rasio Kemungkinan
115
De…nisi 6.2 Daerah kritis C adalah daerah kritis selalu paling kuasa (uniformly most powerful critical region) berukuran untuk pengujian hipotesis sederhana H0 dan hipotesis majemuk H1 jika himpunan C adalah daerah kritis terbaik berukuran untuk pengujian hipotesis H0 dengan setiap hipotesis sederhana H1 : Pengujian yang dide…nisikan berdasarkan daerah kritis C tersebut disebut uji selalu paling kuasa (uniformly most powerful test) dengan taraf nyata untuk pengujian hipotesis sederhana H0 dan hipotesis majemuk H1 : Contoh 6.5 Misalkan X1 ; X2 ; : : : ; Xn adalah sampel acak dari sebaran normal N ( ; 1). Tentukan daerah kritis selalu paling kuasa berukuran (jika ada) untuk hipotesis berikut H0 : H1 :
=5 = ;
6= 5:
Jawab. n Y
L ( = 5) = i=1 n Y L( = )
p1 2
exp
1 2
(x
5)2
p1 2
exp
1 2
(x
)2
i=1
1X (xi 2 i=1
=
n
= (5
)
n X
1X 5) + (xi 2 i=1 n
2
xi + n ( )2
i=1
(5
)
n X
xi
k1
n ( )2 +
i=1
25n 2
)2 k1 :
25n : 2
P Jika < 5, maka C = f(x1 ; x2P ; : : : ; xn ) : ni=1 xi k2 g, tetapi untuk > 5, maka C = f(x1 ; x2 ; : : : ; xn ) : ni=1 xi k2 g : Dengan demikian, tidak ada daerah kritis selalu paling kuasa. z
6.3
Uji Rasio Kemungkinan
Misalkan peubah acak X memiliki fungsi kepekatan atau massa peluang f (x; ) ; di mana adalah vektor dari parameter pada : Misalkan ! dan H0 : 2 ! lawan H1 : 2 \ ! c :
6.3 Uji Rasio Kemungkinan
116
Prinsip dari rasio kemungkinan untuk menolak H0 adalah jika dan hanya jika 0 < 1; di mana supL (!) 2!
(x) =
=
supL ( ) 2
dengan taraf nyata dari uji tersebut ialah
L (^ !) ; L ^ = maxPH0 [ (X) 2!
0] :
Contoh 6.6 Misalkan X1 ; X2 ; : : : ; Xn merupakan sampel acak dari sebaran N ( 1 ; 2 ) di mana 1 adalah nilai tengah dan 2 adalah ragam yang tidak diketahui, sehingga = f( 1 ; 2 ) 2 R R+ g : Hipotesis yang diuji ialah H0 : H1 :
1 1
= 0; 6= 0;
>0 > 0;
2 2
sehingga ! = f 1 = 0; 2 2 R+ g : Tentukan statistik dan sebaran yang terkait hipotesis tersebut, serta berikan daerah kritis pada taraf nyata : Jawab. Dalam hal ini sampel acak X1 ; X2 ; : : : ; Xn saling bebas, sehingga fungsi kemungkinannya ialah L ( ) = (2
2)
n=2
exp
2)
n=2
1 2 2
dan L (!) = (2 Jika @ ln L (!) =@
2
exp
n i=1
1 2 2
(xi
1)
n 2 i=1 xi
:
2
= 0 , maka n 2
+
2
1
= 0
2 2
n 2 i=1 xi
=
n
;
di mana 2 memaksimumkan L (!) : Jadi, penduga kemungkinan maksimum bagi 2 ialah n 2 ^2 = i=1 Xi : n Jika @ ln L ( ) =@ 1 dan @ ln L ( ) =@ 2 dibuat sama dengan nol, maka penduga kemungkinan maksimum bagi 1 dan 2 ialah ^1 = X ^2 =
n i=1
Xi n
X
2
:
6.3 Uji Rasio Kemungkinan
117
Dengan demikian, L ^
"
=
L (^ !) =
n i=1
2
2
n i=1
x)2 =
(xi
(x) = , , , , , Karena X
n 2 i=1 xi
"
e
n
L (^ !) (x) = = L ^
"
n i=1
T =q
2)
p n i=1
n i=1
Xi
n X X
;
n=2
; #n=2
:
nx2 ; maka
(xi x)2 n x)2 + nx2 i=1 (xi
Xi
n=2
e
n 2 i=1 xi
n i=1
dan
n=2
x)2
(xi
#n=2
1 2=n 0 2 nx 1+ n x)2 i=1 (xi 2 nx 2=n 1+ n 0 2 x) i=1 (xi nx2 2=n 1= 0 0 2 n x) i=1 (xi nx2 = 2 0 (n 2 1 n i=1 (xip x) =p2 n 1 p n jxj = 2 q n x)2 = 2 n 1 1 i=1 (xi
N ( 1;
#
n=2
2 n i=1 xi
sehingga
Karena
x)2
(xi n
X
2
1 2
= (n
=
2
0
1) 0
(n
2
(n
1) =
0
:
1) ; maka
t
Student (n
1)
t
Student (n
1) :
1)
dan bila H0 benar, T =q
p n i=1
Xi
nX X
2
= (n
1)
6.3 Uji Rasio Kemungkinan
118
Dengan demikian, daerah kritis C ialah 8 p < n jxj C = x; q : n x)2 = (n i=1 (xi S p t n
x; jxj
=
=2
(n
t
=2
9 = 1) ;
(n
1)
1) :
z Contoh 6.7 Misalkan X N ( 1 ; 3 ) dan Y N ( 2 ; 3 ) ; di mana 1 , 2 adalah nilai tengah dari X dan Y; serta 3 adalah ragam yang tidak diketahui, sehingga = f( 1 ; 2 ; 3 ) : 1 ; 2 2 R; 3 2 R+ g : Misalkan X1 ; X2 ; : : : ; Xn dan Y1 ; Y2 ; : : : ; Ym merupakan sampel acak dari sebaran tersebut. Hipotesis yang diuji ialah H0 : H1 :
1 1
= 6 =
2; 3 2; 3
>0 > 0;
sehingga ! = f( 1 ; 2 ; 3 ) : 1 = 2 2 R; 3 2 R+ g. Tentukan statistik dan sebaran yang terkait hipotesis tersebut, serta berikan daerah kritis pada taraf nyata : Jawab. Dalam hal ini X1 ; X2 ; : : : ; Xn ; Y1 ; Y2 ; : : : ; Ym adalah n + m > 2 sampel acak saling bebas, sehingga fungsi kemungkinannya ialah L ( ) = (2
exp
1 2 3
exp
1 2 3
(n+m)=2
3)
n i=1
2 1)
(xi
+
m i=1
2 2)
(yi
dan L (!) = (2
3)
Jika @ ln L (!) =@
(n+m)=2
1
dan @ ln L (!) =@ n i=1
1 3
n i=1
(xi
1) 2 1)
(xi
+
+
Solusi dari persamaan di atas untuk 1! 3!
= (n + m) = (n + m)
1 1
f
n i=1
3
1
n i=1 xi + n i=1 (xi
+
m i=1
2 1)
(yi
dibuat sama dengan nol, maka
m i=1 m i=1
2 1)
(xi
(yi
(yi dan
1)
3
1)
= 0
2
= n + m:
berturut-turut ialah
m i=1 yi g 2 1! ) +
m i=1
(yi
2 1! )
;
:
6.3 Uji Rasio Kemungkinan
119
di mana 1! dan 3! memaksimumkan L (!) : Selanjutnya, jika @ ln L ( ) =@ 1 , @ ln L ( ) =@ 2 ; dan @ ln L ( ) =@ 3 dibuat sama dengan nol, maka n i=1 (xi m i=1 (yi
1
(n + m) +
n i=1
3
1)
=0 2) = 0 2 1)
(xi
Solusi dari persamaan di atas untuk
m i=1
+
1; 2
dan
2 1)
(yi
3
= 0:
berturut-turut ialah
=x 2 = y
1
3
di mana
1;
2
= (n + m) dan
1
n i=1
2 1)
(xi
+
m i=1
2 2)
(yi
memaksimumkan L ( ) : Dengan demikian,
3
L ^
e 2
=
3 (n+m)=2
1
e
L (^ !) =
(n+m)=2
1
;
2
3!
sehingga (n+m)=2
L (^ !) = (x) = L ^ 2=(n+m)
(X) = =
n X i=1
Xi
3!
^3 ^3! n i=1
Pn
i=1
Karena
3
nX + mY n+m
Xi
X
nX + mY n+m
Xi
2
= = =
n X
i=1 n X
i=1 n X i=1
Xi
2
m i=1
+
2
+
Yi
Pm
i=1
X + X
Xi
X
Xi
X
2
2
+n X +
Y
Yi
2 2:
nX + mY n+m
2
nX + mY n+m
2
nX + mY n+m
m2 n X (n + m)2
Y
2
6.3 Uji Rasio Kemungkinan
120
dan m X i=1
Yi
m X
2
nX + mY n+m
=
Yi
i=1
m X
=
i=1 m X
=
Yi
Y
Yi
Y
2
2
n2 m X (n + m)2
i=1
2
nX + mY n+m
+m Y +
2
nX + mY n+m
Y + Y
Y
2
;
maka 2=(n+m)
(X) = Pn
i=1
=
Jika hipotesis H0 : T =
r
nm X n+m
Xi
X
n i=1 Xi P 2 + m i=1
X
2
Yi
+ Y
Y
Yi
=
2
(
Y
2
+ [nm= (n + m)] X
1
[nm= (n + m)] X Y 1 + Pn P 2 X + m i=1 Xi i=1 Yi 1
m i=1 2
Y
:
2 2
Y
benar, maka peubah acak
(n + m
2)
1
"
n X
Xi
X
2
+
i=1
m X i=1
Yi
Y
2
#)
1=2
memiliki sebaran t Student dengan derajat bebas n+m 2: Dengan demikian, peubah acak 2=(n+m) (X) dapat dituliskan menjadi n+m 2 ; (n + m 2) + T 2 sehingga daerah kritis C ialah C = jtj adalah nilai amatan dari peubah acak T:
t
=2
(n + m
2) ; di mana t z
De…nisi 6.3 Misalkan peubah acak Z N ( ; 1) dan peubah acak U 2 (r) ; serta dua peubah acak tersebut saling bebas, maka peubah acak Z T =p U=r
dikatakan memiliki sebaran t takterpusat dengan derajat bebas r dan parameter takterpusat : Jika = 0; maka T disebut memiliki sebaran terpusat t:
2
6.3 Uji Rasio Kemungkinan
121
Pada dua contoh di atas, Contoh 6.6 dan Contoh 6.7, penentuan uji rasio kemungkinan tersebut dilakukan berdasarkan statistik di mana jika H0 benar, maka memiliki sebaran t: Kemudian, kita ingin menguji statistik pada contoh-contoh tersebut dengan menggunakan De…nisi 6.3. Pada Contoh 6.6, diperoleh p nX
T =q
di mana
p
Z1 =
n i=1
nX
n i=1
U1 =
Xi
X p
N Xi
2
n
= (n
1
1)
;1
2
X
2
2
(n
1) ;
peubah acak Z1 dan U1 saling bebas. Dengan demikian, jika 1 6= 0; maka T memiliki sebaran p t takterpusat dengan derajat bebas n 1 dan parameter n 1 terpusatnya 1 = : Dari Contoh 6.7 diperoleh T =p
di mana
Z2 = dan U2 =
1 2
"
n X
r
Z2 U2 = (n + m
nm X n+m
Xi
X
2
i=1
+
2)
Y = m X
Yi
Y
i=1
2
#
:
Kedua peubah acak tersebut saling bebas dan Z2
N
U2
2
p nm= (n + m) (
(n + m
1
2) =
;1
2) :
Dengan demikian, jika 1 = 6 2 ; maka T memiliki sebaran t takterpusat dengan derajat bebas n + m 2 dan parameter takterpusatnya p nm= (n + m) ( 1 2 = 2) = :
6.4 Uji Rasio Peluang Bersekuens
Misalkan suatu statistik
2 ln
122
(X) dengan
(x) =
L (^ !) : L ^
Berdasarkan prinsip dari uji rasio kemungkinan, H0 ditolak jika dan hanya jika 2 ln ; H0 ditolak jika 2 ln > 1 0 ; sehingga untuk statistik untuk suatu konstanta 1 . Dengan demikian, uji rasio kemungkinan ekuivalen dengan uji yang menggunakan statistik 2 ln : Berikut ini merupakan teorema yang menyatakan sebaran asimtotik bagi 2 ln : Teorema 6.2 Misalkan X1 ; X2 ; :::; Xn adalah sampel acak dengan fungsi kepekatan peluang f (x; ) ; 2 ; di mana merupakan himpunan bagian berdimensi r dari Rr dan misalkan ! merupakan himpunan bagian berdimensi m dari : Misalkan pula himpunan positif dari fungsi kepekatan peluang tidak bergantung pada ; maka sebaran asimtotik dari 2 ln ialah 2 (r m) ; asalkan 2 !; yaitu saat n ! 1; P ( 2 ln
x) ! G (x) ; x
dengan G adalah fungsi sebaran dari sebaran
6.4
0; 8 2 !; 2
(r
m) :
Uji Rasio Peluang Bersekuens
Pada Teorema 6.1 diberikan suatu metode untuk menentukan daerah kritis terbaik untuk pengujian hipotesis sederhana lawan hipotesis alternatif sederhana. Misalkan X1 ; X2 ; : : : ; Xn adalah sampel acak dengan ukuran contoh n yang tetap, yang berasal dari sebaran dengan fungsi massa atau kepekatan peluang f (x; ) ; di mana = f : = 0 ; 00 g dan 0 ; 00 diketahui nilainya. Fungsi kemungkinan dari X1 ; X2 ; : : : ; Xn ialah L ( ; n) = f (x1 ; ) f (x2 ; ) Jika H0 :
=
0
ditolak dan H1 :
=
00
L ( 0 ; n) L ( 00 ; n)
f (xn ; ) :
diterima ketika k;
di mana k > 0, maka berdasarkan Teorema 6.1, hal tersebut merupakan uji terbaik dari H0 lawan H1 . Selanjutnya, misalkan ukuran sampel n merupakan suatu peubah acak. Misalkan N adalah peubah acak yang menyatakan ukuran sampel dengan
6.4 Uji Rasio Peluang Bersekuens
123
ruang sampel f1; 2; 3; :::g : Prosedur untuk pengujian hipotesis sederhana H0 : = 0 lawan H1 : = 00 ialah sebagai berikut: misalkan k0 dan k1 merupakan konstanta positif dengan k0 < k1 : Amati nilai dari X1 ; X2 ; : : : ; Xn pada suatu sekuens, sebagai contoh x1 ; x2 ; x3 : : : dan hitung L ( 0 ; 1) L ( 0 ; 2) L ( 0 ; 3) ; ; ; L ( 00 ; 1) L ( 00 ; 2) L ( 00 ; 3)
:
Hipotesis H0 ditolak jika dan hanya jika terdapat bilangan bulat positif n sedemikian sehingga xn = (x1 ; x2 ; : : : ; xn ) merupakan anggota dari himpunan Cn =
x n : k0 <
L ( 0 ; j) < k1 ; j = 1; 2; :::; n L ( 00 ; j)
1 dan
L ( 0 ; n) L ( 00 ; n)
k0 :
Di samping itu, hipotesis H0 diterima jika dan hanya jika terdapat bilangan bulat positif n sedemikian sehingga xn = (x1 ; x2 ; : : : ; xn ) merupakan anggota dari himpunan An =
x n : k0 <
L ( 0 ; j) < k1 ; j = 1; 2; :::; n L ( 00 ; j)
1 dan
L ( 0 ; n) L ( 00 ; n)
k1 ;
Dengan kata lain, pengamatan contoh dilanjutkan selama L ( 0 ; n) < k1 k0 < L ( 00 ; n)
(6.5)
dan berhenti jika: 1. Dengan penolakan H0 :
= 0; L ( 0 ; n) L ( 00 ; n)
2. Dengan penerimaan H0 :
k0 :
= 0; L ( 0 ; n) L ( 00 ; n)
k1 :
Pengujian hipotesis tersebut disebut uji rasio peluang bersekuens Wald (Wald’s sequential probability ratio test). Seringkali, pertaksamaan 6.5 dituliskan menjadi c0 (n) < u (x1 ; x2 ; : : : ; xn ) < c1 (n) di mana u (X1 ; X2 ; : : : ; Xn ) adalah suatu statistik dan c0 (n) ; c1 (n) adalah konstanta yang bergantung terhadap k0 ; k1 ; 0 ; 00 ; dan n; sehingga pengamatan dihentikan serta putusan ditentukan ketika u (x1 ; x2 ; : : : ; xn )
c0 (n) atau u (x1 ; x2 ; : : : ; xn )
c1 (n) :
6.4 Uji Rasio Peluang Bersekuens
124
Contoh 6.8 Misalkan X memiliki fungsi massa peluang f (x; ) =
x
x
)1
(1
I (x = 0; 1) :
Tentukan daerah kritis bagi hipotesis H0 : H1 :
1 3 2 = 3 =
dengan menggunakan uji rasio peluang bersekuens Wald. Jawab. 1 ;n 3 2 ;n 3
L L di mana
xi =
=
1 3 2 3
xi xi
2 n 3 1 n 3
xi xi
= 2n
2 xi
;
n i=1 xi :
k0 <
c0 (n) =
log2 k0 < n 1 log2 k1 < 2
n 2
L L
1 ;n 3 < k1 2 ;n 3 2 ni=1 xi < log2 n i=1 xi
<
n 2
k1
1 log2 k0 = c1 (n) : 2
n Perhatikan bahwa L 31 ; n =L 23 ; n k0 jika dan hanya jika c1 (n) i=1 xi 1 2 n dan L 3 ; n =L 3 ; n x : Dengan k1 jika dan hanya jika c0 (n) i=1 i demikian, pengamatan contoh dilanjutkan selama
c0 (n) <
n i=1 xi
< c1 (n) :
Daerah penolakan H0 : = 31 ialah ni=1 xi c1 (n) dan daerah penerimaan H0 : = 13 ialah ni=1 xi c0 (n) : z Pada subbab ini, kuasa dari uji ketika H0 benar dinotasikan dan kuasa dari uji ketika H1 benar dinotasikan 1 : Dengan demikian, adalah peluang terjadinya kesalahan jenis I (penolakan H0 padahal H0 benar) dan adalah peluang terjadinya kesalahan jenis II (penerimaan H0 padahal H0 salah), sehingga (dalam kasus kontinu) =
1 Z X n=1
Cn
0
L ( ; n) ;
(1
)=
1 Z X n=1
Cn
L ( 00 ; n) :
6.4 Uji Rasio Peluang Bersekuens
125
Karena peluang bernilai satu ketika prosedur berakhir, maka 1 Z 1 Z X X 0 1 = L ( ; n) ; = L ( 00 ; n) : n=1
An
An
n=1
Jika (x1 ; x2 ; : : : ; xn ) 2 Cn ; maka L ( 0 ; n) k0 L ( 00 ; n) ; sehingga jelas bahwa 1 Z 1 Z X X 0 L ( ; n) k0 L ( 00 ; n) = k0 (1 ): = n=1
Karena L ( 0 ; n) 1
Cn
Cn
n=1
k1 L ( 00 ; n) pada setiap titik dari himpunan An ; maka 1 Z 1 Z X X 0 = L ( ; n) k1 L ( 00 ; n) = k1 : n=1
An
An
n=1
Oleh karena itu, 1
(6.6) 1 asalkan tidak bernilai 0 atau 1. Misalkan 0 dan 0 adalah nilai yang ditetapkan sebelumnya. Jika kita mengambil 1 0 0 dan k1 = ; k0 = 1 0 0 maka pertaksamaan 6.6 menjadi k0 ;
0
1
1
k1
1
;
1
0
0
0
atau ekuivalen dengan (1
0)
0
(1
);
(1
0)
0
(1
):
Apabila kedua pertaksamaan 6.7 dijumlahkan, maka diperoleh +
0
+
0:
Dengan demikian, diperoleh batas atas dari 0
1
dan 0
,
1
0
serta secara empiris 0; 0:
; 0
ialah
(6.7)
6.4 Uji Rasio Peluang Bersekuens
Pada Contoh 6.8, bila
126
= 0:01 dan
= 0:05; maka
0:01 1 = 1 0:05 95 99 1 0:01 = ; = 0:05 5
k0 = k1 sehingga tolak H0 bila n i=1 xi
n 2
1 1 log2 = c1 (n) 2 95
n 2
1 99 log2 = c0 (n) : 2 5
dan terima H1 bila n i=1 xi
Catatan 6.1 Peluang bahwa prosedur dari pengujian tersebut terus berlanjut sampai n ! 1 ialah nol. Jika = 0 atau = 00 ; maka 1 [ ln k0 + (1 ) ln k1 ] ; E (ZjH0 ) 1 E (N jH1 ) = [(1 ) ln k0 + ln k1 ] ; E (ZjH1 )
E (N jH0 ) =
di mana Z = ln
f (X; 0 ) f (X; 00 )
dan N merupakan peubah acak yang menyatakan ukuran sampel. Contoh 6.9 Misalkan X memiliki sebaran N ( ; 1) : Gunakan uji rasio peluang bersekuens Wald untuk menentukan rata-rata ukuran contoh yang diharapkan untuk sampai pada suatu putusan bila diketahui hipotesis sebagai berikut : H0 : H1 : dengan
=
= 0:01:
=0 =1
6.4 Uji Rasio Peluang Bersekuens
127
Jawab. 0:01 1 = 1 0:01 99 1 0:01 = = 99 0:01
k0 = k1
Z = ln = ln
1 2
exp
1 X2 2
= =
f (X; 0 ) f (X; 00 ) " exp
1 2
1 2 X 2
1]2
[X
(X
#
1)2
X
1 2
E (ZjH0 ) = E 1 2 1 = 2
E (X j
=
1 2
E (ZjH1 ) = E 1 2 1 = 2
= 0)
X j H1
E (X j
=
=
X j H0
= 1)
1 1 2
1 1 0:01 ln + 0:99 ln (99) = 9 1=2 99 1 1 E (N jH1 ) = 0:99 ln + 0:01 ln (99) = 9 1=2 99 E (N jH0 ) =
6.4 Uji Rasio Peluang Bersekuens
128
Sebagai pembanding, gunakan uji terbaiknya. = P X > k j H0 1 0 k X 0:01 = P @ q > q A 0
1 n
1 n
1
k 0:01 = P @Z > q A 1 n
0:01 = P (Z > 2:325) ;
sehingga k q
= 2:325 1 n
1
q2
y
= 2:325 1 n
n = 22:
2.5
2.0
1.5
1.0
0.5
-2.0
-1.5
-1.0
-0.5
0.0
0.5
Gambar 5. Sebaran Normal X
1.0
1.5
2.0
N 0; n1 dan X
2.5
3.0
x
N 1; n1 z
6.5 Latihan
6.5
129
Latihan
1. Misalkan X1 ; X2 ; : : : ; Xn merupakan sampel acak dari sebaran N ( ; 25). n
xi
(a) Tunjukkanlah bahwa C = f(x1 ; x2 ; : : : ; xn ) : i=1 n pakan daerah kritis terbaik untuk pengujian H0 : H1 : = 12. (b) Tentukan pula n dan c sehingga
= 0:05 dan 1
cg meru= 10 lawan = 0:90.
Catatan: Bila Z~N (0; 1); maka P (Z
1:645) = 0:05 dan P (Z
1:285) = 0:10:
2. Misalkan X1 ; X2 ; : : : ; X10 merupakan sampel acak dari sebaran N (0; ) untuk pengujian H0 : = 5 lawan H1 : > 5: (a) Tunjukkanlah bahwa ada Uji Selalu Paling Kuasa (UMPT, Uniformly Most Powerful Test) dalam pengujian ini. (b) Bila
= 0:05 maka berikanlah daerah kritis dan fungsi kuasanya.
3. Misalkan X1 ; X2 ; : : : ; Xn merupakan sampel acak dari sebaran N (5; ), > 0; untuk pengujian H0 :
=
0
lawan H1 :
6=
0
(a) Apakah dapat diperoleh uji selalu paling kuasa (Uniformly Most Powerful Test)? Jelaskan. (b) Tunjukkanlah bahwa uji rasio kemungkinan (LRT, Likelihood Ratio Test) H0 : = 0 lawan H1 : 6= 0 dapat didasarkan pada statistik W = ni=1 (Xi 5)2 = 0 . Tentukan sebaran dari W bila H0 benar dan berikan daerah kritisnya untuk taraf nyata (level of signi…cance) . 4. Berikut fungsi massa peluang peubah acak Z dengan 0 < Amatan (z) f (z; 0 ) z1 1/12 z2 1/12 z3 1/6 z4 2/3
f (z; ) =3 (1=3) (1 ) 1/2 1/6
f (z;
0 ) = sup f
< 1: (z; )
6.5 Latihan
130
Isilah nilai f (z; 0 ) = sup f (z; ) pada tabel di atas dan berikanlah uji rasio kemungkinan (LRT, Likelihood Ratio Test) untuk pengujian H0 : = 0 lawan H1 : 6= 0 dengan amatan tunggal untuk = 1/6. Berikan pula kuasa uji-nya (1 ). 5. Misalkan peubah acak X bersebaran N (0; ). Berikanlah uji rasio peluang bersekuens (SPRT, Sequential Probability Ratio Test) bagi H0 : = 4 lawan H1 : = 9 dengan = 0:05 dan = 0:10. Berikan pula rata-rata ukuran contoh yang diharapkan untuk sampai pada suatu putusan.
Daftar Pustaka [1] Hogg RV, McKean J, Craig AT. 2005. Introduction to Mathematical Statistics. Sixth Edition. New Jersey: Pearson Education, Inc. [2] Hogg RV, McKean J, Craig AT. 2014. Introduction to Mathematical Statistics. Seventh Edition. New Jersey: Pearson Education, Inc. [3] Lindgren BW. 1976. Statistical Theory. Third Edition. New York: Macmillan Publishing Co, Inc. [4] Rice JA. 2007. Mathematical Statistics and Data Analysis. Duxbury: Thomson Brooks/Cole. [5] Roussas GG. 1973. A First Course in Mathematical Statistics. Boston: Addison-Wesley Publishing Company.
131