69 Membuktkan Valdtas Krtera
— Bab V
68 | B a b V M e m b u k t i k a n V a l i d i t a s K r i t e r i a
Bab V MEMBUKTIKAN VALIDITAS KRITERIA
A. Bukti Validitas Kriteria
Untuk membuktkan valdtas krtera, dperlukan suatu krtera criterion. Jka valdtas krtera suatu tes atau suatu nstrumen akan dbuktkan, dperlukan tes lan yang mengukur
konsruk yang bersesuaan. Tes lan yang djadkan krtera n basanya tes yang danggap lebh terstandar. Sebaga contoh, asosas guru bahasa Inggrs sebaga bahasa asng d Indonesa
TEFLIN mengembangkan Test of English Proficiency TOEP. Untuk membuktkan valdtas krtera TOEP, dgunakan tes yang danggap lebh terstandar yatu Test of English as Foreign
Language TOEFL sebaga krteranya Suwarsh Madya, Al Saukah, Her Retnawat, Suharso,2008. Pada kasus n, nstrumen yang akan dbuktkan valdtasnya adalah TOEP,
sedangkan TOEFL danggap sebaga krtera, karena merupakan tes yang lebh terstandar. Untuk membuktkan valdtas krtera, suatu sampel dmnta mengerjakan tesnstrumen
yang akan dbuktkan valdtasnya dan juga mengerjakan tesnstrumen yang djadkan krtera. Jka waktu pengerjaan kedua tes atau nstrumen tersebut berdekatan, maka proses pembuktan
valdtasnya dnama dengan valdtas krtera jens concurrent validity. Jka jarak waktu pengerjaan kedua tes cukup lama, maka pembuktan valdtasnya dnama dengan valdtas
krtera jens predictive validity. Pada kasus membuktkan valdtas krtera dar TOEP, sejumlah peserta tes dmnta
mengerjakan TOEP. Haslnya kemudan dskor, menghaslkan skor TOEP. Kemudan peserta tes n ddana untuk mengkut TOEFL, yang kemudan dar lembaga yang bersangkutan
memeroleh skor TOEFL. Pada proses valdas n dperlukan dana yang cukup besar, karena TOEFL yang djadkan krtera merupakan tes yang standar dan haslnya daku secara
nternasonal. Valdtas krtera dapat dbuktkan dengan menghtung koefsen korelas antara skor
peserta yang dperoleh dar mengerjakan perangkat yang dvaldas dengan skor yang dperoleh dar mengerjakan perangkat yang danggap krtera. Untuk mempermudah, skor peserta yang
dperoleh dar mengerjakan perangkat yang dvaldas dberkan smbol x, sedangkan skor yang
70 Bab V —
Membuktkan Valdtas Krtera dperoleh dar mengerjakan perangkat yang danggap krtera dberkan smbol y. Pada statstka,
untuk x varabel bebas dan y varabel terkat, dan keduanya merupakan nla dalam skala nterval atau raso, maka koefsen korelas
U dapat dcar dengan mengestmasnya, menggunakan persamaan :
Y X ,
ˆ U
=
¦ ¦
¦
2 2
. Y
Y X
X Y
Y X
X 5.1
atau untuk memudahkan perhtungan dapat dtuls sebaga
Y X ,
ˆ U
=
¦ ¦
¦ ¦
¦ ¦ ¦
2 2
2 2
. Y
Y N
X X
N Y
X XY
N 5.2
Kuadrat nla korelas n dnterpretaskan sebaga sumbangan varabel X terhadap varabel Y atau yang serng dsebut sebaga koefsen determnas.
Besarnya koefsen korelas dapat dgunakan untuk menentukan besarnya koefsen valdtas krtera. Semakn besar koefsen
Y X ,
ˆ U
maka semakn tngg pula valdtas krteranya, bak untuk jens predktf maupun concurrent. Besarnya koefsen valdtas n dgunakan untuk
menghtung kesalahan standar estmas predks, dengan menggunakan formula
SE
estmas
= ܵܦ
௬
ඥͳ െ ݎ
௫௬ ଶ
5.3 Dengan
ݎ
௫௬ ଶ
merupakan koefsen determnas dar valdtas, dan ܵܦ
௬
merupaka standar devas dar skor krtera.
Manfaat lan yang dperoleh dengan adanya valdtas krtera adalah skor predks. Sebaga contoh, dengan memanfaatkan skor TOEP, kemampuan peserta jka dukur
menggunakan TOEFL dapat dpredkskan. Skor predks n dapat dperoleh setelah mengestmas persamaan regres
Y =
E +
E
1
+ H
5.4 Dengan Y = Peubah tak bebas pada skor krtera, X = Peubah bebas pada skor tes atau nstrumen
yang akan dvaldas, E
= ntersepperpotongan dengan sumbu tegak, E
1
= Kemrngangraden, H
error yang salng bebas dan menyebar normal N0, V
2
i = 1, 2, …, n.
i
X
71 Membuktkan Valdtas Krtera
— Bab V
Jka untuk perangkat tes atau nstrumen yang terdr dar banyak subtes, maka dapat dgunakan regres lnear ganda. Regres lnear ganda adalah persamaan regres yang
menggambarkan hubungan antara lebh dar satu peubah bebas X dan satu peubah tak bebas Y. Hubungan peubah-peubah tersebut dapat dtulskan dalam bentuk persamaan:
5.5
Y = Peubah tak bebas skor krtera , X = Peubah bebas skor peserta terhadap nstrumen yang dvaldas ,
E = ntersepperpotongan dengan sumbu tegak,
E
1
, E
2
, ...., E
p 1
= parameter model regres,
H salng bebas dan menyebar normal N0,
V
2
, i = 1, 2, …, n Persamaan regres dugaannya adalah
5.6 Berkut dsajkan contoh membuktkan valdtas kttera TOEP yang dsarkan dar artkel Her
Retnawat 2009.
Contoh Membuktikan Validitas Kriteria TOEP
Contoh kasus untuk membuktkan valdtas krtera n pada pembuktan valdtas perangkat Test of English Proficiency, TOEP. Selama n alat ukur yang dgunakan untuk
mendapatkan nformas tentang kemahran berbahasa Inggrs adalah tes bahasa Inggrs yang dbuat oleh lembaga asng, msalnya TOEFL, TOEIC, dan IELTS. Baya untuk mengkut tes n
cukup mahal, tetap memang haslnya jelas daku d semua Negara karena memang tes-tes tsb bersfat standar, yang telah dkembangkan melalu serentetan kegatan yang dtujukan untuk
menjaga agar tes yang dhaslkan memenuh krtera tes yang bak. Sebaga contoh adalah membuktkan valdtas krter Test of English Proficiency atau
TOEP. Dawal pada tahun 2007, Drektorat PSMA memandang perlu untuk segera mengembangkan tes profsens bahasa Inggrs Test of English Proficiency atau TOEP, yang
mengukur kemahran menggunakan bahasa Inggrs dalam duna nyata para lulusan SMA. Pada tahun 2007 telah dmula pengembangan seperangkat nstrumen pengukuran kemahran
menggunakan bahasa Inggrs tersebut, yang dlanjutkan tahun 2008 dan 2009. Selama 3 tahun
1 1
2 2
1 ,
1 i
i i
p i p
i
Y X
X X
E E E
E H
1 1
2 2
1 ,
1
ˆ
i i
i p
i p
Y b
b X b X
b X
72 Bab V —
Membuktkan Valdtas Krtera 2007-2009 telah dkembangkan 7 perangkat TOEP yang dber nama TOEP 1, 2A, 2B, 3A, 3B,
4, dan 5 yang salng paralel Suwarsh Madya, dkk, 2008. Tes Kemahran Bahasa Inggrs Test of English Proficiency, TOEP yang merupakan tes
standar untuk mengukur kemahran berbahasa Inggrs sswa Sekolah Menengah Atas SMA. TOEP yang dkembangkan merupakan tes tertuls paper and pencil test pada tahun 2007 dan
2008, dan selanjutnya drnts tes untuk mengukur kemampuan Speaking dan Reading d tahun 2009 dan 2010. Penskoran tap butr dlakukan dengan sstem dkotom, benar dber skor 1 dan
jka salah dber skor 0. Tes n khusus mengukur kemahran sswa SMA dalam menggunakan bahasa Inggrs, khususnya Reading dan Listening. Tes terdr dar 100 butr soal, dengan rncan
50 butr tes Reading dan 50 butr tes Listening. Terkat dengan tes yang dkembangkan merupakan tes standar nternasonal, pada kegatan n juga dhaslkan petunjuk pelaksanaan
TOEP. Hal n dmaksudkan agar setap TOEP yang dlaksanakan benar-benar merupakan tes yang terstandar.
TOEP dkembangkan melalu proses menjabarkan tujuan menjad ndkator-ndkator, yang kemudan dkembangkan menjad butr. In berart TOEP memenuh syarat tes yang bak
dtnjau dar valdtas snya. Valdtas kenampakan face validity untuk menjad tes yang bak juga terpenuh, mengngat pengembangan tes n mula dar menyusun butr sampa dengan
peraktan tes melbatkan ahl yang terkat, bak dar perguruan tngg maupun dar prakts d lapangan guru. Valdtas lan yang dgunakan yakn valdtas criterion-related evidence of
validity jens konkuren, yakn mengatkan skor TOEP dengan skor TOEFL Insttusonal perolehan sswa benchmarking.
Terkat dengan adanya valdtas criterion-related evidence of validity jens konkuren yang dmlk TOEP, skor perolehan sswa SMA yang menempuh TOEP dapat dkonverskan ke
skor tes lan, msalnya TOEFL. Sehubungan dengan adanya dua model regres untuk mempredks kemampuan peserta, yakn regres tunggal dan regres ganda, pada tulsan n akan
dbandngkan keakuratan kedua model n dalam mempredks skor TOEFL sswa SMA d Indonesa. Pada model regres tunggal dgunakan skor TOEP peserta untuk mempredks skor
TOEFL, dan pada regres ganda dgunakan skor Lstenng TOEP dan skor Readng TOEP untuk mempredkskan skor TOEFL peserta Her Retnawat, 2009.
Untuk mengetahu keberadaan hubungan lnear antara varabel predktor dengan varabel krtera, dbuat dagram pencar Scatter Plot terlebh dahulu. Pada model regres tunggal,
73 Membuktkan Valdtas Krtera
— Bab V
varabel predktornya merupakan skor TOEP dan varabel krteranya merupakan skor TOEFL. Haslnya dsajkan pada Gambar 1. Demkan pula pada model regres ganda, varabel
predktornya merupakan skor TOEP Listening dan skor TOEP Reading dan varabel krteranya merupakan skor TOEFL, dengan hasl pada Gambar 5.1.
TOEP 1 TOEP 2A
TOEP_TOT
90 80
70 60
50 40
T O
E F
L _
T O
700 600
500 400
300
TOEP_TOT
80 70
60 50
40 30
T O
E F
L _
T O
700 600
500 400
TOEP 2B TOEP 3A
TOEP_TOT
80 70
60 50
40 30
T O
E F
L _
T O
700 600
500 400
300
TOEP_TOT
90 80
70 60
50 40
T O
E F
L _
T O
600 500
400 300
TOEP 3B TOEP 4
TOEP_TOT
100 90
80 70
60 50
40 30
T O
E F
L _
T O
700 600
500 400
300
TOEP_TOT
100 90
80 70
60 50
40 30
T O
E F
L _
T O
600 500
400 300
TOEP 5
74 Bab V —
Membuktkan Valdtas Krtera
TOEP_TOT
90 80
70 60
50 40
30
T O
E F
L _
T O
600
500
400 300
Gambar 5.1. Dagram Pencar Skor TOEP untuk Mempredks Skor TOEFL TOEP 1
TOEP 2A
TOEFL_TO
100 100
400 90
90 500
600
80 80
700
70
TOEP_REA TOEP_LIS
70 60
60 50
50 40
TOEFL_TO
90 90
400 80
500 80
600
70 700
70
TOEP_REA TOEP_LIS
60 60
50 50
40
TOEP 2B TOEP 3A
TOEFL_TO
90 100
400 90
80 500
600
80 70
700
70
TOEP_LIS TOEP_REA
60 60
50 50
40 40
TOEFL_TO
100 100
400 90
90 500
80 80
600
70 70
TOEP_REA TOEP_LIS
60 60
50 50
40 40
TOEP 3B TOEP 4
TOEFL_TO
100 100
300 90
400 90
500
80 80
600 700
70 70
TOEP_REA TOEP_LIS
60 60
50 50
40 40
30 TOEFL_TO
100 120
400 90
100 500
80 600
70 80
TOEP_REA TOEP_LIS
60 60
50 40
40 30
75 Membuktkan Valdtas Krtera
— Bab V
74 | B a b V M e m b u k t i k a n V a l i d i t a s K r i t e r i a
TOEP 5
TOEFL_TO
90 120
400 80
100 500
70 600
80 60
TOEP_LIS TOEP_REA
50 60
40 40
30
Gambar 5.2. Dagram Pencar TOEP Listening dan TOEP Reading untuk Mempredks Skor TOEFL
Mencermat dagram pencar pada Gambar 5.1, dperoleh bahwa terdapat hubungan lnear antara skor TOEP dengan skor TOEFL pada model regres tunggal. Pada Gambar 5.2 juga
menunjukkan adanya hubungan lnear antara skor TOEP Listening dan TOEP Reading untuk Mempredks skor TOEFL dengan menggunakan regres ganda. Hasl estmas korelas bak
pada model regres tunggal maupun regras ganda dsajkan pada Tabel 5.1. Tabel 2.7 Hasl Estmas Koefsen Korelas dan Kontrbus
Perangkat TOEP
Model Y=b
+b
1
X Y= b
+b
1
X
1
+b
2
X
2
r r
2
R r
2
1 0.7943
0.6309 0.8060
0.6497 2A
0.7801 0.6085
0.8081 0.6530
2B 0.8349
0.6970 0.8357
0.6984 3A
0.7687 0.5908
0.7692 0.5917
3B 0.8445
0.7132 0.8467
0.7169 4
0.7910 0.6257
0.7910 0.6257
5 0.7765
0.6030 0.7773
0.6043
Keterangan : Yˆ skor TOEFL predks, X skor TOEP regres tunggal
76 Bab V —
Membuktkan Valdtas Krtera Yˆ
skor TOEFL predks, X
1
skor TOEP Listening, X
2
skor TOEP Reading regres ganda
Hasl perhtungan korelas tersebut menunjukkan kecenderungan bahwa korelas dengan dua predktor terhadap TOEFL lebh tngg dbandngkan korelas dengan predktor tunggal.
Demkan pula koefsen korelas determnas r
2
yang menunjukkan persentase kontrbus TOEP dalam mepredks TOEFL.
Dengan menggunakan data emprs, selanjutnya dapat destmas konstanta dan koefsen pada persamaan regres, yang dsajkan pada Tabel 2.8 untuk model regres tunggal dan regres
ganda. Persamaan regres n dgunakan untuk membuat predks, jka dperoleh salah satu skor, dapat destmas skor yang lan.
Tabel 5.2. Persamaan Regres untuk Memredks Skor TOEFL dengan Skor TOEP Perangkat
TOEP Persamaan Predks
Dengan Yˆ skor TOEFL predks, X skor TOEP
Persamaan Predks Dengan Yˆ skor TOEFL predks, X
1
skor TOEP Listening, X
2
skor TOEP Reading 1
Yˆ = 3,381 . X + 266,214 Yˆ = 274,449+1,285. X
1
+2.401. X
2
2A Yˆ
= 4,321 . X + 251,435 Yˆ
= 264,609+2,977. X
1
+1.120. X
2
2B Yˆ
= 4,268 . X + 234,846 Yˆ
= 239,063+2,273. X
1
+1.922. X
2
3A Yˆ = 3,630 . X + 252,836
Yˆ = 254,244+1,917. X
1
+1.692. X
2
3B Yˆ
= 3,923 . X + 218,624 Yˆ
= 223,336+2,210. X
1
+1.634. X
2
4 Yˆ
= 4,321 . X + 251.435 Yˆ
= 243,872+1,377. X
1
+1.383. X
2
5 Yˆ = 4,268 . X + 234.846
Yˆ = 230,464+1,469. X
1
+1.759. X
2
77 Membuktkan Valdtas Krtera
— Bab V
Mencermat besarnya nla korelas dan ndeks determnas hasl analss tersebut, dapat dperoleh bahwa telah terbukt secara emprs bahwa TOEP terbukt vald atau memlk valdtas
krtera.
B. Membuktikan Validitas Kriteria