Bukti Validitas Kriteria MEMBUKTIKAN VALIDITAS KRITERIA

69 Membuktkan Valdtas Krtera — Bab V 68 | B a b V M e m b u k t i k a n V a l i d i t a s K r i t e r i a

Bab V MEMBUKTIKAN VALIDITAS KRITERIA

A. Bukti Validitas Kriteria

Untuk membuktkan valdtas krtera, dperlukan suatu krtera criterion. Jka valdtas krtera suatu tes atau suatu nstrumen akan dbuktkan, dperlukan tes lan yang mengukur konsruk yang bersesuaan. Tes lan yang djadkan krtera n basanya tes yang danggap lebh terstandar. Sebaga contoh, asosas guru bahasa Inggrs sebaga bahasa asng d Indonesa TEFLIN mengembangkan Test of English Proficiency TOEP. Untuk membuktkan valdtas krtera TOEP, dgunakan tes yang danggap lebh terstandar yatu Test of English as Foreign Language TOEFL sebaga krteranya Suwarsh Madya, Al Saukah, Her Retnawat, Suharso,2008. Pada kasus n, nstrumen yang akan dbuktkan valdtasnya adalah TOEP, sedangkan TOEFL danggap sebaga krtera, karena merupakan tes yang lebh terstandar. Untuk membuktkan valdtas krtera, suatu sampel dmnta mengerjakan tesnstrumen yang akan dbuktkan valdtasnya dan juga mengerjakan tesnstrumen yang djadkan krtera. Jka waktu pengerjaan kedua tes atau nstrumen tersebut berdekatan, maka proses pembuktan valdtasnya dnama dengan valdtas krtera jens concurrent validity. Jka jarak waktu pengerjaan kedua tes cukup lama, maka pembuktan valdtasnya dnama dengan valdtas krtera jens predictive validity. Pada kasus membuktkan valdtas krtera dar TOEP, sejumlah peserta tes dmnta mengerjakan TOEP. Haslnya kemudan dskor, menghaslkan skor TOEP. Kemudan peserta tes n ddana untuk mengkut TOEFL, yang kemudan dar lembaga yang bersangkutan memeroleh skor TOEFL. Pada proses valdas n dperlukan dana yang cukup besar, karena TOEFL yang djadkan krtera merupakan tes yang standar dan haslnya daku secara nternasonal. Valdtas krtera dapat dbuktkan dengan menghtung koefsen korelas antara skor peserta yang dperoleh dar mengerjakan perangkat yang dvaldas dengan skor yang dperoleh dar mengerjakan perangkat yang danggap krtera. Untuk mempermudah, skor peserta yang dperoleh dar mengerjakan perangkat yang dvaldas dberkan smbol x, sedangkan skor yang 70 Bab V — Membuktkan Valdtas Krtera dperoleh dar mengerjakan perangkat yang danggap krtera dberkan smbol y. Pada statstka, untuk x varabel bebas dan y varabel terkat, dan keduanya merupakan nla dalam skala nterval atau raso, maka koefsen korelas U dapat dcar dengan mengestmasnya, menggunakan persamaan : Y X , ˆ U = ¦ ¦ ¦ 2 2 . Y Y X X Y Y X X 5.1 atau untuk memudahkan perhtungan dapat dtuls sebaga Y X , ˆ U = ¦ ¦ ¦ ¦ ¦ ¦ ¦ 2 2 2 2 . Y Y N X X N Y X XY N 5.2 Kuadrat nla korelas n dnterpretaskan sebaga sumbangan varabel X terhadap varabel Y atau yang serng dsebut sebaga koefsen determnas. Besarnya koefsen korelas dapat dgunakan untuk menentukan besarnya koefsen valdtas krtera. Semakn besar koefsen Y X , ˆ U maka semakn tngg pula valdtas krteranya, bak untuk jens predktf maupun concurrent. Besarnya koefsen valdtas n dgunakan untuk menghtung kesalahan standar estmas predks, dengan menggunakan formula SE estmas = ܵܦ ௬ ඥͳ െ ݎ ௫௬ ଶ 5.3 Dengan ݎ ௫௬ ଶ merupakan koefsen determnas dar valdtas, dan ܵܦ ௬ merupaka standar devas dar skor krtera. Manfaat lan yang dperoleh dengan adanya valdtas krtera adalah skor predks. Sebaga contoh, dengan memanfaatkan skor TOEP, kemampuan peserta jka dukur menggunakan TOEFL dapat dpredkskan. Skor predks n dapat dperoleh setelah mengestmas persamaan regres Y = E + E 1 + H 5.4 Dengan Y = Peubah tak bebas pada skor krtera, X = Peubah bebas pada skor tes atau nstrumen yang akan dvaldas, E = ntersepperpotongan dengan sumbu tegak, E 1 = Kemrngangraden, H error yang salng bebas dan menyebar normal N0, V 2 i = 1, 2, …, n. i X 71 Membuktkan Valdtas Krtera — Bab V Jka untuk perangkat tes atau nstrumen yang terdr dar banyak subtes, maka dapat dgunakan regres lnear ganda. Regres lnear ganda adalah persamaan regres yang menggambarkan hubungan antara lebh dar satu peubah bebas X dan satu peubah tak bebas Y. Hubungan peubah-peubah tersebut dapat dtulskan dalam bentuk persamaan: 5.5 Y = Peubah tak bebas skor krtera , X = Peubah bebas skor peserta terhadap nstrumen yang dvaldas , E = ntersepperpotongan dengan sumbu tegak, E 1 , E 2 , ...., E p 1 = parameter model regres, H salng bebas dan menyebar normal N0, V 2 , i = 1, 2, …, n Persamaan regres dugaannya adalah 5.6 Berkut dsajkan contoh membuktkan valdtas kttera TOEP yang dsarkan dar artkel Her Retnawat 2009. Contoh Membuktikan Validitas Kriteria TOEP Contoh kasus untuk membuktkan valdtas krtera n pada pembuktan valdtas perangkat Test of English Proficiency, TOEP. Selama n alat ukur yang dgunakan untuk mendapatkan nformas tentang kemahran berbahasa Inggrs adalah tes bahasa Inggrs yang dbuat oleh lembaga asng, msalnya TOEFL, TOEIC, dan IELTS. Baya untuk mengkut tes n cukup mahal, tetap memang haslnya jelas daku d semua Negara karena memang tes-tes tsb bersfat standar, yang telah dkembangkan melalu serentetan kegatan yang dtujukan untuk menjaga agar tes yang dhaslkan memenuh krtera tes yang bak. Sebaga contoh adalah membuktkan valdtas krter Test of English Proficiency atau TOEP. Dawal pada tahun 2007, Drektorat PSMA memandang perlu untuk segera mengembangkan tes profsens bahasa Inggrs Test of English Proficiency atau TOEP, yang mengukur kemahran menggunakan bahasa Inggrs dalam duna nyata para lulusan SMA. Pada tahun 2007 telah dmula pengembangan seperangkat nstrumen pengukuran kemahran menggunakan bahasa Inggrs tersebut, yang dlanjutkan tahun 2008 dan 2009. Selama 3 tahun 1 1 2 2 1 , 1 i i i p i p i Y X X X E E E E H 1 1 2 2 1 , 1 ˆ i i i p i p Y b b X b X b X 72 Bab V — Membuktkan Valdtas Krtera 2007-2009 telah dkembangkan 7 perangkat TOEP yang dber nama TOEP 1, 2A, 2B, 3A, 3B, 4, dan 5 yang salng paralel Suwarsh Madya, dkk, 2008. Tes Kemahran Bahasa Inggrs Test of English Proficiency, TOEP yang merupakan tes standar untuk mengukur kemahran berbahasa Inggrs sswa Sekolah Menengah Atas SMA. TOEP yang dkembangkan merupakan tes tertuls paper and pencil test pada tahun 2007 dan 2008, dan selanjutnya drnts tes untuk mengukur kemampuan Speaking dan Reading d tahun 2009 dan 2010. Penskoran tap butr dlakukan dengan sstem dkotom, benar dber skor 1 dan jka salah dber skor 0. Tes n khusus mengukur kemahran sswa SMA dalam menggunakan bahasa Inggrs, khususnya Reading dan Listening. Tes terdr dar 100 butr soal, dengan rncan 50 butr tes Reading dan 50 butr tes Listening. Terkat dengan tes yang dkembangkan merupakan tes standar nternasonal, pada kegatan n juga dhaslkan petunjuk pelaksanaan TOEP. Hal n dmaksudkan agar setap TOEP yang dlaksanakan benar-benar merupakan tes yang terstandar. TOEP dkembangkan melalu proses menjabarkan tujuan menjad ndkator-ndkator, yang kemudan dkembangkan menjad butr. In berart TOEP memenuh syarat tes yang bak dtnjau dar valdtas snya. Valdtas kenampakan face validity untuk menjad tes yang bak juga terpenuh, mengngat pengembangan tes n mula dar menyusun butr sampa dengan peraktan tes melbatkan ahl yang terkat, bak dar perguruan tngg maupun dar prakts d lapangan guru. Valdtas lan yang dgunakan yakn valdtas criterion-related evidence of validity jens konkuren, yakn mengatkan skor TOEP dengan skor TOEFL Insttusonal perolehan sswa benchmarking. Terkat dengan adanya valdtas criterion-related evidence of validity jens konkuren yang dmlk TOEP, skor perolehan sswa SMA yang menempuh TOEP dapat dkonverskan ke skor tes lan, msalnya TOEFL. Sehubungan dengan adanya dua model regres untuk mempredks kemampuan peserta, yakn regres tunggal dan regres ganda, pada tulsan n akan dbandngkan keakuratan kedua model n dalam mempredks skor TOEFL sswa SMA d Indonesa. Pada model regres tunggal dgunakan skor TOEP peserta untuk mempredks skor TOEFL, dan pada regres ganda dgunakan skor Lstenng TOEP dan skor Readng TOEP untuk mempredkskan skor TOEFL peserta Her Retnawat, 2009. Untuk mengetahu keberadaan hubungan lnear antara varabel predktor dengan varabel krtera, dbuat dagram pencar Scatter Plot terlebh dahulu. Pada model regres tunggal, 73 Membuktkan Valdtas Krtera — Bab V varabel predktornya merupakan skor TOEP dan varabel krteranya merupakan skor TOEFL. Haslnya dsajkan pada Gambar 1. Demkan pula pada model regres ganda, varabel predktornya merupakan skor TOEP Listening dan skor TOEP Reading dan varabel krteranya merupakan skor TOEFL, dengan hasl pada Gambar 5.1. TOEP 1 TOEP 2A TOEP_TOT 90 80 70 60 50 40 T O E F L _ T O 700 600 500 400 300 TOEP_TOT 80 70 60 50 40 30 T O E F L _ T O 700 600 500 400 TOEP 2B TOEP 3A TOEP_TOT 80 70 60 50 40 30 T O E F L _ T O 700 600 500 400 300 TOEP_TOT 90 80 70 60 50 40 T O E F L _ T O 600 500 400 300 TOEP 3B TOEP 4 TOEP_TOT 100 90 80 70 60 50 40 30 T O E F L _ T O 700 600 500 400 300 TOEP_TOT 100 90 80 70 60 50 40 30 T O E F L _ T O 600 500 400 300 TOEP 5 74 Bab V — Membuktkan Valdtas Krtera TOEP_TOT 90 80 70 60 50 40 30 T O E F L _ T O 600 500 400 300 Gambar 5.1. Dagram Pencar Skor TOEP untuk Mempredks Skor TOEFL TOEP 1 TOEP 2A TOEFL_TO 100 100 400 90 90 500 600 80 80 700 70 TOEP_REA TOEP_LIS 70 60 60 50 50 40 TOEFL_TO 90 90 400 80 500 80 600 70 700 70 TOEP_REA TOEP_LIS 60 60 50 50 40 TOEP 2B TOEP 3A TOEFL_TO 90 100 400 90 80 500 600 80 70 700 70 TOEP_LIS TOEP_REA 60 60 50 50 40 40 TOEFL_TO 100 100 400 90 90 500 80 80 600 70 70 TOEP_REA TOEP_LIS 60 60 50 50 40 40 TOEP 3B TOEP 4 TOEFL_TO 100 100 300 90 400 90 500 80 80 600 700 70 70 TOEP_REA TOEP_LIS 60 60 50 50 40 40 30 TOEFL_TO 100 120 400 90 100 500 80 600 70 80 TOEP_REA TOEP_LIS 60 60 50 40 40 30 75 Membuktkan Valdtas Krtera — Bab V 74 | B a b V M e m b u k t i k a n V a l i d i t a s K r i t e r i a TOEP 5 TOEFL_TO 90 120 400 80 100 500 70 600 80 60 TOEP_LIS TOEP_REA 50 60 40 40 30 Gambar 5.2. Dagram Pencar TOEP Listening dan TOEP Reading untuk Mempredks Skor TOEFL Mencermat dagram pencar pada Gambar 5.1, dperoleh bahwa terdapat hubungan lnear antara skor TOEP dengan skor TOEFL pada model regres tunggal. Pada Gambar 5.2 juga menunjukkan adanya hubungan lnear antara skor TOEP Listening dan TOEP Reading untuk Mempredks skor TOEFL dengan menggunakan regres ganda. Hasl estmas korelas bak pada model regres tunggal maupun regras ganda dsajkan pada Tabel 5.1. Tabel 2.7 Hasl Estmas Koefsen Korelas dan Kontrbus Perangkat TOEP Model Y=b +b 1 X Y= b +b 1 X 1 +b 2 X 2 r r 2 R r 2 1 0.7943 0.6309 0.8060 0.6497 2A 0.7801 0.6085 0.8081 0.6530 2B 0.8349 0.6970 0.8357 0.6984 3A 0.7687 0.5908 0.7692 0.5917 3B 0.8445 0.7132 0.8467 0.7169 4 0.7910 0.6257 0.7910 0.6257 5 0.7765 0.6030 0.7773 0.6043 Keterangan : Yˆ skor TOEFL predks, X skor TOEP regres tunggal 76 Bab V — Membuktkan Valdtas Krtera Yˆ skor TOEFL predks, X 1 skor TOEP Listening, X 2 skor TOEP Reading regres ganda Hasl perhtungan korelas tersebut menunjukkan kecenderungan bahwa korelas dengan dua predktor terhadap TOEFL lebh tngg dbandngkan korelas dengan predktor tunggal. Demkan pula koefsen korelas determnas r 2 yang menunjukkan persentase kontrbus TOEP dalam mepredks TOEFL. Dengan menggunakan data emprs, selanjutnya dapat destmas konstanta dan koefsen pada persamaan regres, yang dsajkan pada Tabel 2.8 untuk model regres tunggal dan regres ganda. Persamaan regres n dgunakan untuk membuat predks, jka dperoleh salah satu skor, dapat destmas skor yang lan. Tabel 5.2. Persamaan Regres untuk Memredks Skor TOEFL dengan Skor TOEP Perangkat TOEP Persamaan Predks Dengan Yˆ skor TOEFL predks, X skor TOEP Persamaan Predks Dengan Yˆ skor TOEFL predks, X 1 skor TOEP Listening, X 2 skor TOEP Reading 1 Yˆ = 3,381 . X + 266,214 Yˆ = 274,449+1,285. X 1 +2.401. X 2 2A Yˆ = 4,321 . X + 251,435 Yˆ = 264,609+2,977. X 1 +1.120. X 2 2B Yˆ = 4,268 . X + 234,846 Yˆ = 239,063+2,273. X 1 +1.922. X 2 3A Yˆ = 3,630 . X + 252,836 Yˆ = 254,244+1,917. X 1 +1.692. X 2 3B Yˆ = 3,923 . X + 218,624 Yˆ = 223,336+2,210. X 1 +1.634. X 2 4 Yˆ = 4,321 . X + 251.435 Yˆ = 243,872+1,377. X 1 +1.383. X 2 5 Yˆ = 4,268 . X + 234.846 Yˆ = 230,464+1,469. X 1 +1.759. X 2 77 Membuktkan Valdtas Krtera — Bab V Mencermat besarnya nla korelas dan ndeks determnas hasl analss tersebut, dapat dperoleh bahwa telah terbukt secara emprs bahwa TOEP terbukt vald atau memlk valdtas krtera.

B. Membuktikan Validitas Kriteria