46
4.5. Evaluasi
Selain melibatkan data yang dibangkitkan dari mesin cari, juga dilakukan survei terhadap calon penggiat sistem informasi mahasiswa jurusan Sistem Informasi SI
dari salah satu Perguruan Tinggi di Kotamadya Medan. Survei dilakukan terhadap empat kelas di tahun terakhir yang dipandang telah memahami secara teoritis tentang
sistem informasi, dan diperoleh data seperti Tabel 4.11.
Tabel 4.12. Nilai probabilitas relatif berdasarkan mesin cari untuk butir konstruk
Butir konstruk peubah terikat Faktor Mesin Cari
Google Yahoo Bing Aol.
FFa. Systems easy to use FFb. Systems are user friendly
FFc. Systems are easy to learn FFd. Easy to get system to do what we want
to do FFe. Easy to become skillfull
FFf. Output presented in useful format FFg. Satisfied with accuracy of system
FFh. Information is clear FFi. Systems are accurate
FFj. System provide sufficient information FFk. System provide up-to-date information
FFl. I get the info I need in time FFm. System provide precise information
FFn. Information contents meet my needs FFo. Accomplish tasks more quickly
FFp. Using the systems improves job performance
FFq. Using system increases productivity FFr. Systems make the job easier
FFs. Systems enhance effectiveness in job FFt. System useful to job
FFu. System adequate to meet info processing needs
FFv. Systems are efficient FFw. Systems are effective
FFx. Overall, satisfied with systems 0,0321
0,0139 0,0107
0,1056
0,0033 0,0535
0.1056 0.1201
0.1491 0.0210
0.2019 1.0000
0.0249 0.0707
0.0074 0.0438
0.0399 0.1222
0.0081 0.0324
0.0019
0.0756 0.0623
0.0251 0.5136
0.5088 0.2096
0.2096
0.0016 0.0707
0.0555 0.1888
0.0914 0.2064
0.2096 1.0000
0.2032 0.2160
0.0102 0.1728
0.1712 0.3648
0.0685 0.1808
0.0219
0.5120 0.2864
0.0158 0.1717
0.0418 0.3274
0.1796
0.0366 0.0991
0.0658 0.1973
0.0759 0.0179
0.0238 1.0000
0.0135 0.2150
0.0050 0.1239
0.0168 0.1867
0.0693 0.1752
0.0186
0.1496 0.1230
0.0079 0.0297
0.0093 0.0152
0.0751
0.0029 0.0146
0.0635 0.1798
0.0309 0.0132
0.0982 1.0000
0.0150 0.0619
0.0037 0.0327
0.0171 0.1579
0.0037 0.0327
0.0009
0.0266 0.0568
0.0143
Universitas Sumatera Utara
47 4.5.1. Pengukuran keandalan
Untuk menilai kesahan suksesi sistem informasi secara semantik dilakukan pengukuran keandalan reability terhadap nilai singleton dari butir-butir konstruk
yang diberikan oleh empat mesin cari. Nilai singleton dimaksudkan seperti pada Lampiran 3, yang hasilnya seperti pada Tabel 4.12.
Tabel 4.13. Variansi dan
α Cronbach konstruk
No. Konstruk Butir α Cronbach Variansi σ
2
a. Berdasarkan mesin cari
1. 2.
3. 4.
Perceived Usefulness Information Quality
System Quality User Satisfaction
5 9
6 4
0,9509 0,9599
0,8866 0,7729
0,3741 33,9753
0,8222 0,1362
b. Berdasarkan survei
1. 2.
3. 4.
Perceived Usefulness Information Quality
System Quality User Satisfaction
5 9
6 4
1,3137 1,3065
1,3177 1,3248
5,1764 4,5619
5,4938 5,5784
Tabel 4.14. Variansi untuk singleton dan survei tentang butir konstruk
No. Sampel
Variansi
Mesin Cari 1.
2. 3.
4. Google
Yahoo Bing
Aol 0,0381
0,0482 0,0390
0,0388
Kelas Kuliah 1.
2. 3.
4. I
II III
IV 0,0139
0,0091 0,0488
0,0118
Melalui eksperimen dengan mesin cari dan berdasarkan survei, pengukuran untuk menaksir keandalan sampel pada Tabel 4.11 dan Tabel 4.12 dilakukan dengan
menggunakan persamaan 2.11 dan persamaan 2.12, dan diperoleh Tabel 4.13 dan Tabel 4.14, yang berdasarkan penanda bagian 2.7.2 dari Bab II menunjukkan bahwa
konsistensi internal dari semua konstruk adalah sangat baik. Dengan kata lain, bahwa setiap konstruk dibangun secara andal dari masing-masing butir semenda berdasarkan
mesin cari atau berdasarkan survei.
Universitas Sumatera Utara
48 Secara umum, juga dapat dikatakan bahwa variansi setiap jenis data baik data
percobaan per mesin cari ataupun survei per kelas menunjukkan bahwa data tidak memiliki perbedaan. Namun demikian, variansi dari jumlah masing-masing sebagai
komponen dari x menghasilkan hitungan variansi sebesar 1,8842 dan 1,4614 yang
masing-masing adalah untuk mesin cari dan kelas. Sedangkan skor untuk α Cronbach
adalah 1.2173 dan 1.2571 masing-masing adalah untuk mesin cari dan kelas. Dengan demikian, data memiliki konsistensi internal yang sangat baik, dan umumnya dapat
diandalkan mewakili suksesi sistem informasi berdasarkan perubahan secara sosial.
4.5.2. Recall dan Presisi Skor
α Cronbach telah menunjukkan bahwa informasi yang digali dengan mesin cari dan survei mewakili secara keseluruhan perubahan sosial tentang suksesi sistem
informasi, yang juga mewakili secara keseluruhan dokumentasi tentang hal yang berkaitan dan miliu sosial secara realitas. Oleh karena itu, recall dan presisi dapat
diterapkan untuk memberikan penilaian capaian informasi yang sesuai, yaitu dengan melibatkan perhitungan
α Cronbach dari mesin cari dan survei dan α Cronbach perhitungan antara keduanya.
Variansi untuk mesin cari dan survei sebesar 55,8162 menunjukkan terdapat perbedaan antara kedua bentuk eksperimen yang berbeda jauh dengan variansi
masing-masing bentuk eksperimen. Sedangkan, melalui perhitungan α Cronbach
untuk mesin cari dan survei sekaligus adalah 1,3274, dan ini menunjukkan bahwa semua eksperimen memiliki konsistensi internal sangat baik secara keseluruhan.
Dengan demikian, penggunaan persamaan 2.15 dan persamaan 2.16 dapat dilakukan dan diperoleh
rec = 1,21731,3274 = 0,9171 dan
pre = 1,25711,3274 = 0,9470
atau recall informasi suksesi sistem informasi adalah 91,71 dan presisinya adalah 94,70. Recall yang tinggi di atas 90 menunjukkan pencapaian sumber informasi
dari keseluruhan populasi teks adalah sangat baik, sedangkan presisi yang juga tinggi atau di atas 90 menunjukkan ketepatan informasi yang diperoleh juga baik. Namun
Universitas Sumatera Utara
49 demikian karena perbandingan berkaitan dengan nilai konsistensi internal atau
keandalan pengujian populasi teks sebagai sumber informasi suksesi sistem informasi berdasarkan gambaran sosial, dengan demikian dari sudut pencapaian dan ketepatan
informasi pengukuran suksesi sistem informasi dipandang memenuhi harapan.
Universitas Sumatera Utara
BAB 5 KESIMPULAN DAN SARAN