Penilaian Hasil Penelusuran oleh Real User

Tabel 4.10: Tabel Query untuk Real User Kedelapan No Query Dokumen yang terpanggil Dokumen yang sesuai menurut query 1. Highway Finance 13 6 2. Treatment Cost 7 3 Jumlah 20 9 Tabel di atas memperlihatkan bahwa jumlah dokumen yang terpanggil dari database adalah 20 cantuman, sedangkan dokumen yang dinyatakan oleh penulis berhubungan dengan query adalah 9 atau sekitar 1,8. Penulis menetapkan hanya 9 cantuman yang didownload berdasarkan kriteria-kriteria yang telah dikemukakan sebelumnya yaitu istilah-istilah yang berhubungan dengan query yang digunakan pada saat penelusuran.

4.4 Penilaian Hasil Penelusuran oleh Real User

Dokumen yang telah terseleksi kemudian di download dan disimpan dalam bentuk soft copy pada sebuah CD kosong, selanjutnya diserahkan kepada real user beserta lembar penilaian relevansi, untuk dilakukan penilaian apakah dokumen yang diberikan relevan atau tidak dengan kebutuhan mereka. Hasil penilaian yang diberikan real user terhadap dokumen yang diberikan dapat dilihat pada tabel berikut. Tabel 4.11: Tabel Penilaian Dokumen oleh Real User Pertama No Query Dokumen yang diberikan kepada real user Penilaian dokumen oleh real user Relevan Relevan Marginal Tidak Relevan 01 4 1 1 2 02 7 3 2 2 Jumlah 11 4 3 4 Tabel di atas memperlihatkan bahwa 4 dari 11 dokumen atau sekitar 0,36 dinyatakan sesuai dengan kebutuhan real user, dan 3 dokumen dari 11 dokumen atau sekitar 0,27 mendekati kebutuhan real user, dan 4 dari 11 Universitas Sumatera Utara dokumen atau sekitar 0,36 dinyatakan tidak sesuai dengan kebutuhan real user. Penulis mengasumsikan bahwa dokumen yang ditetapkan berada pada kategori sesuai, dan mendekati adalah dokumen yang sesuai menurut real user. Dengan demikian jumlah dokumen relavan menurut real user adalah seluruh dokumen yang terambil sebanyak 7 dokumen. Tabel 4.12: Tabel Penilaian Dokumen oleh Real User Kedua No Query Dokumen yang diberikan kepada real user Penilaian dokumen oleh real user Relevan Relevan Marginal Tidak Relevan 01 1 - 1 - 02 6 4 - 2 Jumlah 7 4 1 2 Tabel di atas memperlihatkan bahwa 4 dari 7 dokumen atau sekitar 0,57 dinyatakan sesuai dengan kebutuhan real user, dan 1 dokumen dari 7 dokumen atau sekitar 0,14 mendekati kebutuhan real user, dan 2 dari 7 dokumen atau sekitar 0,28 dinyatakan tidak sesuai dengan kebutuhan real user. Penulis mengasumsikan bahwa dokumen yang ditetapkan berada pada kategori sesuai, dan mendekati adalah dokumen yang sesuai menurut real user. Dengan demikian jumlah dokumen relavan menurut real user adalah seluruh dokumen yang terambil sebanyak 5 dokumen. Tabel 4.13: Tabel Penilaian Dokumen oleh Real User Ketiga No Query Dokumen yang diberikan kepada real user Penilaian dokumen oleh real user Relevan Relevan Marginal Tidak Relevan 01 15 6 3 6 02 5 3 1 1 Jumlah 20 9 4 7 Universitas Sumatera Utara Tabel di atas memperlihatkan bahwa 9 dari 20 dokumen atau sekitar 0,45 dinyatakan sesuai dengan kebutuhan real user, dan 4 dokumen dari 20 dokumen atau sekitar 0,2 mendekati kebutuhan real user, dan 7 dari 20 dokumen atau sekitar 0,35 dinyatakan tidak sesuai dengan kebutuhan real user. Penulis mengasumsikan bahwa dokumen yang ditetapkan berada pada kategori sesuai, dan mendekati adalah dokumen yang sesuai menurut real user. Dengan demikian jumlah dokumen relavan menurut real user adalah seluruh dokumen yang terambil sebanyak 13 dokumen. Tabel 4.14: Tabel Penilaian Dokumen oleh Real User Keempat No Query Dokumen yang diberikan kepada real user Penilaian dokumen oleh real user Relevan Relevan Marginal Tidak Relevan 01 7 4 1 2 Jumlah 7 4 1 2 Tabel di atas memperlihatkan bahwa 4 dari 7 dokumen atau sekitar 0,57 dinyatakan sesuai dengan kebutuhan real user, dan 1 dokumen dari 7 dokumen atau sekitar 0,14 mendekati kebutuhan real user, dan 2 dari 7 dokumen atau sekitar 0,28 dinyatakan tidak sesuai dengan kebutuhan real user. Penulis mengasumsikan bahwa dokumen yang ditetapkan berada pada kategori sesuai, dan mendekati adalah dokumen yang sesuai menurut real user. Dengan demikian jumlah dokumen relavan menurut real user adalah seluruh dokumen yang terambil sebanyak 5 dokumen. Universitas Sumatera Utara Tabel 4.15: Tabel Penilaian Dokumen oleh Real User Kelima No Query Dokumen yang diberikan kepada real user Penilaian dokumen oleh real user Relevan Relevan Marginal Tidak Relevan 01 8 3 5 - 02 3 2 - 1 Jumlah 11 5 5 1 Tabel di atas memperlihatkan bahwa 5 dari 11 dokumen atau sekitar 0,45 dinyatakan sesuai dengan kebutuhan real user, dan 5 dokumen dari 11 dokumen atau sekitar 0,45 mendekati kebutuhan real user, dan 1 dari 11 dokumen atau sekitar 0,09 dinyatakan tidak sesuai dengan kebutuhan real user. Penulis mengasumsikan bahwa dokumen yang ditetapkan berada pada kategori sesuai, dan mendekati adalah dokumen yang sesuai menurut real user. Dengan demikian jumlah dokumen relavan menurut real user adalah seluruh dokumen yang terambil sebanyak 10 dokumen. Tabel 4.16: Tabel Penilaian Dokumen oleh Real User Keenam No Query Dokumen yang diberikan kepada real user Penilaian dokumen oleh real user Relevan Relevan Marginal Tidak Relevan 01 6 3 4 - 02 3 1 - 1 Jumlah 9 4 4 1 Tabel di atas memperlihatkan bahwa 4 dari 9 dokumen atau sekitar 0,44 dinyatakan sesuai dengan kebutuhan real user, dan 4 dokumen dari 9 dokumen atau sekitar 0,44 mendekati kebutuhan real user, dan 1 dari 9 dokumen atau sekitar 0,11 dinyatakan tidak sesuai dengan kebutuhan real user. Penulis mengasumsikan bahwa dokumen yang ditetapkan berada pada kategori sesuai, Universitas Sumatera Utara dan mendekati adalah dokumen yang sesuai menurut real user. Dengan demikian jumlah dokumen relavan menurut real user adalah seluruh dokumen yang terambil sebanyak 8 dokumen. Tabel 4.17: Tabel Penilaian Dokumen oleh Real User Ketujuh No Query Dokumen yang diberikan kepada real user Penilaian dokumen oleh real user Relevan Relevan Marginal Tidak Relevan 01 5 4 1 - 02 2 1 1 - Jumlah 7 5 2 Tabel di atas memperlihatkan bahwa 5 dari 7 dokumen atau sekitar 0,71 dinyatakan sesuai dengan kebutuhan real user, dan 2 dokumen dari 7 dokumen atau sekitar 0,28 mendekati kebutuhan real user, dan 0 dari 7 dokumen atau sekitar 0 dinyatakan tidak sesuai dengan kebutuhan real user. Penulis mengasumsikan bahwa dokumen yang ditetapkan berada pada kategori sesuai, dan mendekati adalah dokumen yang sesuai menurut real user. Dengan demikian jumlah dokumen relavan menurut real user adalah seluruh dokumen yang terambil sebanyak 7 dokumen. Tabel 4.18: Tabel Penilaian Dokumen oleh Real User Kedelapan No Query Dokumen yang diberikan kepada real user Penilaian dokumen oleh real user Relevan Relevan Marginal Tidak Relevan 01 6 2 1 2 02 3 1 3 - Jumlah 9 3 4 2 Tabel di atas memperlihatkan bahwa 3 dari 9 dokumen atau sekitar 0,33 dinyatakan sesuai dengan kebutuhan real user, dan 4 dokumen dari 9 dokumen Universitas Sumatera Utara atau sekitar 0,44 mendekati kebutuhan real user, dan 2 dari 9 dokumen atau sekitar 0,22 dinyatakan tidak sesuai dengan kebutuhan real user. Penulis mengasumsikan bahwa dokumen yang ditetapkan berada pada kategori sesuai, dan mendekati adalah dokumen yang sesuai menurut real user. Dengan demikian jumlah dokumen relavan menurut real user adalah seluruh dokumen yang terambil sebanyak 9 dokumen.

4.5 Menentukan Jumlah Presisi