menjelaskan hasil yang telah diperoleh. Pada pengujian black box dari 3 pengguna yang berbeda dalam menggunakan Sistem Informasi Akademik
SIA didapatkan kerusakan defect yang diperoleh masing-masing yaitu : a.
SIA Kemahasiswaan : 19 Kerusakan
b. SIA Dosen Pembimbing Akademik DPA
: 12 Kerusakan c.
SIA Kepala Program Studi Kaprodi : 9 Kerusakan
Selain didapatkan kerusakan defect, diperoleh juga perhitungan persentase nilai pengguna yang menyatakan bahwa sebagian besar modul-
modul utama yang ada telah berjalan dengan baik. Berikut merupakan hasil analisa yang diperoleh dari pengujian yang dilakukan terhadap
ketiga Sistem Informasi Akademik SIA :
4.3.5.1. Analisa Hasil Pengujian
Dari hasil pengujian black box di atas diperoleh hasil analisa yang mampu menerangkan kerusakan defect yang terdapat di dalam setiap
modul pengguna yang ada. Untuk lebih jelasnya berikut merupakan hasil yang dipaparkan :
Tabel 4.12. Analisa Hasil Pengujian Modul Mahasiswa
No Modul
Pengujian Kerusakan yang
didapat Indikator
Kerusakan Kriteria
Kesalahan Keterangan
1 A001.03
Halaman Utama
Login Mahasiswa
login dpt
dilakukan sebanyak
mungkin, sehingga dapat
menimbulkan banyak bug
Kekeliruan Fungsi
– fungsi
yang tidak
benar atau hilang
Masih dapat ditolerir jika
ada fungsi
refresh otomatis
setiap kesalahan
login
beberapa kali dan kembali
normal
2 A003.04,
A003.07 dan
A003.09 Modul
Halaman Biodata
1. alamat email
setelah “xxyahoo.”
Tersebut bebas tidak
harus yahoo.co.id
yahoo.com 2.
Semua jenis
karakter dapat digunakan
dalam proses
pengubahan tidak
harus huruf
dan angka saja
3. masukan
password BVA tetap
diterima namun
saat login
tetap dengan
password lama.
Kekurangan Ketidak-
benaran Kegagalan
1. Fungsi
– fungsi yang
tidak benar atau hilang.
2. Fungsi
– fungsi yang
tidak benar atau hilang.
3. Fungsi
– fungsi yang
tidak benar atau hilang.
Masih dapat ditolerir jika
email umum yang
telah disediakan
untuk mahasiswa
saja
yang digunakan.
Tidak dapat ditolerir
program tidak
mengacu pada
spesifikasi yang
diberikan. Tidak dapat
ditolerir dan harus segera
diperbaiki.
3 A009.03
Modul Halaman
Transkrip Nilai
Tetap menampilkan
data transkrip
nilai walaupun tahun
kurikulum yang ditempuh
berbeda. Ketidak-
benaran Kesalahan
dalam struktur data
atau
akses database
eksternal Tidak dapat
ditolerir. Sistem
seharusnya mampu
menampilkan khusus
data yg dibutuhkn
mahasiswa. 4
A011.03 Modul
Halaman Pengecekn
Tetap menampilkan
data Pengecekan
Ketidak- benaran
Kesalahan dalam
struktur data atau
akses Tidak dapat
ditolerir. Sistem
seharusnya
Matakuliah yang
diambil dengan
kurikulum yang ada
Matakuliah yang
diambil dengan
kurikulum yang ada, walaupun
tahun kurikulum yang
ditempuh berbeda.
database eksternal
mampu menampilkan
khusus data
yang dibutuhkan
mahasiswa saja.
5 A012.03
Modul Halaman
Prediksi Matakuliah
yang Bisa diambil
Tetap menampilkan
data Prediksi
Matakuliah yang
Bisa diambil,
walaupun tahun kurikulum yang
ditempuh berbeda.
Ketidak- benaran
Kesalahan dalam
struktur data atau
akses database
eksternal Tidak dapat
ditolerir. Sistem
seharusnya mampu
menampilkan khusus
data yang
dibutuhkan mahasiswa
saja.
6 A015.11,
A015.16 dan
A015.27 Menu
Modul Halaman
Pengelolaa n
pelaku kegiatan
1. Daftar
kegiatan tetap ditampilkan
padahal memasukkan
tanggal yang salah
2. Data dapat
disimpan walaupun
input salah
3. Data masih
dapat disimpan
walaupun no.sertifikat
yang diinput salah
Kegagalan Kekurangan
Kekurangan Kesalahan
dalam struktur data
atau
akses database
eksternal Fungsi
– fungsi
yang tidak
benar atau hilang.
Fungsi –
fungsi yang
tidak benar
atau hilang. Tidak dapat
ditolerir harus segera
diperbaiki Tidak dapat
ditolerir harus segera
diperbaiki Tidak dapat
ditolerir harus segera
diperbaiki
7 A016.07,
A016.12 dan
A016.16 Menu
Halaman Pengelolaa
n
Pelaku Asistensi
1. Data
tetap ditampilkan
walaupun input
tahun akademik
salah 2.
Dapat menyimpan
data walaupun
inputan no.Setifikat
salah
3. Proses hapus
tidak dapat
dilakukan dan
data masih
tetap ditampilkan
Kegagalan Kekurangan
kesalahan Kesalahan
dalam struktur data
atau
akses database
eksternal Fungsi
– fungsi
yang tidak
benar atau hilang.
Fungsi
– fungsi
yang tidak
benar atau hilang.
Tidak dapat ditolerir
harus segera diperbaiki
Tidak dapat ditolerir
harus segera diperbaiki
Tidak dapat ditolerir
harus segera diperbaiki
8 A017.14,
A017.24 dan
A017.35 Menu
Halaman Pengelolaa
n
Pelaku Organisasi
1. Data
tetap dapat
disimpan walaupun
inputan salah
2. Data
tetap dapat
disimpan walaupun
inputan salah
3. Data masih
dapat disimpan
walaupun no.sertifikat
yang diinput salah
Kekurangan Kekurangan
Kekurangan Fungsi
– fungsi
yang tidak
benar atau hilang.
Fungsi –
fungsi yang
tidak benar
atau hilang. Fungsi
– fungsi
yang tidak
benar atau hilang.
Tidak dapat ditolerir
harus segera diperbaiki
Tidak dapat ditolerir,
harus segera diperbaiki.
Tidak dapat ditolerir,
harus segera diperbaiki.
9 A019.06
dan A019.10
Modul Halaman
Pesan 1.
Isi pesan
tidak dapat
ditampilkan secara
langsung. Untuk
membaca isi pesan
harus pindah
ke menu
yang lain terlebih
dahulu baru dapat tampil
isi pesan.
2. menu
Size pada toolbar
tidak secara berurutan
disusun. Kesalahan
Kekurangan 1.
Fungsi –
fungsi yang tidak benar
atau hilang
2. Fungsi
– fungsi yang
tidak benar atau hilang
Tidak dapat ditolerir,
harus segera diperbaiki.
Masih dapat ditolerir
namun harus segera
diperbaiki.
10 A020.03
Modul Halaman
Kontribusi Tetap
dapat mengirim data
walaupun data yang
dimasukkan invalidsalah
Ketidak- benaran
Fungsi –
fungsi yang
tidak benar
atau hilang Tidak dapat
ditolerir, harus segera
diperbaiki karena dapat
menimbulkan spam.
Jumlah modul yang telah diuji : 22 modul Jumlah modul yang belum diuji : 0 modul
Jumlah modul yang mengandung defect : 10 modul dari 22 modul
Tabel 4.13. Analisa Hasil Pengujian Modul Dosen Pembimbing Akademik DPA
No Modul
Pengujian Kerusakan yang
didapat Indikator
Kerusakan Kriteria
Kesalahan Keterangan
1 B001.03
Halaman Utama
login dpt
dilakukan sebanyak
Kekeliruan Fungsi
– fungsi
yang tidak
benar Masih dapat
ditolerir jika ada
fungsi
Login DPA
mungkin, sehingga dapat
menimbulkan banyak bug
atau hilang hapus setiap
kesalahan login
beberapa kali dan kembali
normal
2 B004.07
Modul Halaman
Ganti password
Masukkan password BVA
0 tetap diterima namun
saat login
tetap dengan
password lama. Kegagalan
Fungsi –
fungsi yang
tidak benar
atau hilang. Tidak dapat
ditolerir dan harus segera
diperbaiki.
3 B005.08
dan B005.09
Modul Halaman
Daftar mahasiswa
bimbingan 1.
Tidak menampilkan
jadwal kuliah mahasiswa
2. Jadwal tidak
ditampilkan sehingga tidak
dapat dilakukan
analisa Kesalahan
Kesalahan 1.
Kesalahan dalam
struktur data
atau akses
database eksternal
2. Kesalahan
interface Tidak dapat
ditolerir, harus segera
diperbaiki. Tidak dapat
ditolerir, harus segera
diperbaiki.
4 B007.03
Menu Modul
Halaman Pengelolaa
n
Daftar Kegiatan
Data masih
dapat disimpan walaupun
inputan salah Kekurangan Fungsi
– fungsi
yang tidak
benar atau hilang.
Tidak dapat ditolerir,
harus segera diperbaiki.
5 B008.14
dan B008.20
Menu Modul
Halaman Pengelolaa
n
pelaku kegiatan
1. Data
masih dapat
ditampilkan walaupun
inputan yang dimasukan
salah
2. data
masih dapat
Kekurangan Kekurangan
Fungsi –
fungsi yang
tidak benar
atau hilang. Fungsi
– fungsi
yang Tidak dapat
ditolerir, harus segera
diperbaiki. Tidak dapat
ditolerir,
disimpan walaupun
no.sertifikat yang masukan
salah tidak
benar atau hilang.
harus segera diperbaiki.
6 B009.03
Menu Modul
Halaman Pengelolaa
n
Daftar Organisasi
Data masih
dapat disimpan walaupun
inputan yang
dimasukan salah Kekurangan Fungsi
– fungsi
yang tidak
benar atau hilang.
Tidak dapat ditolerir,
harus segera diperbaiki.
7 B010.03
Menu Modul
Halaman Pengelolaa
n
Daftar Periode
Organisasi Data
masih dapat disimpan
walaupun inputan
yang dimasukan salah
Kekurangan Fungsi –
fungsi yang
tidak benar
atau hilang. Tidak dapat
ditolerir, harus segera
diperbaiki.
8 B011.18
Menu Modul
Halaman Pengelolaa
n
pelaku organisasi
data masih dapat disimpan
walaupun no.sertifikat
yang dimasukan salah
Kekurangan Fungsi –
fungsi yang
tidak benar
atau hilang. Data
masih dapat
disimpan walaupun
no.sertifikat yang
dimasukan salah
9 B013.02
Menu Modul
Halaman Daftar
kegiatan yang
diikuti mahasiswa
Kategori NIM
ada 2
tanpa penjelasan
masing-masing sehingga
membingungkan pengguna
Kehilangan Inisialisasi
dan kesalahan
terminasi Tidak dapat
ditolerir dan harus segera
diberikan penjelasan
tampilan
10 B015.03
Modul Halaman
Tetap dapat mengirim data
walaupun data Ketidak-
benaran Fungsi
– fungsi
yang tidak
benar Tidak dapat
ditolerir, harus segera
Kontribusi yang dimasukkan
invalidsalah atau hilang
diperbaiki karena dapat
menimbulkan spam.
Jumlah modul yang telah diuji : 17 modul Jumlah modul yang belum diuji : 0 modul
Jumlah modul yang mengandung defect : 10 modul dari 17 modul
Tabel 4.14. Analisa Hasil Pengujian Modul Kepala Program Studi Kaprodi
No. Modul
Pengujian Kerusakan yang
didapat Indikator
Kerusakan Kriteria
Kesalahan Keterangan
1 C001.03
Halaman Utama
Login Kaprodi
login dpt
dilakukan sebanyak
mungkin, sehingga dapat
menimbulkan banyak bug
Kekeliruan Fungsi
– fungsi
yang tidak
benar atau hilang
Masih dapat ditolerir jika
ada fungsi hapus setiap
kesalahan login
beberapa kali dan kembali
normal.
2 C003.01
Modul Halaman
Daftar dosen
Terdapat kesalahan nama
halaman Ketidak-
benaran Kesalahan
interface Masih dapat
ditolerir dan harus
disesuaikan
3 C005.07
Modul Halaman
Ganti password
Masukkan password BVA
0 tetap diterima namun
saat login
tetap dengan
password lama. Kegagalan
Fungsi –
fungsi yang
tidak benar
atau hilang Tidak dapat
ditolerir dan harus segera
diperbaiki.
4 C006.03
Menu Modul
Halaman Pengelolaa
n
Daftar Kegiatan
Data masih
dapat disimpan walaupun
inputan salah Kekurangan Fungsi
– fungsi
yang tidak
benar atau hilang
Tidak dapat ditolerir dan
harus segera diperbaiki.
5 C007.03
Menu Modul
Data masih
dapat disimpan walaupun
Kekurangan Fungsi –
fungsi yang
tidak benar
Tidak dapat ditolerir dan
harus segera
Pengelolaa n
Daftar Organisasi
inputan yang
dimasukan salah atau hilang
diperbaiki.
6 C008.03
Menu Modul
Pengelolaa n
Daftar Organisasi
Data masih
dapat disimpan walaupun
inputan yang
dimasukan salah Kekurangan Fungsi
– fungsi
yang tidak
benar atau hilang
Tidak dapat ditolerir dan
harus segera diperbaiki.
7 C009.03
Menu Modul
Pengelolaa n
Daftar Organisasi
Data masih
dapat disimpan walaupun
inputan yang
dimasukan salah Kekurangan Fungsi
– fungsi
yang tidak
benar atau hilang
Tidak dapat ditolerir dan
harus segera diperbaiki.
8 C011.03
Menu Modul
Daftar kegiatan
yang diikuti
mahasiswa Kategori
NIM ada
2 tanpa
penjelasan masing-masing
sehingga membingungkan
pengguna Ketidak-
benaran Inisialisasi
dan kesalahan
terminasi Tidak dapat
ditolerir dan harus segera
diberikan penjelasan
tampilan
9 C012.03
Modul Halaman
Kontribusi Tetap dapat
mengirim data walaupun data
yang dimasukkan
invalidsalah Ketidak-
benaran Fungsi
– fungsi
yang tidak
benar atau hilang
Tidak dapat ditolerir,
harus segera diperbaiki
karena dapat menimbulkan
spam.
Jumlah modul yang telah diuji : 14 modul Jumlah modul yang belum diuji : 0 modul
Jumlah modul yang mengandung defect : 9 modul dari 14 modul
4.3.5.2. Persentase nilai modul pengguna
Persentase nilai modul pengguna merupakan nilai yang diperoleh setiap modul untuk menyatakan tingkat keberhasilan perangkat lunak
tersebut. Berikut merupakan persentase nilai modul pengguna baik Mahasiswa, DPA serta Kaprodi.
Tabel 4.15. Analisa Hasil Derajat nilai modul pengguna - Mahasiswa
No Tes
ID Jumlah
Kasus Pengujian
A Jumlah
Kerusakan yang
terdapat pada Hasil
Pengujian B
Persentase Kerusakan
A-BA Peran
Modul Nilai
Bobot Peran
Modul C
Nilai Modul berdasarkan
Nilai Bobot N = Persentase
Kerusakan C
1 A001
5 1 0,8
Kritis 4 3,2
2 A002
1 0 1
Kritis 4 4
3 A003
11 3 0,72727
Kritis 4 2,90909
4 A004
2 1
Tidak Kritis
1 1
5 A005
5 1
Tidak Kritis
1 1
6 A006
3 0 1
Kritis 4 4
7 A007
7 1
Tidak Kritis
1 1
8 A008
13 0 1
Kritis 4 4
9 A009
4 1
0,75 Tidak
Kritis 1
0,75 10 A010
2 1
Tidak Kritis
1 1
11 A011 4
1 0,75
Tidak Kritis
1 0,75
12 A012 4
1 0,75
Tidak Kritis
1 0,75
13 A013 2
1 Tidak
Kritis 1
1 14 A014
3 1
Tidak Kritis
1 1
15 A015 31
3 0,90322 Kritis
4 3,61290 16 A016
16 3
0,8125 Tidak
Kritis 1
0,8125 17 A017
39 3 0,92308
Kritis 4 3,69231
18 A018 3
0 1 Kritis
4 4 19 A019
13 2
0,84615 Tidak
Kritis 1
0,84615 20 A020
3 1
0,66667 Tidak
Kritis 1
0,66667 21 A021
1 1
Tidak Kritis
1 1
22 A022 3
0 1 Kritis
4 4 Total Nilai Bobot C total = 49
Total Nilai Modul berdasarkan Nilai bobot N total = 44,98962 Persentase Nilai Modul Pengujian Mahasiswa tanpa bobot = Ntotaljumlah modul =
0,90586 Persentase Nilai Modul Pengujian Mahasiswa dengan bobot = N total C total =
0,91816 Pemenuhan kebutuhan pengguna dianggap baik karena Persentase Nilai Modul
Mahasiswa 0,91816 Jumlah modul yang telah diuji secara penuh : 22 modul
Jumlah modul yang baru diuji sebagian : 0 modul Jumlah modul yang belum diuji : 0 modul
Jumlah defect pada modul pengguna : 19 Jumlah modul yang mengandung defect : 10 dari 22 modul
Tabel 4.16. Analisa Hasil Derajat nilai modul pengguna - Dosen Pembimbing Akademik DPA
No Tes
ID Jumlah
Kasus Pengujian
A Jumlah
Kerusakan yang
terdapat pada Hasil
Pengujian B
Persentase Kerusakan
A-BA Peran
Modul Nilai
Bobot Peran
Modu l C
Nilai Modul berdasarkan
Nilai Bobot N = Persentase
Kerusakan C
1 B001
4 1 0,75
Kritis 4 3
2 B002
1 0 1
Kritis 4 4
3 B003
3 1
Tidak Kritis
1 1
4 B004
8 1 0,875
Kritis 4 3,5
5 B005
17 2 0,88235
Kritis 4 3,52941
6 B006
4 1
Tidak Kritis
1 1
7 B007
12 1 0,91667
Kritis 4 3,66667
8 B008
24 2 0,91667
Kritis 4 3,66667
9 B009
11 1 0,90909
Kritis 4 3,63636
10 B010 10
1 0,9 Kritis
4 3,6 11 B011
22 1 0,95454
Kritis 4 3,81818
12 B012 9
0 1 Kritis
4 4 13 B013
6 1 0,83333
Kritis 4 3,33333
14 B014 24
0 1 Kritis
4 4 15 B015
3 1
0,66667 Tidak
Kritis 1
0,66667
16 B016 1
1 Tidak
Kritis 1
1 17 B017
2 0 1
Kritis 4
4 Total Nilai Bobot C total = 56
Total Nilai Modul berdasarkan Nilai bobot N total = 51,41729 Persentase Nilai Modul Pengujian DPA tanpa bobot = Ntotaljumlah modul =
0,91790 Persentase Nilai Modul Pengujian DPA dengan bobot = N total C total = 0,91817
Pemenuhan kebutuhan pengguna dianggap baik karena Persentase Nilai Modul Dosen Pembimbing Akademik 0,91817
Jumlah modul yang telah diuji secara penuh : 17 modul Jumlah modul yang baru diuji sebagian : 0 modul
Jumlah modul yang belum diuji : 0 modul Jumlah defect pada modul pengguna : 12
Jumlah modul yang mengandung defect : 10 dari 17 modul
Tabel 4.17. Analisa Hasil Derajat nilai modul pengguna - Kepala Program Studi Kaprodi
No Tes
ID Jumlah
Kasus Pengujian
A Jumlah
Kerusakan yang
terdapat pada Hasil
Pengujian B
Persentase Kerusakan
A-BA Peran
Modul Nilai
Bobot Peran
Modul C
Nilai Modul berdasarkan
Nilai Bobot N = Persentase
Kerusakan C
1 C001
4 1 0,75
Kritis 4 3
2 C002
1 0 1
Kritis 4 4
3 C003
26 1 0,96154
Kritis 4 3,84615
4 C004
7 0 1
Kritis 4 4
5 C005
8 1 0,875
Kritis 4 3,5
6 C006
12 1 0,91667
Kritis 4 3,66667
7 C007
11 1 0,90909
Kritis 4 3,63636
8 C008
10 1 0,9
Kritis 4 3,6
9 C009
7 1
0,85714 Tidak
Kritis 1
0,85714 10 C010
10 0 1
Kritis 4 4
11 C011 7
1 0,85714 Kritis
4 3,42857 12 C012
3 1
0,66667 Tidak
Kritis 1
0,66667 13 C013
1 1
Tidak Kritis
1 1 14 C014
2 0 1
Kritis 4 4
Total Nilai Bobot C total = 47 Total Nilai Modul berdasarkan Nilai bobot N total = 43,20156
Persentase Nilai Modul Pengujian Kaprodi tanpa bobot = Ntotaljumlah modul = 0,90666
Persentase Nilai Modul Pengujian Kaprodi = N total C total = 0,91918 Pemenuhan kebutuhan pengguna dianggap baik karena Persentase Nilai Modul
Kaprodi 0,91918 Jumlah modul yang telah diuji secara penuh : 14 modul
Jumlah modul yang baru diuji sebagian : 0 modul Jumlah modul yang belum diuji : 0 modul
Jumlah defect pada modul pengguna : 9 Jumlah defect yang mengandung defect : 9 dari 14 modul
4.4. Kendala Pengujian
Berikut kendala-kendala yang didapat selama pengujian : a.
Modul-modul yang diuji banyak yang bercabang sehingga menyulitkan pembuatan scenario pengujian.
b. BAPSI melakukan lunching menu baru secara mendadak, sehingga
menambah waktu proses analisa dan pengujian. c.
Jumlah spesifikasi yang dimiliki sangat banyak sehingga proses kuesioner memerlukan waktu yang tidak sebentar baik dalam
pembuatan soal maupun proses pengumpulan datanya. d.
Proses pengijinan dan perolehan data-data responden mengalami kesulitan karena biro merekomendasikan pada biro yang lain dan
sebaliknya sehingga tidak ada kejelasan siapa yang berhak memberikan data.
e. Responden pada pihak DPA banyak yang tidak mengetahui atau tidak
pernah menggunakan SIA. f.
Pada kampus IV dan kampus V tidak memiliki akses untuk SIA
