Analisis Dan Perbaikan Aplikasi UB Bookstore Berdasarkan Aspek Usability (ISO 9241-11)

  Vol. 3, No. 1, Januari 2019, hlm. 7965-7972 http://j-ptiik.ub.ac.id

  

Analisis Dan Perbaikan Aplikasi UB Bookstore Berdasarkan Aspek

₁ Usability (ISO 9241-11) _{2 3} Harun Christian Bentro , Retno Indah Rokhmawati , Komang Candra Brata

  Program i Studi i Sistem i Informasi, Fakultas i Ilmu i Komputer, Universitas i Brawijaya _{1 3} Email: 145150401111004@mail.ub.ac.i k.candra.brata@ub.ac.id

  

Abstrak

  Untuk mencapai visi menjadi Penerbit Elektronik terbesar di Indonesia, UB Press merilis Aplikasi UB Bookstore. Terdapat 5 proses yang diamati yakni proses sign up dan sign in, proses edit profil, proses pencarian kategori dan buku, serta detail buku. Permasalah didalam aplikasi yang muncul pada observasi awal diantaranya navigasi tidak responsif, kurangnya informasi detail buku, perpaduan warna pada aplikasi yang kontras, serta pencarian buku dan navigasi menu yang kurang efektif. Sebab itu dilakukan perbaikan antarmuka dengan tiga dasar guideline. Selanjutnya dilakukan usability testing untuk desain aplikasi awal dan usulan. Menggunaan standar ISO 9241-11 dalam mengukur metrik usability diantarnya metrik effectivennes, efficiency dan satisfaction. Hasil di metrik effectivennes terbagi di 3 aspek, yakni Ketuntasan yang mengalami kenaikan sebesar 40%, Non Critical error serta Critical error yang mengalami penurunan sampai 0%. Didalam metrik efficiency didapatkan peningkatan sebesar 40% setelah pelaksanaan perbaikan antarmuka. Selanjutnya di aspek satisfaction, antarmuka rancangan desain usulan berada dalam grade C dan kategori

  “Acceptable”. Peneliti juga menggunakan kuesioner

  USE yang memiliki empat barometer. Setiap barometer memiliki pernyataan yang diberikan kepada pengguna untuk mendapatkan nilai tingkat usability aplikasi. Hasil dari nilai usability dari kuisioner ini sebelum perbaikan tampilan ialah sebesar 60,38% dan setelah rekomendasi rancangan desain usulan sebesar 79,70%.

  Kata kunci: usability, aplikasi mobile, ISO 9241-11, usability testing

Abstract

  

To achieve the vision of becoming the largest Electronic Publisher in Indonesia, UB Press released UB

Bookstore Application. There are 5 processes observed: sign up and sign in process, profile editing

process, category and book search process, and book details. Problems in applications that appear on

the initial observation include unresponsive navigation, lack of detailed book information, lack of

interest in application color, and difficult to finding book and menu navigation. Therefore, there are

three basic guidelines used for repairing the application interface. Further, usability testing is done for

initial and new design. ISO 9241-11 is used as a standard to measure usability metrics, including

Effectiveness, efficiency and satisfaction metrics. The results of the Effectiveness metrics are divided

into 3 aspects: Success with 40% improvement, Non Critical Error , and Critical Error which is

decreased to 0%. After repairing the application interface, efficiency metric increased to 40% after the

interface repair. In the aspect of satisfaction, the new interface design is in grade C and in the

"Acceptable" category. The researcher also used a USE questionnaire that included four criterions.

Each criterion has several statements given to the user to assess the usability level of the application.

The result of usability score of this questionnaire before recommendation is 60,38% and after

recommendation of new design is 79,70%.

  Keywords: usability, mobile application, ISO 9241-11, usability testing

  komputerissi dari buku cetak, mereka dapat 1. disalin dari gambar, atau hasil reflowable yang

   PENDAHULUAN

  direkonstruksi oleh piranti lunak yang

  E-book ialah salah satu inovasi dari

  menyerupai halaman pada perangkat membaca teknologi untuk memberikan kemudahan (Carden:2008) membaca, mendapatkan buku dari berbagai

  Salah satu penerbit berbasis lembaga sumber. E-book merupakan representasi

  Fakultas Ilmu Komputer Universitas Brawijaya pendidikan, UB Press mendeklarasikan visi dan misi dengan menjadi Penerbit elektronik pertama dan terbesar di indonesia. (UB Press:2014). Oleh karena UB Press itu meluncurkan aplikasi UB Bookstore. Dari hasil observasi awal kepada 5 responden acak di Universitas Brawijaya, ditemukan beberapa permasalahan dalam penggunaan aplikasi seperti navigasi tidak responsif, kurangnya informasi detail buku, perpaduan warna pada aplikasi yang kontras, serta pencarian buku dan navigasi menu yang kurang efektif.

  Oleh karena itu peneliti mencari nilai

  Dalam melaksanakan analisis perbalikan aplikasi ini menggunakan metode usability

  BBC Mobile Accessibility Guidelines adalah serangkaian panduan praktik terbaik untuk konten mobile web, hybrid dan native apps yang diluncurkan pada tahun 2017.

  Usability Guidelines for Mobile Websites and Applications serta Google Material Design.

  Dalam pelaksanaan perbaikan desain usulan sendiri menggunakan tiga guidelines yakni BBC Mobile Accessibility Guidelines,

  Untuk mendapatkan hasil keseluruhan, digunakan kuesioner USE untuk alat pengukuran untuk mendapatkan nilai usability. Kuesioner USE memiliki 30 pernyataan yang dibagi dari 4 kriteria. Setiap pernyataan memiliki penilaian disaat pengguna menggunakan aplikasi ini. Menurut Lund (2001) Banyak kriteria yang dapat diamati tetapi. tetapi kriteria di USE ialah barometer yang mudah untuk diamati dan dibandingkan hasilnya.

  SUS (System Usability Scale) dirilis oleh John Brooke pada tahun 1986, ialah sebuah kuesioner simpel dengan 10 poin pernyataan yang memberikan pandangan secara luas mengenai usability terutama mengenai satisfaction pengguna. SUS yang memiliki 5 skala likert tetapi nilai dari poin ini tidak menunjukkan penilaian persetujuan yang rigid, tetapi membiarkan pengguna memilih sendiri tingkat persetujuan (Brooke, 1996).

  Hasil yang diperoleh di Usability testing pada desain lama selanjutnya dijadikan acuan dalam pelaksanaan perancangan desain usulan aplikasi mobile UB Bookstore.

  untuk mengamati desain lama dan prototipe desain usulan aplikasi.

  Usability testing dilaksanakan dua kali yakni

  memberikan berbagai tugas yang harus dituntaskan pengguna. Tujuannya yakni untuk menilai ketercapaian tugas, mengamati perilaku pengguna, dan menggali permasalahan usability ketika proses pengerjaan tugas. Evaluasi ini

  Usability testing dilaksanakan dengan

  mendapatkan hasil Usability secara keseluruhan..

  testing untuk mengukur Effectiveness dan Efficiency , SUS Questionnaire untuk mengukur Satisfaction dan USE Questionnaire untuk

  Melakukan evaluasi aplikasi mobile itu perlu untuk dilakukan untuk meningkatkan kualitas dari dari aplikasi ini.Terlebih bagi aplikasi UB Bookstore yang harus dapat memberikan layanan pembelian dan penyewaan buku dan e-book dengan kualitas aplikasi yang mumpuni dengan memperhatikan spesifikasi kebutuhan pengguna.

  usability aplikasi ini Berdasarkan standar ISO

  menilai usability dari aplikasi mobile yang bernama m-breakfast nutrition . Dari penelitian diatas didapatkan beberapa hal yang cocok dengan penelitian ini yakni 3 indikator usability yang digunakan dalam penelitian tersebut dan metode usability testing yang digunakan

  Effectiveness, efficiency, dan satisfaction untuk

  pengamatan terhadap tiga aspek usability yaitu

  testing kepada pengguna berdasarkan

  berinteraksi di aplikasi. Pengujian usability dilaksanakan dengan melakukan usability

  interface dapat digunakan oleh pengguna saat

  Aplikasi Mobile ” oleh Yani Nurhadryani. Didalam jurnal ini sebuah aplikasi mobile yang berrnama M-Breakfast Nutrition di uji usability untuk mendapatkan info seberapa mudah suatu

  Usability Untuk Meningkatkan Antarmuka

  “Pengujian

  3. Satisfaction ialah kepuasan dan perilaku positif ketika menggunakan aplikasi. Penelitian terdahulu ialah

  2. Efficiency ialah sumber daya yang dihabiskan pengguna untuk mencapai tujuan

  1. Effectiveness ialah ketepatan pengguna didalam mencapai tujuan dan didalam lingkungan tertentu

  9241-11 Usability ialah sejauh mana suatu produk dapat digunakan oleh pengguna untuk mencapai tujuan tertentu secara efektif, efisien dan memuaskan pada konteks penggunaan. Berikut merupakan Pembahasan per kriteria:

  Pedoman ini didasarkan pada persyaratan konten bbc.co.uk yang dikembangkan untuk pengembangan inggris dan untuk digunakan dengan teknologi yang umumnya tersedia di inggris. BBC mobile accessibility guidelines ini sebagai standar bagi karyawan dan pengembang aplikasi BBC untuk mengikuti, namun, mereka juga dapat dirujuk oleh siapa pun yang terlibat dalam pengembangan aplikasi mobile .

  Usability Guidelines for Mobile Websites and Applications adalah pedoman usability yang

  Gambar 1. Metodologi Penelitian 3.

  Content, Dan Performance . (Shitkova:2015).

  Selain itu juga menggunakan Google Material Desain sebagai dasar ketentuan dalam pelaksanaan perbaikan desain antarmuka dari aplikasi UB Bookstore.

  i

2. METODOLOGI PENELITIAN

  Dalam perencanaan penelitian ini diawali dengan observasi awal dan wawancara kepada pengguna dari aplikasi mobile UB Bookstore dan kepada pengelola aplikasi mobile UB Bookstore. Setelah itu melakukan usability

  testing kepada 5 responden yang dipilih berdasarkan persona fakultas yang berbeda.

  Selain itu juga menyebarkan 25 kuesioner SUS serta USE untuk mendapatkan hasil satisfaction dan hasil Usability secara keseluruhan.

  Selanjutnya dilakukan analisis masalah

  usability yang ditemukan dengan berdasarkan

  hasil usability testing dan kedua kuesioner diatas. Tahap berikutnya ialah perancangan desain usulan untuk antarmuka aplikasi mobile UB Bookstore yang baru. Perancangan dilaksanakan dengan perbaiki sesuai masalah

  dikhususkan untuk aplikasi mobile yang dibuat oleh Maria Shitkova, et al. dari University Of Muenster-Ercis, Muenster, Jerman. Penelitian ini didasarkan minimnya pedoman yang membahas mengenai pedoman usability antarmuka dari aplikasi piranti bergerak. Penelitian ini merujuk penelitian sebelumnya dari usability.gov dan norman Nielsen group. Terdapat 39 guideline yang dibagi menjadi 5 aspek yakni Layout, Navigation, Design,

  Kesimpulan dan saran Selesai

  Usability Testing desain awal Perancangan desain usulan Pengukuran Usability Testing rancangan desain usulan Membandingkan antara hasil desain aplikasi awal dan rancangan desain usulan

  Mulai Obervasi awal Objek Penelitian Studi Pustaka Pengukuran dan Pelaksanaan

HASIL PEMBAHASAN

  evaluasi desain awal dan melakukan penyebaran kuesioner SUS dan USE kepada 25 responden. Selanjutnya hasil ini dibandingkan dengan hasil dari desain awal untuk mengetahui peningkatan aspek usability. Untuk lebih jelasnya dapat amati tahap metodologi di Gambar 1

  Proses penelitian sendiri dimulai dari tahap observasi dan wawancara awal yang memperoleh gambaran serta harapan pengguna, bagaimana pengguna berinteraksi dengan aplikasi ini dan mendapatkan tentang fitur yang sering diakses oleh pengguna pada aplikasi mobile UB Boosktore. Wawancara awal dilakukan terhadap 5 pengguna yang merupakan pengguna aplikasi mobile UB Bookstore. Berdasarkan hasil observasi diatas tersebut diperoleh gambaran permasalah seperti navigasi tidak responsif, kurangnya informasi detail buku, perpaduan warna pada aplikasi yang kontras, serta pencarian buku dan navigasi menu yang kurang efektif. Selain hal tersebut, diperoleh aktivitas yang sering dilakukan oleh pengguna, diantaranya melakukan sign up dan sign in, melakukan proses edit profil, melakukan proses pencarian kategori dan buku, serta mengetahui detail buku yang akan dipakai dan melakukan ulasannya. Didalam tahapan

  Tahap Identifikasi Masalah Tahap Pengumpulan dan Pengolahan Data Awal Tahap Rancangan dan Interpretasi Hasi Akhir

  testing dengan lima pengguna yang sama seperti

  Setelah desain usulan selesai, dilakukan evaluasi desain usulan dengan melaksanakan usability

  guideline yang dipilih peneliti yakni BBC Mobile Accessibility Guidelines, Usability Guideline s for Mobile Websites and Applications serta Google Material Design.

  usability yang telah ditemukan pada tahap usability testing dan kuesioner yang ada. Dalam

  pelaksaan perbaikan antarmuka ini melakukan memiliki dasar panduan perbaikan dari tiga identifikasi konteks penggunaan, dilaksanaan identifikasi pengguna dengan karakteristik pengguna yang ialah mahasiswa Universitas Brawijaya, kelengkapan sistem meliputi

  hardware dan software yang mendukung

  Error sebanyak 32% serta faktor Critical Error

  3 Mencari sebuah katalog/kategori buku yang ditentukan didalam aplikasi UB Bookstore 23 detik

  68,8 detik

  2 Melakukan pengeditan akun UB Bookstore

  110 detik

  sign in akun UB Bookstore

  1 Melakukan sign up up dan

  Rata Waktu

  testing aplikasi UB Bookstore desain awal Tabel 2. Metrik Effectiveness Desain Awal No Tugas

  Metrik efficiency digunakan untuk menghitung waktu yang dibutuhkan user dalam melakukan setiap tujuan (ISO, 1998). Selanjutnya di Tabel 2 ialah hasil persentase pengukuran metrik efisiensi pada usability

  Error serta Critical Error sampai 0%.

  sebanyak 8%. Berdasarkan persentase ketiga faktor metrik Effectiveness tini, peneliti memiliki target peningkatan ketercapaian hingga 100% pada aspek ketuntasan dan target untuk menurunkan persentase faktor Non Critical

  ketuntasan sebanyak 60%, faktor Non Critical

  didalam melakukan Usability testing berdasarkan lima user goal yang dibuat. Kelima

  Critical Error . Didapatkan rata-rata faktor

  R= Responden, T= Indikator Ketuntasan, NCE = Non Critical Error , CE = Critical Error Didalam Tabel 1 dijelaskan hasil pencapaian setiap responden berlandaskan tiga indikator, yaitu Ketuntasan, Non Critical Error dan

  T NCE CE R1 60% 40% 0% R2 60% 40% 0% R3 60% 20% 20% R4 60% 40% 0% R5 60% 20% 20% Rata-Rata 60% 32% 8%

  Tabel 1. Metrik Effectiveness Desain Awal

  di Tabel 1 ialah hasil persentase keseluruhan metrik Effectiveness pada desain awal.

  Error (Tuntas tetapi kesulitan) dan Critical Error (Gagal) (Usability.gov,2013). Selanjutnya

  Metrik Effectiveness ialah metrik yang digunakan untuk pengukuran keakuratan pengerjaan tugas (ISO, 1998) dan dikelompokan ke tiga aspek, yakni Ketuntasan, Non Critical

  UB Bookstore. Selanjutnya kelima tes tugas ini digunakan didalam proses Usability testing. Proses Usability testing membutuhkan lima pengguna yang memiliki persona yang berbeda- beda. Untuk responden 1-4 sendiri pemilihan latar belakang fakultas responden didasarkan pada jumlah populer buku dari UB Press. Untuk responden ke 5 sendiri dipilih untuk memberikan persona sebagai persona yang sudah memahami teknologi informasi. Usability testing dilaksanakan untuk mengevaluasi masalah usability di aplikasi mobile (Nielsen, 2012). Berdasarkan ISO-9241-11:1998, terdapat 3 metrik usability yang dapat digunakan, diantaranya metrik Effectiveness, efficiency dan satisfaction.

  review buku yang ditentukan didalam aplikasi

  proses sign up dan sign in akun UB Bookstore; (2) Dapat melaksanakan pengeditan akun UB Bookstore; (3) Dapat menemukan sebuah katalog/kategori buku yang ditentukan didalam aplikasi UB Bookstore; (4) Dapat menemukan sebuah buku yang ditentukan di dalam aplikasi UB Bookstore, serta (5) Dapat mengetahui informasi buku dan dapat melakukan review buku yang ditentukan didalam aplikasi UB Bookstore. Selanjutnya dilakukan evaluasi desain lama dengan merencanakan tes tugas dengan tipe Goal or Task Based Skenario yang berfokus pada keberhasilan pengguna didalam mencapai tujuan atau ketuntasan didalam pelaksanaan tugas (Usability.gov, 2013). Tugas tipe ini tidak mengatur alur yang dilewati oleh responden untuk tujuannya. Perancangan tes tugas ini berjumlah lima, yakni (1) Melakukan sign up up dan sign in akun UB Bookstore; (2) Melakukan pengeditan akun UB Bookstore; (3) Mencari sebuah katalog/kategori buku yang ditentukan didalam aplikasi UB Bookstore; (4) Mencari sebuah buku yang ditentukan didalam aplikasi UB Bookstore, serta (5) Melakukan

  user goal tersebut diantaranya (1) Melaksanakan

  4 Mencari sebuah buku yang ditentukan didalam aplikasi UB Bookstore 20 detik

  5 Melakukan review buku yang ditentukan didalam aplikasi UB Bookstore

  4,2 60,38 %

  Responden T NCE CE R1 100% 0% 0% R2 100% 0% 0% R3 100% 0% 0% R4 100% 0% 0% R5 100% 0% 0% Rata-Rata 100% 0% 0%

  Tabel 4. Metrik Effectiveness Desain Usulan

  Pertama, mengukur Metrik Effectiveness yang dikelompokkan di tiga indikator penilaian Selanjutnya di dalam Tabel 4 ialah hasil persentase pengukuran metrik Effectiveness desain usulan

  Setelah selesai melakukan perancangan desain usulan aplikasi mobile UB Bookstore, tahapan berikutnya ialah evaluasi desain usulan. Proses melaksanakan evaluasi desain usulan sama dengan evaluasi desain awal yang telah dilaksanakan yakni dengan 3 metrik usability sebagai dasar penilaian usability testing serta menggunakan 5 responden yang sama.

  Gambar 2. Main board Desain Usulan

  board desain usulan aplikasi ini.

  Permasalahan usability diatas akan dijadikan acuan dalam perancangan usulan desain baru. Setelah menemukan masalah, Perancangan desain usulan dilakukan berdasarkan Guideline yang sudah ditentukan. Berikut di Gambar 3 menampilkan tampilan desain usulan pada main

  Selanjutnya setelah tahapan desain awal, ialah tahapan menentukan masalah usability. Ditahap ini ditemukan 5 permasalahan usability, diantaranya (1)Mengubah tata letak konten sign up dan sign in agar lebih terlihat dan menarik. (2) Membuat tampilan ikon profil dan edit profil agar lebih fokus dan mudah untuk dilihat oleh pengguna. (3) Mengatur latar belakang menu, navigasi dan tata letak konten agar mudah untuk dilihat oleh pengguna. (4) Warna pada menu navigasi utama agar dapat terlihat dan tidak kontras dengan warna tulisan. (5) Kolom pencarian yang disertai prediksi agar lebih mudah digunakan (6) Detail buku yang memuat penjelasan dan informasi tambahhan disertakan fitur transaksi.

  3,7 53,14 % Penilaian Total

  34,4 detik Peneliti memiliki target untuk kelima tugas ini dapat diselesaikan lebih cepat pada desain usulan perbaikan. Selanjutnya ialah mengukur metrik satisfaction yang diperoleh menyebarkan kuesioner SUS. Dalam menyebarkan kuesioner ini dilaksanakan setelah pengguna melaksanakan usability testing. Kuesioner ini bertujuan untuk mendapatkan tingkat kepuasan responden mengenai desain aplikasi bawaan UB Bookstore. Dari hasil penyebaran kuesioner sendiri nilai rata-rata yang diperoleh pada evaluasi desain awal, diklasifikasikan kedalam tiga indikator penilaian diantaranya (1)

  4,8 68,86 % Satisfaction

  4,4 63,53 % Ease of Learning

  3,9 56,00 % Ease of Use

  Kriteria Rata-rata Persentase Usefulness

  Tabel 3. Hasil Kuesioner USE Desain Awal

  Selain itu juga peneliti juga menggunakan kuesioner USE untuk melengkapi penilaian mengenai usability dari desain awal aplikasi UB Bookstore. Berikut di tabel 3 menunjukan persentase dari hasil kuesioner USE.

  difaktor Adjective Ratings. Dari hasil ini, didapatkan perolehan skor SUS pada situs aplikasi mobile UB Bookstore ini masih dibawah rata-rata ideal dan desain aplikasi ini belum memuaskan pengguna. kebanyakan

  “Not Acceptable” difaktor Acceptability Ranges; (2) “Grade F” difaktor Grade Scale; serta (3) “OK”

  R = Responden, T= Aspek Ketuntasan, NCE =

  Non Critical Error , CE = Critical Error . Ease of Use 5,58 79,74% Ease of

  6,03 86,14% Didalam Tabel 4 dijelaskan hasil

  Learning

  ketercapaian setiap responden berdasarkan

  Satisfaction 5,43 77,63%

  indikator yang ada. Didapatkan rata-rata

  Penilaian Total 5,27 75,29%

  indikator ketuntasan sebesar 100%, indikator Dari hasil diatas sendiri menunjukkan

  Non Critical Error serta Critical Error sebanyak

  bahwa usability sudah baik dengan nilai rata rata 0%. diatas 75%.

  Selanjutnya ialah membandingkan hasil Setelah itu di Tabel 4 merupakan hasil evaluasi usability aplikasi mobile UB Bookstore persentase pengukuran metrik efficiency pada desain awal dan desain usulan. Perbandingan aplikasi UB Bookstore desain

  usability testing

  semua hasil ini memiliki tujuan untuk usulan mengetahui kenaikan usability di aplikasi mobile UB Bookstore. Berikut di Tabel 7 ialah ikhtisar hasil dari metrik Effectiveness diaspek

  Tabel 5. Metrik Efficiency Desain Usulan ketuntasan.

  Rata No Tugas Waktu Tabel 7. Perbandingan Aspek Tuntas

  Melakukan sign up up dan 70,4

  Responden Desain Awal Desain Usulan

  1 akun UB Bookstore detik

  sign in R1 60% 100%

  Melakukan pengeditan akun 63,8

  2 60%

  UB Bookstore detik R2 100% Mencari sebuah

  R3 60% 100%

  katalog/kategori buku yang 15,8

  3 R4 60% 100% ditentukan didalam aplikasi detik

  UB Bookstore 60% 100%

  R5

  Mencari sebuah buku yang 60% 100%

  Rata-rata

  4 ditentukan didalam aplikasi 13 detik Didalam Tabel 7 dapat diperhatikan bahwa

  UB Bookstore terjadi kenaikan di aspek ketuntasan dari Melakukan review buku

  23,8 evaluasi desain awal aplikasi serta desain usulan.

  5 yang ditentukan didalam detik

  Sebelumnya desain awal mendapatkan nilai rata- aplikasi UB Bookstore rata ketuntasan sebanyak 60% dan mengalami kenaikan didesain usulan menjadi 100%. Hal ini

  Selanjutnya adalah Hasil dari Kuesioner SUS berarti bahwa desain usulan aplikasi mobile UB yang disebarkan kepada 25 responden yang

  Bookstore memiliki tampilan yang lebih mudah pernah berinteraksi dengan aplikasi desain awal dipahami sehingga responden tidak memiliki dan desain usulan. Dari hasil penyebaran kesulitan didalam mengerjakan usability testing . kuesioner sendiri nilai rata-rata yang diperoleh

  Tabel 8 ialah hasil dari metrik Effectiveness pada evaluasi desain usulan, diklasifikasikan pada aspek Non Critical Error . kedalam tiga indikator penilaian diantaranya diantaranya (1)

  “Acceptable” pada Acceptability Tabel 8. Perbandingan Non Critical Error

  Ranges; (2) “Grade C” pada Grade Scale; dan Responden Desain

  (3)

  “Good” pada Adjective Ratings. Oleh sebab Desain Awal Usulan

  itu, dapat diperolehan nilai SUS pada desain

  R1 40% 100%

  usulan telah sesuai target dan desain dapat diterima pengguna.

  40%

  R2 100%

  Selain itu juga peneliti juga menggunakan

  R3 20%

  100% kuesioner USE untuk melengkapi penilaian 40% mengenai usability dari desain awal aplikasi UB R4

  100% Bookstore. Berikut pada tabel 6 menunjukan

  20%

  R5 100% persentase dari hasil kuesioner USE. Rata-rata 32% 100%

  Tabel 6. Hasil Kuesioner USE Desain Usulan Didalam tabel 8 terjadi penurunan nilai Non

  Kriteria Rata-rata Persentase Critical Error dari evaluasi desain awal aplikasi

  Usefulness 5,27 75,29% ini sebelum dengan evaluasi desain usulan. Peningkatan i persentase i (-

  40 %

  Didalam desain awal memiliki nilai sebanyak

  100%)

  32% serta mengalami penurunan didesain usulan Didalam Tabel 10 didapatkan bahwa terjadi menjadi 0%. Penurunan ini memiliki arti bahwa kenaikan persentase sebanyak 40% dari desain sudah tidak ada responden yang mengalami awal di desain usulan. Hal ini berarti bahwa kendala didalam mengerjakan tes tugas pada terjadi penurunan waktu yang dibutuhkan pada desain usulan. desain usulan dibandinkan desain awal. Hal ini

  Selanjutnya di tabel 9 ialah hasil dari metric dapat dapatkan bahwa desain usulan berhasil

  Effectiveness didalam indikator Critical Error .

  mencapai target yang ditetapkan.

  Selanjutnya didalam Tabel 11 ialah

  Tabel 9. Perbandingan Critical Error

  tampilan perbandingan pada metrik satisfaction

  Responden Desain

  dari desain antarmuka aplikasi sebelum dengan

  Desain Awal Usulan desain usulan antarmuka yang baru. R1 60% 100% Tabel 11. Perbandingan Metrik Satisfaction i i Desain Desain

  60% 100%

  R2 i i awal usulan

  R3 60%

  100%

  Total i skor i SUS 1412,5 1925 R4 60%

  100%

  Rata-rata i 56,5

  77 SUS 60%

  R5 100% Grade SUS F C

  100%

  Rata-rata 60% Acceptability Not Acceptable

  Pada tabel diatas menampilkan penurunan

  Acceptable Ranges

  persentase di indikator Critical Error dari

  Adjective OK Good

  evaluasi desain awal serta desain usulan. Di

  Ratings

  desain mula-mula mendapatkan rata-rata Dari hasil pengumpulan kuesioner USE

  Critical Error sebanyak 8% dan terdapat didapatkan hasil pada tabel 5.29 berikut.

  penurunan yang cukup signifikan di desain usulan menjadi 0%. Penurunan ini memiliki arti Tabel 12 Perbandingan Hasil Kuesioner USE

  Kriteria Rata Rata Perse Persent

  yakni responnden tidak mengalami kegagalan

  Awal Usula ntase ase

  dalam pengerjaan tes tugas di desain usulan

  n Lama Usulan

  Selanjutnya di Tabel 10 ialah perbandingan

  Usefulness

  3,92 5,27 56,0 75,29 pada metrik efficiency dari desain aplikasi awal 0% % dengan desain usulan. Hasil tersebut selanjutnya

  Easy of Use

  4,45 5,58 63,5 79,74 dibandingkan serta dihitung menggunakan 3% % perhitungan rata-rata geometrik untuk

  Easy of

  4,82 6,03 68,8 86,14 mengetahui peningkatan persentase metrik

  Listening

  6% %

  efficiency . Nielsen (2001) mengemukakan Satisfaction

  3,72 5,43 53,1 77,63 perhitungan ini disarankan untuk mengukur 4% % perolehan waktu yang ialah data perbandingan.

  Total Nilai

  4,23 5,58 60,3 79,70

  Usability

  8% %

  Tabel 10. Perbandingan Metrik Efficiency

  Terjadi peningkatan signifikan nilai

  Desain Desain A : B usability desain usulan dibandingkan dengan

  Awal (A) Usulan (B) i

  desain lama, Persentase baru sendiri mencapai

  T1

  110 detik i 70,4 detik i 1,56 detik i 79,7 % naik 19,32% dari nilai persentase lama

  T2

  68,8 detik i 63,8 detik i 1,08 detik i yang hanya 60,38. Ini mengindikasikan bahwa ketergunaan desain aplikasi ini naik seiring

  T3

  23 detik i 15,8 detik i 1,46 detik i dengan perbaikan desain antarmuka aplikasi UB

  T4

  20 detik i 13 detik i 1,54 detik i Bookstore.

  T5

  34,4 detik i 23,8 detik i 1,45 detik i

   KESIMPULAN Perkalian i seluruh i tugas

  i 4.

  6,23 detik i

  Rata-rata i geometric 1,4 detik i

  Penelitian ini menghasilkan kenaikan metrik

  Persentase i 140 % (dikali 100%) Effectiveness dibagi menjadi 3 aspek, yaitu Ketuntasan yang mengalami kenaikian sebesar 40%, Non Critical Error dan Critical Error yang mengalami penurunan hingga 0%. Faktor terbesar kenaikan dari critical error ke indikator ketuntasan adalah adanya navigasi yang jelas dan kolom pencarian kategori yang memiliki kejelasan penggunaannya yakni dari 2 responden yang mengalami menjadi 0 responden yang mengalami. Faktor terbesar kenaikan dari non critical error ke indikator ketutasan ialah detail buku yang membantu untuk melakukan review buku dari 5 responden yang mengalami non critical error menjadi 0 responden. Pada metrik

  efficiency diketahui terjadi peningkatan rata-rata

  i <https://www.usability.gov/how-to-

  Agri-Informatika, Vol.2 , No. 2, pp. 83 - 93.

  untuk Meningkatkan Antarmuka Aplikasi Mobile. Jurnal Ilmu Komputer

  Nurhadryani, Y., 2013. Pengujian Usability

  Lund, A. M., 2001. Measuring Usability with the USE Questionnaire. Usability Interface, 8(2), 3-6

  Macefield, R., 2009. How To Specify the Participant Group Size for Usability Studies: A Practitioner’s Guide. Journal of Usability Studies, 5(1), pp. 34-45.

  [Online] i Tersedia i di: <https://www.usability.gov/how-to- and-tools/methods/usability- testing.html> [Diakses 21 April 2018]

  Usability.gov, 2013b. Usability testing.

  [Online] Tersedia i di: i <https://measuringu.com/a verage- times/> [Diakses 19 September 2017].

  Sauro, J., 2010. Average Task Times in Usability Tests: What to Report?.

  andtools/methods/system-usability- scale.html> [Diakses 5 April 2018]

  <http://uxpajournal.org/determining- whatindividual-sus-scores-mean- adding-anadjective-rating-scale/> [Diakses 6 April 2018] Brooke, J., 1986. System Usability Scale (SUS). [Online] i Tersedia i di i :

  geometrik 40% pada setelah dilakukan perbaikan antarmuka. Faktor terbesar kenaikan metrik efficiency ialah karena fitur sign up dan

  Determining i what i individual i SUS i score s i mean: Adding i an i adjective i rating scale, [ejournal] 4(3).Tersedia melalui: Journal i Of i Usability i Studies i (JUS).

  Bangor, i A., Kortum, P., & Miller, J., 2009.

  ISO 9241-11 Ergonomic requirements i for i office i work i with i visua l i display terminals i (VDTs) - Part 11 : Guidance on i usability .

  I PUSTAKA International i Organization i for i Standardization, 1998.

  satisfaction adalah kepuasan pengguna terhadap desain tampilan saat ini dibandingan dengan desain awal. Peneliti juga menggunakan kuesioner USE yang meliputi empat kriteria yaitu usefulness, ease of use, ease of learning dan satisfaction. Setiap kriteria memiliki beberapa pernyataan yang akan diberikan kepada pengguna untuk menilai tingkat usability aplikasi. Hasil nilai kegunaan dari kuisioner ini sebelum rekomendasi perbaikan adalah sebesar 60,38% dan setelah rekomendasi desain usulan sebesar 79,70%. Didalam pelaksanaan tugas akhir ini perlu adanya guideline yang benar- benar dapat membantu dalam penelitian ini Sehingga menghasilkan desain usulan dari aplikasi mobile UB Bookstore yang mudah digunakan dan dipahami pengguna, serta menaikan produktivitas pengguna dan dapat menaikan usability sebuah aplikasi mobile .

  “Acceptable”. Faktor terbesar kenaikan metrik

  menjadi berada dalam grade C dan kategori

  “Not Acceptable”

  selisih perbandingan waktu berkisar 1,56 detik dan fungsi kolom pencarian yang memiliki fungsi prediksi sehingga dapat melakukan proses buku dengan cepat dengan selisih perbandingan waktu berkisar 1,54 detik. Selanjutnya didalam aspek satisfaction, antarmuka desain usulan naik dari grade F dan kategori

  sign in yang lebih mudah ditemukan dengn