Systematic Mapping Study Terhadap Penerapan System Usability Scale Untuk Evaluasi Tingkat Kegunaan Perangkat Lunak

Kiki Nur Indah Sari, Yusuf Sulistyo Nugroho

Abstract


Beberapa tahun terakhir, banyak metode pengujian dilakukan untuk mengevaluasi tingkat kegunaan perangkat lunak. Salah satu metode yang digunakan untuk mengevaluasi kegunaan adalah System Usability Scale (SUS). Namun, saat ini belum ada penelitian yang menganalisis tren penerapan SUS untuk mengevaluasi tingkat kegunaan suatu perangkat lunak. Sehingga dalam penelitian ini dilakukan survei terhadap 6.171 artikel publikasi yang diterbitkan di database electronic Springer Link dari tahun 2017 sampai 2022. Dengan menerapkan kata kunci serta kriteria inklusi dan eksklusi, sebanyak 24 artikel publikasi relevan yang teridentifikasi mencantumkan kata kunci SUS dalam artikel. Hasil penelitian menunjukkan bahwa penerapan SUS terbanyak pada artikel yang diterbitkan tahun 2022 yaitu 10 (41.7%) artikel. Dari 24 artikel tersebut, SUS diterapkan untuk menguji sistem pada 19 (79.2%) artikel. Bidang penerapan sistem terbanyak adalah bidang teknologi yaitu sebanyak 10 (52.6%) artikel. Artikel berdasarkan jumlah responden paling banyak dengan jumlah responden antara 1 dan 20 orang digunakan pada 7 (36.8%) artikel. Sedangkan berdasarkan jenis responden student terbanyak digunakan pada 10 artikel. Kriteria responden terbanyak berdasarkan pengalaman pengguna diterapkan pada 10 artikel. Perolehan skor SUS berdasarkan artikel yang diperoleh tertinggi diantara skor 72.6 dan 84.0 dengan adjective excellent yang dihasilkan dari 8 artikel. Studi pemetaan sistematis ini dapat memberikan gambaran dan peluang dalam mengeksplorasi terhadap topik penelitian baru terkait penerapan SUS untuk evaluasi tingkat kegunaan perangkat lunak.

Keyword: studi pemetaan sistematis, system usability scale, evaluasi perangkat lunak, survei, artikel publikasi


Full Text:

PDF

References


“ISO 9241-11:2018(en), Ergonomics of human-system interaction — Part 11: Usability: Definitions and concepts.†https://www.iso.org/obp/ui/#iso:std:iso:9241:-11:ed-2:v1:en (accessed Nov. 01, 2022).

J. Brooke, “SUS: A ‘Quick and Dirty’ Usability Scale,†Usability Eval. Ind., no. November 1995, pp. 207–212, 2020, doi: 10.1201/9781498710411-35.

D. W. Ramadhan, “Pengujian Usability Website Time Excelindo Menggunakan System Usability Scale (SUS) (Studi Kasus: Website Time Excelindo),†JIPI (Jurnal Ilm. Penelit. dan Pembelajaran Inform., vol. 4, no. 2, p. 139, 2019, doi: 10.29100/jipi.v4i2.977.

N. Nurjamilah, M. Rizal, and R. Arifianti, “Studi Tata Kelola Perusahaan yang Baik melalui Kinerja Perusahaan: Studi Pemetaan Sistematik,†Organum J. Saintifik Manaj. dan Akunt., vol. 1, no. 2, pp. 62–81, 2018, doi: 10.35138/organum.v1i2.36.

T. Wahyuningrum and A. Azhari, “Tinjauan Usability Dalam Evaluasi Produk Perangkat Lunak,†Semin. Nas. Inov. Teknol., pp. 337–346, 2017.

R. A. Alfatiha, S. Raharja, and R. Rivani, “Analisis Manajemen Perubahan pada Perusahaan Keluarga,†J. Bisnis dan Adm., no. Maret, pp. 8–16, 2022.

B. A. Kitchenham, D. Budgen, and O. P. Brereton, “The value of mapping studies – A participant-observer case study,†2010, doi: 10.14236/ewic/ease2010.4.

S. Akbulut, Y. T. Gebreyesus, A. Mishra, and A. Yazici, “Systematic Mapping on Quality in Web Application Testing,†1st Int. Informatics Softw. Eng. Conf. Innov. Technol. Digit. Transform. IISEC 2019 - Proc., 2019, doi: 10.1109/UBMYK48245.2019.8965472.

D. Macrinici, C. Cartofeanu, and S. Gao, “Smart contract applications within blockchain technology: A systematic mapping study,†Telemat. Informatics, vol. 35, no. 8, pp. 2337–2354, 2018, doi: 10.1016/j.tele.2018.10.004.

C. H. C. Duarte, “Software Productivity in Practice: A Systematic Mapping Study,†Software, vol. 1, no. 2, pp. 164–214, 2022, doi: 10.3390/software1020008.

A. Bangor, P. Kortum, and J. Miller, “Determining what individual SUS scores mean; adding an adjective rating,†J. usability Stud., vol. 4, no. 3, pp. 114–23, 2009.

J. R. Lewis and J. Sauro, “Item Benchmarks for the System Usability Scale,†J. Usability Stud., vol. 13, no. 3, pp. 158–167, 2018, [Online]. Available: https://uxpajournal.org/item-benchmarks-system-usability-scale-sus/

J. C. Vidal, P. Carreira, V. Amaral, J. Aguiam, and J. Sousa, “Towards high-level fuzzy control specifications for building automation systems,†Softw. Syst. Model., vol. 19, no. 3, pp. 625–646, 2020, doi: 10.1007/s10270-019-00755-8.

A. Nair, X. Ning, and J. H. Hill, “Using recommender systems to improve proactive modeling,†Softw. Syst. Model., vol. 20, no. 4, pp. 1159–1181, 2021, doi: 10.1007/s10270-020-00841-2.

M. W. Rahman, R. Islam, M. M. Hasan, S. Mia, and M. M. Rahman, “IoT Based Smart Assistant for Blind Person and Smart Home Using the Bengali Language,†SN Comput. Sci., vol. 1, no. 5, pp. 1–13, 2020, doi: 10.1007/s42979-020-00317-6.

J. F. Pimentel, L. Murta, V. Braganholo, and J. Freire, “Understanding and improving the quality and reproducibility of Jupyter notebooks,†Empir. Softw. Eng., vol. 26, no. 4, 2021, doi: 10.1007/s10664-021-09961-9.

T. Kaulich, T. Heine, and A. Kirsch, “Indoor Localisation with Beacons for a User-Friendly Mobile Tour Guide,†KI - Kunstl. Intelligenz, vol. 31, no. 3, pp. 239–248, 2017, doi: 10.1007/s13218-017-0496-6.

L. Luo et al., “TaintBench: Automatic Real-World Malware Benchmarking of Android Taint Analyses,†Lect. Notes Informatics (LNI), Proc. - Ser. Gesellschaft fur Inform., vol. P-320, pp. 65–67, 2022.

N. Mayer, J. Aubert, E. Grandry, C. Feltus, E. Goettelmann, and R. Wieringa, “An integrated conceptual model for information system security risk management supported by enterprise architecture management,†Softw. Syst. Model., vol. 18, no. 3, pp. 2285–2312, 2019, doi: 10.1007/s10270-018-0661-x.

A. Cota Vidaurre, E. Cusi López, J. P. Sandoval Alcocer, and A. Bergel, “TestEvoViz: visualizing genetically-based test coverage evolution,†Empir. Softw. Eng., vol. 27, no. 7, 2022, doi: 10.1007/s10664-022-10220-8.

J. Joy, K. Balakrishnan, and S. Madhavankutty, “A Novel Web Based Dictionary Framework for Indian Sign Language,†SN Comput. Sci., vol. 2, no. 3, pp. 1–7, 2021, doi: 10.1007/s42979-021-00533-8.

E. Medvet, M. Virgolin, M. Castelli, P. A. N. Bosman, I. Gonçalves, and T. Tušar, Unveiling evolutionary algorithm representation with DU maps, vol. 19, no. 3. Springer US, 2018. doi: 10.1007/s10710-018-9332-5.

G. Piskachev, J. Späth, I. Budde, and E. Bodden, “Fluently specifying taint-flow queries with fluentTQL,†Empir. Softw. Eng., vol. 27, no. 5, 2022, doi: 10.1007/s10664-022-10165-y.

M. Urbieta, S. Firmenich, G. Bosetti, P. Maglione, G. Rossi, and M. A. Olivero, “MDWA: a model-driven Web augmentation approach—coping with client- and server-side support,†Softw. Syst. Model., vol. 19, no. 6, pp. 1541–1566, 2020, doi: 10.1007/s10270-020-00779-5.

V. Stein Dani, C. M. D. S. Freitas, and L. H. Thom, “Recommendations for visual feedback about problems within BPMN process models,†Softw. Syst. Model., vol. 21, no. 5, pp. 2039–2065, 2022, doi: 10.1007/s10270-021-00972-0.

A. Ivanchikj, S. Serbout, and C. Pautasso, “Live process modeling with the BPMN Sketch Miner,†Softw. Syst. Model., vol. 21, no. 5, pp. 1877–1906, 2022, doi: 10.1007/s10270-022-01009-w.

W. G. Alghabban and R. Hendley, “Perceived Level of Usability as an Evaluation Metric in Adaptive E-learning: A Case Study with Dyslexic Children,†SN Comput. Sci., vol. 3, no. 3, pp. 1–11, 2022, doi: 10.1007/s42979-022-01138-5.

P. W. Gonçalves, E. Fregnan, T. Baum, K. Schneider, and A. Bacchelli, “Do explicit review strategies improve code review performance? Towards understanding the role of cognitive load,†Empir. Softw. Eng., vol. 27, no. 4, 2022, doi: 10.1007/s10664-022-10123-8.

D. S. Zwakman, D. Pal, and C. Arpnikanondt, “Usability Evaluation of Artificial Intelligence-Based Voice Assistants: The Case of Amazon Alexa,†SN Comput. Sci., vol. 2, no. 1, pp. 1–16, 2021, doi: 10.1007/s42979-020-00424-4.

E. R. Oliveira et al., “An Iterative Process for the Evaluation of a Mobile Application Prototype,†SN Comput. Sci., vol. 3, no. 4, pp. 1–15, 2022, doi: 10.1007/s42979-022-01153-6.

M. Wojtynek, J. J. Steil, and S. Wrede, “Plug, Plan and Produce as Enabler for Easy Workcell Setup and Collaborative Robot Programming in Smart Factories,†KI - Kunstl. Intelligenz, vol. 33, no. 2, pp. 151–161, 2019, doi: 10.1007/s13218-019-00595-0.


Refbacks

  • There are currently no refbacks.