Evaluasi & Dokumentasi
Metodologi evaluasi dan hasil pengujian efektivitas sistem AdaptiXLearn
Evaluasi & Dokumentasi
Metodologi Evaluasi (Independent T-test, SUS, dan UEQ+)
Untuk menilai efektivitas sistem Adaptive User Interface (AUI) dalam LMS yang dikembangkan, penelitian ini menggunakan metode evaluasi kuantitatif yang mencakup pengujian statistik dan pengukuran persepsi pengguna. Evaluasi dilakukan dengan melibatkan dua kelompok: kelompok eksperimen (menggunakan LMS dengan AUI) dan kelompok kontrol (menggunakan LMS standar).
Hasil Evaluasi
(a) Hasil Uji Wilcoxon Signed-Rank Test (Dalam Kelompok) - Kelompok Eksperimen
TABEL (a): Wilcoxon Signed-Rank Test – Data Numerik Nilai Pre-Test & Post-Test Kelompok Eksperimen
Grafik Wilcoxon Signed-Rank Test - Kelompok Eksperimen
Interpretasi:
Pada Topik 2 dan 3, kelompok eksperimen menunjukkan peningkatan nilai post-test yang signifikan dibandingkan nilai pre-test. Hal ini mengindikasikan bahwa intervensi melalui penggunaan AUI berpotensi meningkatkan hasil belajar mahasiswa pada topik-topik tersebut yang bersifat lebih kompleks dan menuntut eksplorasi.
(b) Hasil Uji Wilcoxon Signed-Rank Test (Dalam Kelompok) - Kelompok Kontrol
Grafik Wilcoxon Signed-Rank Test - Kelompok Kontrol
Interpretasi:
Secara umum, violin plot pada kelompok kontrol memperlihatkan bahwa tanpa adanya fitur adaptif dalam sistem, peningkatan hasil belajar cenderung terbatas dan tidak konsisten antar topik. Ini memperkuat dugaan bahwa kehadiran AUI memberikan nilai tambah dalam mendukung pemahaman pembelajar.
(c) Hasil Uji Mann-Whitney U (Antar Kelompok)
TABEL (c): Mann-Whitney U – Perbandingan Nilai Post-Test Antara Kelompok Eksperimen dan Kontrol
Grafik Mann-Whitney U - Perbandingan Nilai Akhir
Interpretasi:
Grafik ini menunjukkan perbandingan nilai akhir (post-test) antara mahasiswa yang menggunakan sistem LMS adaptif (kelompok eksperimen) dan sistem LMS biasa (kelompok kontrol) pada tiga topik pembelajaran. Topik 2 dan 3 menunjukkan bahwa mahasiswa dengan sistem adaptif (warna oranye) cenderung mendapatkan nilai lebih tinggi dibanding kelompok kontrol (warna kuning). Hal ini menunjukkan bahwa sistem LMS dengan fitur Antarmuka Adaptif dapat membantu meningkatkan hasil belajar, terutama pada materi yang lebih kompleks.
Hasil Penilaian Kebergunaan dengan System Usability Scale (SUS)
Grafik SUS - Skor Rata-rata
Interpretasi:
Grafik ini menunjukkan rata-rata skor System Usability Scale (SUS) pada tiga tahap evaluasi sistem. Skor meningkat dari 67.32 (pilot project) ke 70.98 dan mencapai 73.24 setelah penerapan sistem adaptif (AUI). Nilai di atas garis merah (threshold 68) menandakan bahwa sistem dianggap mudah digunakan dan diterima dengan baik oleh pengguna.
Hasil Penilaian Pengalaman Pengguna dengan User Experience Questionnaire Plus (UEQ+)
Grafik UEQ+ - Skor Aspek UX
Interpretasi:
Grafik ini menunjukkan skor rata-rata pengalaman pengguna terhadap sistem LMS adaptif pada berbagai aspek, dinilai dari –3 (sangat buruk) hingga +3 (sangat baik). Aspek Usefulness, Intuitive Use, dan Quality of Content memperoleh skor tertinggi, menunjukkan bahwa sistem dinilai sangat berguna, mudah digunakan, dan menyajikan konten berkualitas. Meskipun Visual Aesthetics dan Adaptability memperoleh skor lebih rendah, nilainya tetap positif, menandakan bahwa keseluruhan pengalaman pengguna dianggap baik dan memuaskan.
Dokumentasi Pengambilan Data
Dokumentasi Pengambilan Data
Dokumentasi setup laboratorium dan persiapan perangkat untuk pengambilan data cognitive load menggunakan eye-tracking dan physiological sensors
Dokumentasi Pengambilan Data
Dokumentasi proses pengambilan data dengan partisipan mahasiswa selama sesi pembelajaran menggunakan sistem AdaptiXLearn
Testimoni Pengguna
Feedback dan testimoni dari pengguna yang telah menggunakan sistem AdaptiXLearn
Farhan Karisma
"Isi dari pembelajaran yang tersedia sudah sangat baik dan mudah dipahami, alur pembelajaran yang menarik dan fitur fitur yang tersedia cukup menunjang untuk pelajar menambah ilmunya maupun mengevaluasi kembali ilmunya."
Marciano Lie
"Tampilan yang clean, fitur yang bisa digunakan efektif sehingga mudah digunakan dan mungkin hampir semua orang dapat dengan mudah beradaptasi"
Nadia Mulyadi
"Kejelasan dari course yang dapat diakses dan kesederhanaan UI sehingga mudah untuk navigasi tanpa bantuan."
Fakhri Fajar Ramadhan
"Fitur yang tersedia sudah seperti LMS pada umumnya sehingga ketika menggunakan sudah familiar, walaupun ada tampilan baru seperti UI yang sepertinya lebih menarik tetap mudah digunakan"