Penelitian ini mengkaji akurasi perangkat AI asisten Xiaozhi (小智) berbasis mikrokontroler ESP32 dalam menjawab berbagai kategori pertanyaan. Permasalahan utama yang diangkat adalah terbatasnya data tolok ukur (benchmark) mengenai performa AI asisten percakapan yang dibangun di atas sistem tertanam dalam konteks bahasa Indonesia. Tujuan penelitian adalah mengukur dan menganalisis akurasi respons yang dihasilkan oleh AI asisten Xiaozhi pada lima kategori pertanyaan: faktual, prosedural, komputasional, berbasis opini, dan pertanyaan terbuka. Metode yang digunakan mencakup perancangan set pertanyaan terstruktur sebanyak 150 butir, penerapan server Xiaozhi terintegrasi dengan ESP32, perekaman respons, serta evaluasi akurasi menggunakan rubrik penilaian yang divalidasi oleh pakar. Hasil penelitian menunjukkan akurasi keseluruhan sebesar 83,4%, dengan akurasi tertinggi pada pertanyaan faktual (91,9%) dan terendah pada pertanyaan berbasis opini (71,1%). Konsistensi respons mencapai 88,7%.
Copyrights © 2026