JUSIFOR : Jurnal Sistem Informasi dan Informatika
Vol 5 No 1 (2026): JUSIFOR - Juni 2026

Evaluasi Strategi Penanganan Ketidakseimbangan Kelas pada Klasifikasi Sentimen Multikelas Ulasan Aplikasi ChatGPT

Qorry Aina Fitroh (Universitas Islam Negeri K.H. Abdurrahman Wahid Pekalongan, Indonesia)
M. Sa’id Abdurrohman Kunta Mardlian (Perekam dan Informasi Kesehatan, STIKES Arrahma Mandiri Indonesia, Indonesia)
Indra Kurniawan (UIN K.H. Abdurrahman Wahid Pekalongan, Indonesia)
Muhammad Kildah Namariq (UIN K.H. Abdurrahman Wahid Pekalongan, Indonesia)



Article Info

Publish Date
05 Jun 2026

Abstract

Ketidakseimbangan kelas pada dataset ulasan aplikasi berpotensi menimbulkan bias sistematis pada model klasifikasi sentimen berbasis machine learning. Penelitian ini mengevaluasi empat strategi penanganan ketidakseimbangan data, yaitu baseline, SMOTE, class weighting, dan kombinasi keduanya pada tiga algoritma klasifikasi, yakni Support Vector Machine (SVM), Random Forest, dan Logistic Regression menggunakan 10.000 ulasan dari aplikasi ChatGPT di Google Play Store. Representasi fitur dilakukan dengan TF-IDF dan dievaluasi menggunakan 5-fold cross-validation. Skenario baseline mencapai akurasi tertinggi sebesar 0,90, namun memiliki F1-score makro terendah berkisar antara 0,52 hingga 0,55 yang mengindikasikan dominasi kelas mayoritas. Penerapan class weighting secara konsisten menghasilkan F1-score makro tertinggi sebesar 0,58 untuk SVM dan Logistic Regression, sementara SMOTE tidak menunjukkan peningkatan yang konsisten. Hasil ini menegaskan adanya trade-off antara akurasi dan keseimbangan kinerja antarkelas, serta efektivitas strategi penanganan ketidakseimbangan bersifat bergantung pada algoritma yang digunakan.

Copyrights © 2026






Journal Info

Abbrev

jusifor

Publisher

Subject

Computer Science & IT Decision Sciences, Operations Research & Management Engineering Library & Information Science

Description

JUSIFOR adalah jurnal akses terbuka di bidang Informatika dan Sistem Informasi. Jurnal ini tersedia bagi para peneliti yang ingin meningkatkan pengetahuan mereka dibidang tertentu dan dimaksudkan untuk menyebarkan pengalaman hasil studi. JUSIFOR merupakan Jurnal penelitian ilmiah bidang informatika ...