Claim Missing Document
Check
Articles

Found 1 Documents
Search
Journal : cess journal of computer engineering system and science

Perbandingan Kinerja Klasifikasi Sentimen Ulasan Aplikasi Over the Top di Google Play Store Tutus Pandam Pradipta; Sri Huning Anwariningsih; Dahlan Susilo
CESS (Journal of Computer Engineering, System and Science) Vol. 11 No. 1 (2026): Januari 2026
Publisher : Universitas Negeri Medan

Show Abstract | Download Original | Original Source | Check in Google Scholar | DOI: 10.24114/cess.v11i1.70832

Abstract

Persaingan ketat layanan Over The Top (OTT) di Indonesia menuntut pemahaman terkait kepuasan pengguna sebagai kunci retensi pelanggan. Ulasan Google Play Store menjadi sumber data penting untuk klasifikasi sentimen. Meskipun metode SVM dan Naive Bayes populer untuk klasifikasi, tetapi perbandingan keduanya untuk klasifikasi sentimen layanan OTT masih terbatas. Penelitian ini membandingkan kinerja keduanya untuk klasifikasi ulasan Aplikasi OTT berbahasa Indonesia. Selain itu, dilakukan validasi eksternal terhadap rating Aplikasi untuk mengidentifikasi metode dan rasio data optimal, serta menganalisis korelasi antara kinerja sentimen positif dengan rating tersebut. Tahapan perbandingan dilakukan melalui metode KDD meliputi pengumpulan data, text preprocessing, transformasi data, hingga klasifikasi dengan pengujian pembagian data training dan testing (70:30, 80:20, dan 90:10) untuk mendapatkan model yang optimal. Klasifikasi diuji menggunakan berbagai matrik evaluasi yaitu Akurasi, Presisi, Recall, dan F1-Score. Model optimal kemudian divalidasi menggunakan koefisien korelasi Pearson antara F1-Score sentimen positif dan rating Aplikasi. Hasil kesimpulan dari perbandingan kedua metode menunjukkan bahwa SVM secara konsisten mengungguli Naive Bayes di seluruh skenario pengujian. Model SVM dengan rasio 90:10 adalah model optimal dengan akurasi rata-rata 75%. Model ini kuat pada sentimen negatif (F1-Score=0,91) namun menunjukkan kegagalan kritis pada sentimen netral (F1-Score=0,00). Analisis korelasi Pearson menghasilkan nilai r = 0,538, mengindikasikan adanya korelasi positif sedang antara sentimen positif dengan popularitas aplikasi. Implikasi penelitian ini adalah model optimal ini dapat digunakan sebagai alat Business Intelligence meskipun perlu pengembangan lanjutan untuk mengatasi imbalance data pada kelas netral.
Co-Authors AA Sudharmawan, AA Achmad Syah, Elvandec Rizky Ade Setiyawan Ade Setiyawan Aditya Dwi Jatmiko Aditya Dwi Jatmiko, Aditya Dwi Agung Yusup Nugroho Ali Djamhuri Andri Wahyu Septo Putra Andri Wahyu Septo Putra Andrik Purwasito Anggi Nabila Dwi PuspitaSari Anniez Rachmawati Musslifah Anniez Rachmawati Musslifah Arifin, Akhmad Dakhilul Arsaela Astikasari Astri Charolina Atik Aryani Aziz Jihadian Barid Barid, Aziz Jihadian Bayu Tri Haryanto Cahaya, Annisa Muktining Cholil Jamhari Dahlan Susilo Danang Rifai Deporos, Saprolla Rollie C Destina Paningrum Destina Paningrum, Destina Dhamayanti, Irma Dwi Retnoningsih Erwin Kartinawati Faisah Yuniar Faqih Purnomosidi Firdhaus Hari Saputro Al Haris Firdhaus Hari Syahputra Fitriyadi, Farid Fridhaus Hari Saputro Al haris Hardika Khusnuliawati Hardika Khusnuliawati, Hardika Hastuti, Nurul Indah Puspita Mutiara Ipong Setyawan Irma Dhamayanti Jamhari, Cholil Joko Cahyono Joko Cahyono Keristiawan, Subakti Kristiana, Martha Martha Kristiana Meilina Widiyaningsih Meilina Widiyaningsih Merry Kurnia Happyanto Merry Kurnia Happyanto Minhwa Mella Marsella, Minhwa Mella Muhammad NR Hidayatullah Mutiara, Indah Puspita Nurul Hastuti Peni Pujiastuti Pratiwiyani Pratiwiyani Putra, Andri Wahyu Septo Putra, Yanuar Nur Fajar Ranti Ningsih Sumarni Riskyanto Pangemanan Riskyanto Pangemanan Rusnandari Retno Cahyani Salsabila, Afrida Nur Setiawan, Sukawati Novy Sri Ernawati Sri Ernawati Subakti Keristiawan Sukawati Novy Setiawan Supriyanto . Supriyanto . Suryono . Suryono Suryono Tiyas widiastuti Tri Waluyo Tri Waluyo Tutus Pandam Pradipta Wahyu Nugroho Widiyono . Yanuar Nur Fajar Putra Yanuar Nur Fajar Putra Yosef Chris Bagiyarsa Yosef Chris Bagiyarsa Yudi Wibowo Yuniar, Faisah Yustina Retno Wahyu Utami