Claim Missing Document
Check
Articles

Perbandingan Kinerja Klasifikasi Sentimen Ulasan Aplikasi Over the Top di Google Play Store Tutus Pandam Pradipta; Sri Huning Anwariningsih; Dahlan Susilo
CESS (Journal of Computer Engineering, System and Science) Vol. 11 No. 1 (2026): Januari 2026
Publisher : Universitas Negeri Medan

Show Abstract | Download Original | Original Source | Check in Google Scholar | DOI: 10.24114/cess.v11i1.70832

Abstract

Persaingan ketat layanan Over The Top (OTT) di Indonesia menuntut pemahaman terkait kepuasan pengguna sebagai kunci retensi pelanggan. Ulasan Google Play Store menjadi sumber data penting untuk klasifikasi sentimen. Meskipun metode SVM dan Naive Bayes populer untuk klasifikasi, tetapi perbandingan keduanya untuk klasifikasi sentimen layanan OTT masih terbatas. Penelitian ini membandingkan kinerja keduanya untuk klasifikasi ulasan Aplikasi OTT berbahasa Indonesia. Selain itu, dilakukan validasi eksternal terhadap rating Aplikasi untuk mengidentifikasi metode dan rasio data optimal, serta menganalisis korelasi antara kinerja sentimen positif dengan rating tersebut. Tahapan perbandingan dilakukan melalui metode KDD meliputi pengumpulan data, text preprocessing, transformasi data, hingga klasifikasi dengan pengujian pembagian data training dan testing (70:30, 80:20, dan 90:10) untuk mendapatkan model yang optimal. Klasifikasi diuji menggunakan berbagai matrik evaluasi yaitu Akurasi, Presisi, Recall, dan F1-Score. Model optimal kemudian divalidasi menggunakan koefisien korelasi Pearson antara F1-Score sentimen positif dan rating Aplikasi. Hasil kesimpulan dari perbandingan kedua metode menunjukkan bahwa SVM secara konsisten mengungguli Naive Bayes di seluruh skenario pengujian. Model SVM dengan rasio 90:10 adalah model optimal dengan akurasi rata-rata 75%. Model ini kuat pada sentimen negatif (F1-Score=0,91) namun menunjukkan kegagalan kritis pada sentimen netral (F1-Score=0,00). Analisis korelasi Pearson menghasilkan nilai r = 0,538, mengindikasikan adanya korelasi positif sedang antara sentimen positif dengan popularitas aplikasi. Implikasi penelitian ini adalah model optimal ini dapat digunakan sebagai alat Business Intelligence meskipun perlu pengembangan lanjutan untuk mengatasi imbalance data pada kelas netral.
Co-Authors ., palgunadi A.A. Ketut Agung Cahyawan W Abdush Shomad, Abdush Achmad Syah, Elvandec Rizky Aditya Dwi Jatmiko, Aditya Dwi Agung Nurmansyah Agus Purwo Handoko Akhmad Syukron Al Haris, Firdhaus Hari Saputra Amri Eka Widayanto Angga Kusuma Dawami Angky Sudarmono, Angky Anwariningsih , Sri Huning Ari Wibowo Ari Wibowo Arif Yulianto Arif Yuliyanto Ariwibowo, Heru Ashsidiq, Muhammad Fadhlan Ravi Astri Charolina Bayu Tri Haryanto Budi Prabowo Cristya, Arkha Destina Paningrum Dwi Retnoningsih Erwin Kartinawati Firdhaus Hari Saputro Al Haris Firdhaus Hari Syahputra Fiska Kusuwawati Fitriani, Nisa Fitriyadi, Farid Hadi Pratikno Hardika Khusnuliawati, Hardika Harry Abri Anto Henny Tri Hastuti Hasana Heri Kusharyanto Heribertus Ary Setyadi Indah Puspita Mutiara Indriastiningsih, Erna Iqbal Aditya Ferryanto Joko Cahyono Keristiawan, Subakti Khoirul Huda Kristiawan, Ade Kuncoro, Isnu Kusuwawati, Fiska Lina Sulistyani Mochtar Yunianto Muhammad Arya Priasatama Putra Muhammad Dwi Nugroho Muhammad Dwi Nugroho Muhammad NR Hidayatullah Murni Murni Mutiara, Indah Puspita nisa fitriani Norman Duma Sitinjak Nugroho, Moh Andi Setyo Nurul Pradana Ratmawati Omega, Yuseva Kristine Palgunadi . Permana, Tatok Andri Pranowo Setiaji Pratikno, Hadi Prawesti, Nindia Fika Rizky Purnama, Christian Roy Putra, Adi Wijaya Putra, Muhammad Arya Priasatama Ratmawati, Nurul Pradana Retnoningsih , Dwi Riskyanto Pangemanan Role, Vinsensius Sony rudi pranoto, rudi Rusnandari Retno Cahyani Ruswanti, Diyah Salsabila, Afrida Nur Salsabila, Unik Hanifah Setiawan, Gigih Setiawan, Sukawati Novy Siti Zubaidah Sri Ernawati Sri Huning Anwariningsih Sukawati Novy Setiawan Sulistyani, Lina Supriyanta Supriyanta Supriyanta Supriyanta Tutus Pandam Pradipta Vinsensius Sony Role Wahyudi . Wahyuningsih, Dwi Prastiwi Wawan Nugroho Widayanto, Amri Eka Yunitasari, Veronica Sri Yusuf Sutanto