Jurnal Pengembangan Teknologi Informasi dan Ilmu Komputer
Vol 10 No 4 (2026): April 2026

Analisis Sentimen Pada Aplikasi AstraPay Menggunakan Karakteristik Quality in UseĀ (Freedom from Risk & Efficiency) Berdasarkan Ulasan Pengguna

Al-Hafidz, Jundullah (Unknown)
Setiawan, Nanang Yudi (Unknown)
Pramono, Djoko (Unknown)



Article Info

Publish Date
25 Feb 2026

Abstract

Ulasan pengguna krusial untuk evaluasi aplikasi finansial seperti AstraPay, sehingga memerlukan analisis granular. Penelitian ini menerapkan Aspect-Based Sentiment Analysis (ABSA) untuk menganalisis sentimen pada karakteristik ISO/IEC 25010 Quality in Use: Efisiensi dan Keamanan. Penelitian ini mengukur dampak kinerja dari proses fine-tuning pada model IndoBERT dibandingkan dengan pendekatan baseline zero-shot. Validitas evaluasi dijamin oleh dataset ground truth yang dibangun melalui metode ensemble majority voting hibrid, yang mengintegrasikan sistem aturan, LLM, dan anotator manusia. Hasil penelitian menunjukkan bahwa pendekatan zero-shot memiliki kinerja yang tidak dapat diandalkan. Sebaliknya, setelah fine-tuning, model mengalami peningkatan kinerja transformatif, dengan metrik F1-Score (macro average) meningkat sebesar 121.88% untuk klasifikasi aspek (dari 0.32 menjadi 0.71) dan 136.84% untuk klasifikasi sentimen (dari 0.38 menjadi 0.90). Temuan ini membuktikan bahwa fine-tuning merupakan langkah esensial untuk mengadaptasi model bahasa guna membangun sistem ABSA yang akurat dan fungsional pada domain spesifik.

Copyrights © 2026






Journal Info

Abbrev

j-ptiik

Publisher

Subject

Computer Science & IT Control & Systems Engineering Education Electrical & Electronics Engineering Engineering

Description

Jurnal Pengembangan Teknlogi Informasi dan Ilmu Komputer (J-PTIIK) Universitas Brawijaya merupakan jurnal keilmuan dibidang komputer yang memuat tulisan ilmiah hasil dari penelitian mahasiswa-mahasiswa Fakultas Ilmu Komputer Universitas Brawijaya. Jurnal ini diharapkan dapat mengembangkan penelitian ...