Prosiding Seminar Nasional Teknologi Informasi dan Bisnis
Prosiding Seminar Nasional Teknologi Informasi dan Bisnis (SENATIB) 2026

Pengembangan Sistem Monitoring Emosi Berbasis Facial Expression Recognition Menggunakan Algoritma MTCNN dan MobileNetV2

Sarah Ika Puspita Arum (Teknik Informatika/Ilmu Komputer, Universitas Duta Bangsa)
Febrian Sulistyo Budi (Teknik Informatika/Ilmu Komputer, Universitas Duta Bangsa)
Jauza Kenar Indra Fawaid (Teknik Informatika/Ilmu Komputer, Universitas Duta Bangsa)
Alfiyah Febrianti (Teknik Informatika/Ilmu Komputer, Universitas Duta Bangsa)
Kevin De Rafael Rio Aryanto (Teknik Informatika/Ilmu Komputer, Universitas Duta Bangsa)
Ilham Yusuf Faturochman (Teknik Informatika/Ilmu Komputer, Universitas Duta Bangsa)



Article Info

Publish Date
25 Jul 2026

Abstract

Gangguan kesehatan mental menjadi salah satu permasalahan global yang terus meningkat, sementara keterbatasan tenaga profesional menyebabkan proses pemantauan kondisi emosional belum dapat dilakukan secara optimal. Penelitian ini bertujuan mengembangkan sistem Monitoring Kondisi Emosi Pengguna berbasis Artificial Intelligence (AI) menggunakan metode Facial Expression Recognition (FER) untuk membantu pemantauan emosi secara otomatis dan real-time. Sistem memanfaatkan algoritma Multi-task Cascaded Convolutional Networks (MTCNN) untuk mendeteksi wajah dan model MobileNetV2 untuk mengklasifikasikan ekspresi wajah ke dalam tujuh kategori emosi, yaitu angry, disgust, fear, happy, neutral, sad, dan surprise. Model dilatih menggunakan dataset FER-2013 yang terdiri dari 35.887 citra wajah, kemudian diimplementasikan pada aplikasi berbasis webcam. Hasil evaluasi menunjukkan bahwa model memperoleh akurasi sebesar 41%, dengan weighted precision sebesar 45%, weighted recall sebesar 41%, dan weighted F1-score sebesar 40%. Pengujian implementasi menunjukkan bahwa sistem mampu mendeteksi wajah, melakukan klasifikasi emosi secara otomatis, serta menampilkan hasil prediksi beserta tingkat kepercayaannya (confidence score) secara real-time. Penelitian ini menunjukkan bahwa kombinasi metode FER, algoritma MTCNN, dan model MobileNetV2 dapat diterapkan sebagai solusi awal untuk mendukung monitoring kondisi emosi pengguna secara otomatis. Pengembangan lebih lanjut diperlukan untuk meningkatkan akurasi model melalui optimasi algoritma, penambahan dataset, dan penyempurnaan proses pelatihan.

Copyrights © 2026






Journal Info

Abbrev

Senatib

Publisher

Subject

Computer Science & IT Control & Systems Engineering Decision Sciences, Operations Research & Management Economics, Econometrics & Finance Electrical & Electronics Engineering Engineering Industrial & Manufacturing Engineering Mechanical Engineering Physics

Description

Prosiding SENATIB adalah kegiatan seminar berskala nasional yang diselenggarakan oleh Fakultas Ilmu Komputer Universitas Duta Bangsa Surakarta dalam rangka diseminasi hasil penelitian tentang teknologi informasi dan bisnis. Diharapkan pada tahun 2022 melalui penerbitan prosiding ini dapat terwujud ...