Jurnal Pengembangan Teknologi Informasi dan Ilmu Komputer
Vol 9 No 11 (2025): November 2025

Sistem Deteksi Emosi Menggunakan Face Recognition Berbasis Landmark dan CNN-Resnet Pada Sesi Bimbingan Konseling

Ramadhani, Aryo Sheva (Unknown)
Putri, Rekyan Regasari Mardi (Unknown)
Prasetio, Barlian Henryranu (Unknown)



Article Info

Publish Date
08 Jan 2026

Abstract

Tingginya masalah kesehatan mental di era digital dan terbatasnya psikolog profesional di Indonesia menyebabkan banyak instansi, termasuk universitas, menyediakan layanan konseling dengan konselor non-psikolog, yang seringkali mengakibatkan diagnosis emosi kurang akurat. Penelitian ini mengusulkan sistem deteksi emosi berbasis face recognition menggunakan arsitektur Convolutional Neural Network-Residual Network (CNN-ResNet) pada Raspberry Pi untuk membantu konselor menginterpretasi kondisi emosional klien secara objektif. Penelitian ini mengadopsi desain implementasi-perancangan dengan fokus pada pemantauan kondisi emosi melalui deteksi landmark wajah menggunakan Media Pipe Face Mesh pada data sekunder Cohn-Kanade Dataset (CK+) yang dinormalisasi dan augmentasi, serta dibagi ke dalam tiga skenario rasio training-testing (90:10, 80:20, 70:30). Hasil pengujian efektivitas model menunjukkan rasio split data 80:20 memberikan kinerja optimal dengan akurasi model mencapai 95%, meskipun masih mengalami tantangan dalam mengklasifikasikan emosi "sedih" dan "hina" karena jumlah data yang sedikit dan kemiripan fitur dengan emosi "netral". Pengujian sistem secara keseluruhan pada Raspberry Pi menghasilkan akurasi 33,75% menggunakan data sekunder dan 41,49% pada skenario simulasi bimbingan konseling dengan data primer, menunjukkan potensi sistem sebagai alat bantu awal yang memerlukan pengembangan lebih lanjut.

Copyrights © 2025






Journal Info

Abbrev

j-ptiik

Publisher

Subject

Computer Science & IT Control & Systems Engineering Education Electrical & Electronics Engineering Engineering

Description

Jurnal Pengembangan Teknlogi Informasi dan Ilmu Komputer (J-PTIIK) Universitas Brawijaya merupakan jurnal keilmuan dibidang komputer yang memuat tulisan ilmiah hasil dari penelitian mahasiswa-mahasiswa Fakultas Ilmu Komputer Universitas Brawijaya. Jurnal ini diharapkan dapat mengembangkan penelitian ...