Claim Missing Document
Check
Articles

Evaluasi Kinerja Mediapipe Face Detection dan Facenet untuk Pengenalan Wajah dalam Sistem Pengawasan Otomatis Ujian Online Arwani, Issa; Rahayudi, Bayu; Alif Arsan, Danish; Afirianto, Tri; Akbar, Muhammad Aminul
Jurnal Teknologi Informasi dan Ilmu Komputer Vol. 13 No. 5: Oktober 2026
Publisher : Fakultas Ilmu Komputer, Universitas Brawijaya

Show Abstract | Download Original | Original Source | Check in Google Scholar | DOI: 10.25126/jtiik.2026135

Abstract

Ujian daring menghadapi tantangan serius terkait integritas akademik, sehingga diperlukan teknologi pengawasan yang andal. Pengenalan wajah menjadi salah satu solusi potensial untuk memastikan ujian benar-benar dikerjakan oleh peserta yang sah. Penelitian ini bertujuan untuk mengevaluasi kinerja algoritma MediaPipe Face Detection dan FaceNet dalam mendukung sistem pengawasan ujian daring berbasis pengenalan wajah. MediaPipe Face Detection digunakan untuk mendeteksi keberadaan wajah peserta secara real-time, sedangkan FaceNet berperan dalam identifikasi identitas peserta ujian. Penelitian ini menggunakan pendekatan transfer learning, yaitu model FaceNet yang telah ada dilatih ulang dengan data wajah dari peserta penelitian. Data wajah diperoleh dari mahasiswa dengan variasi pose (hadap depan, menoleh, menunduk, tertutup objek) dan jarak (30 cm, 50 cm, 100 cm). Model dilatih pada dua skenario: skenario pertama menggunakan 4 variasi pose per identitas yang menghasilkan 2.016 pasangan triplet, dan skenario kedua menggunakan 8 variasi pose per identitas yang menghasilkan 18.816 pasangan triplet. Untuk data evaluasi, pasangan triplet dipisahkan menjadi 1.932 pasangan positif dan 1.932 pasangan negatif, dengan total 3.864 pasangan. Pada tahap evaluasi model berbasis triplet, akurasi yang dicapai adalah 89,69% (skenario pertama) dan 81,39% (skenario kedua). Sementara itu, dalam pengujian implementasi sistem, pre-trained FaceNet memperoleh akurasi rata-rata 50,41% pada jarak terbaik 30 cm. Setelah dilakukan pelatihan ulang model, akurasinya meningkat menjadi 72,67% pada skenario pertama dan 68,84% pada skenario kedua. Hasil ini menegaskan bahwa transfer learning secara signifikan meningkatkan performa dibandingkan pre-trained FaceNet, meskipun variasi jarak dan pose wajah tetap mempengaruhi akurasi.   Abstract Online examinations pose serious challenges to academic integrity, requiring reliable monitoring technologies. Facial recognition offers a potential solution to ensure that only authorized participants take the test. This study evaluates the performance of MediaPipe Face Detection and FaceNet in supporting a face-recognition–based online exam monitoring system. MediaPipe is used for real-time face detection, while FaceNet identifies participants’ identities through a transfer learning approach. Facial data were collected from students under varying poses (frontal, side, downward, occluded) and distances (30 cm, 50 cm, 100 cm). Two training scenarios were applied: four pose variations (2,016 triplets) and eight pose variations (18,816 triplets). The triplet-based evaluation achieved 89.69% and 81.39% accuracy for the two scenarios, respectively. System testing showed that transfer learning improved accuracy from 50.41% (pre-trained) to 72.67% and 68.84%. These results demonstrate that transfer learning substantially enhances recognition performance, although distance and pose variability remain critical factors affecting accuracy.
Co-Authors Abdullah Harits Abdurrahim, Ahmad Azmi Abhiram, Muhammad Tegar Achmad Choirur Roziqin Achmad Ridok Adam Hendra Brata Ade Wahyu Muntizar Adi Mashabbi Maksun Adi Maulana Rifa'i Adi, Tri Adinda Putri, Lintang Gladyza Adinugroho, Sigit Aditya Septadaya Aditya, Nathanael Chandra Afif Ridhwan Ageng Wibowo Agus Wahyu Widodo Agus Wahyu Widodo, Agus Wahyu Ahmad Afif Supianto Ahmada Bastomi Wijaya Ajinoto, Muhammad Satrio Akbar, Muhammad Aminul Aldi Bagus Sasmita Aldous Elpizochari Alfarisi, Raihan Alfian Reza Pahlevi Alif Arsan, Danish Alip Setiawan Allifira Andara Hasna Alvian Akmal Nabhan Amaliah Gusfadilah Andhi Surya Wicaksana Andrew Prakoso, Aditya Andro Subagio Angga Wahyudi Kurniawan Pratama Anggi Novita Sari Anne Diane Rachmadani Arif Hidayat Arif Indra Kurnia Arina Rufaida Aristides, Joy Vianoktya Arjun Nurdiansyah Arsan, Danish Alif Arsti Syadzwina Fauziah Audia Refanda Permatasari Ayezha Halidar Putri Irwanda Ayuda Dhira Pramadhari Azizullah, Azraf Bachtiar, Harsya Bafagih, Novel Bagas Laksono Bastian Dolly Sapuhtra Basuki, Akbar Lucky Bayu Priyambadha Bisma Anassuka Brillian Aristyo Rahadian Buce Trias Hanggara Budi Darma Setiawan Cahyo Gusti Indrayanto Candra Dewi Candra Dewi Candra Setiawan Chandra, Ardhya Khrisna Christina Sri Ratnaningsih Cindy Cynthia Nurkholis Dahnial Syauqy Daniel Agara Siregar Dany Primanita Kartika Sari Dany Primanita Kartikasari Davia Werdiastu Dayfit Al Rashad, Muhammad Dedy Surya Pradana Dese Narfa Firmansyah Devi Nazhifa Nur Husnina Dhaifa Farah Zhafira Dhimas Wida Syahputra Dhiva Mustikananda Diamanta, Ananda Dian Eka Ratnawati Dian Ratnawati Dian Sisinggih Dimas Adi Syahbani Achmad Putra Djoko Pramono Djoko Pramono Dloifur Rohman Alghifari Dwi H Sulistyarini Dwija Wisnu Brata Dwija Wisnu Brata Dwija Wisnu Brata Dzulkarnain, Tsania Dzulkarnain, Tsania - Edgar Maulana Thoriq Edy Santoso Eko Wahyu Hidayat elfasya, zidane Ellita Nuryandhani Ananti Ema Rosalina Eni Hartika Harahap Fadilah Islamawan, Adam Faiz Abiyandani Faizatul Amalia Fajar Pangestu Faradila Puspa Wardani Faris Febrianto Farizky Novanda Pramuditya Fauzia, Sri Febrina Sarito Sinaga Ferina Kusuma Anjani Ferry Jiwandhono Fitria Yesisca Gagas Budi Waluyo Gani Kharisma Wardana Gilang Pratama Gusti Reza Maulana Haidar Azmi Rabbani Hanggara , Buce Trias Hardyan Zalfi Hariyawan, Afifah Chairunnisa Harris Imam Fathoni Haryuni Siahaan Hayunanda, alanela ganagisarama Heryadi Mochamad Ramdani Hidayati, Chofifa Hilmy Ramadhan, Achmad Zhafran Huda Minhajur Rosyidin Husalie, Levin Vinnu Imam Cholisoddin Imam Cholissodin Imam Cholissodin Immanuel Tri Putra Sihaloho Indriati Indriati Indriati Indriati Indriati, Indriati - Intan Sartika Eris Maghfiroh Irany Windhyastiti Irwan Shofwan Issa Arwani Issa Arwani Isti Rokayah, Iin Ivan Agustinus Jasico Da Comoro Aruan Jaya Mahar Maligan Jefri Hendra Prasetyo Jonemaro, Eriq Muhammad Adams Jumerlyanti Mase K., Anggraeni Dwi Kautsar, Ahmad Izzan Kevin Nastatur Chatriavandi Khairul Rizal Krishna Febianda Ksatria, Willyan Eka Kurnianingtyas, Diva Laila Diana Khulyati Lailil Muflikhah Liwenki Jus'ma Olivia M. Ali Fauzi M. Ali Fauzi M. Attala Reza Syahputra Made Tri Ganesha Madjid, Marchenda Fayza Marji Marji Marpaung, Veronika Oktafia Marwa Mudrikatussalamah Maulana Syahril Ramadhan Hardiono Maulana, M. Ighfar Maulidhia, Abrilian Meriza Nadhira Atika Surya Michael Eggi Bastian Mochammad Ilman Asnada Mohammad Aditya Noviansyah Mohammad Setya Adi Fauzi Mohammad Zahrul Muttaqin Muh. Arif Rahman Muhammad Ferian Rizky Akbari Muhammad Hidayat Muhammad Ikhsan Nur Muhammad Jibril Alqarni Muhammad Kevin Sandryan Muhammad Nadzir Muhammad Nurhuda Rusardi Muhammad Razan Nadhif Muhammad Reza Utama Pulungan Muhammad Shidqi Fadlilah Muhammad Syahputra Muhammad Tanzil Furqon Mukhtar Darma Hidayat, Alif Ahmad Muthia Maharani Muzayyani, Muhammad Farid Nadiah Nur Fadillah Ramadhani Nadya Prabaningtias Najihah, Siti Waheeda Nanang Yudi Setiawan Nanang Yudi Setiawan Nanda Alifiya Santoso Putri Nashihul Ibad Al Amin Niken Hendrakusuma Wardani, Niken Hendrakusuma Nilna Fadhila Ganies Nimas Mayang Sabrina Sunyoto Novanto Yudistira Nur M. F. Dinia Nurfadhilah, Rakhmad Giffari Nuril Haq, Muhammad Nurizal Dwi Priandani Nurul Hidayat Nurul Ihsani Fadilah Obed Manuel Silalahi Panjaitan, RE. Miracle Pascad Wijanata, Ida Bagus Pinem, Gilbert Pinem, Gilbert Aryaduta Prakosa, Wira Zeta Pramudita, Julina Larasati Primayuda, Averil Priscillia Vinda Gunawan Purnomo, Welly Putra Pandu Adikara Putranto, Rezky Donny Putri Ratna Sari Putri, Firda Qhafari, Abi Al Qoid A Fadhlurrahman Rafli, Mohammad Ali Rahinda, Muhammad Abiyyi Ramadhani, T. Zalfa Randy Cahya Wihandika Rani Metivianis Rasif Nidaan Khofia Ahmadah RE. Miracle Panjaitan Reinaldi Guista Pradana Ismail Reiza Adi Cahya Renaldi Muhammad Revan Yosua Cornelius Sianturi Reyhan Dzickrillah Laksmana Reza Aprilliana Fauzi Rheza Raditya Andrianto Rifwan Hamidi Rini Yulianingsih Riswan Septriayadi Sianturi Riza Rizqiana Perdana Putri Rizky Ardiawan Rizky Nuansa Nanda Permana Rohimatus Sholihah Roisul Setiawan Roma Akbar Iswara Rudianto Raharjo Sabila Rasyad, Muhammad Ikram Safa S Istafada Saifurrijaal, Muchammad Salsabila, Dhea Rani Sandi Dewo Rahmadianto Satrio Agung Wicaksono Satrio Hadi Wijoyo Sekeon, Yerobal Gustaf Septriayadi Sianturi, Riswan Setiana, Maya Setiawan, Roisul Shafira Eka Aulia Putri Siti Asmaul Mustaniroh Slamet Thohari Sofi Hidyah Anggraini Sugeng Santoso Sugiarto S Sugiono Sugiono Sukmawati, Annisa Sultan Saladdin Sultan, Muhammad Attharsyah Firdaus Supraptoa Supraptoa Tanica Rakasiwi Tasya Agiyola Teri Kincowati Tibyani Tri Afirianto, Tri Tri Astoto Kurniawan Trias Hanggara, Buce Trio Pamujo Wicaksono Ulva Febriana Umar Basher, Nizar Umu Khouroh Vindhya Tri Widayanti Vivilia Putri Agustin Wahyu Bimantara Wayan Firdaus Mahmudy Welly Purnomo Welly Purnomo Weni Agustina Wenny Ramadha Putri Wibowo, Dhimas Bagus Bimasena Wicaksono, Satrio A. Widhy Hayuhardhika Nugraha Putra Widhy Hayuhardika Nugraha Putra Widodo, Ibnu Sam Widyadhana, Fawwaz Kumudani Wiku Galindra Wardhana Wisnu Brata, Dwija Yahya, Faiz Yesaya Sergio Vito Putranta Yudhi Miqailla, Muhammad Helga Yudi Setiawan, Nanang Yuita Arum Sari Yusuf Afandi Zhafira, Dhaifa Farah