Innovative: Journal Of Social Science Research
Vol. 4 No. 5 (2024): Innovative: Journal Of Social Science Research

Penerapan Mediapipe dalam Pengenalan Bisindo Berbasis Deep Learning dan Computer Vision (Studi Kasus: SLB-C B Yayasan Pendidikan Luar Biasa (YPLB) Blitar)

Ahwani, Didik Kholidil (Unknown)
Budiman, Saiful Nur (Unknown)
Rahmat, Mohammad Faried (Unknown)



Article Info

Publish Date
22 Sep 2024

Abstract

Di Indonesia, komunikasi antara komunitas Tuli dengan masyarakat umum sering kali terhambat oleh perbedaan bahasa, khususnya Bahasa Isyarat Indonesia (BISINDO). Penelitian ini memanfaatkan teknologi kecerdasan buatan, khususnya Convolutional Neural Networks (CNN) dalam platform MediaPipe, untuk meningkatkan pengenalan huruf-huruf dalam BISINDO melalui analisis gerakan tangan. Pendekatan ini bertujuan untuk mengurangi jurang komunikasi dengan memungkinkan interpretasi yang lebih baik terhadap gerakan kompleks dalam BISINDO. Metode penelitian ini melibatkan pengembangan dan evaluasi model CNN menggunakan MediaPipe untuk mengenali gerakan isyarat tangan. Pengukuran kinerja model dilakukan menggunakan Confusion matrix, dengan hasil akurasi mencapai 94% selama pelatihan dan 78,46%pada pengujian real-time. Hasil ini menunjukkan bahwa model berhasil mengklasifikasikan gerakan tangan dengan baik dalam kondisi ideal maupun di lingkungan dunia nyata. Penelitian ini memberikan kontribusi dalam mengembangkan solusi teknologi untuk mendukung komunikasi inklusif bagi komunitas Tuli, dengan potensi untuk diterapkan dalam aplikasi pengenalan bahasa isyarat dan teknologi asistensi lainnya.

Copyrights © 2024






Journal Info

Abbrev

Innovative

Publisher

Subject

Humanities Computer Science & IT Law, Crime, Criminology & Criminal Justice Public Health Other

Description

Innovative: Journal Of Social Science Research is a journal managed by Universitas Pahlawan Tuanku Tambusai which bridges researchers to publish research results in all scientific fields (multidiscipline). This includes the fields of education, health, law, economics, IT (Informatics Engineering), ...