JATI (Jurnal Mahasiswa Teknik Informatika)
Vol. 8 No. 1 (2024): JATI Vol. 8 No. 1

PENGENALAN BAHASA ISYARAT INDONESIA (BISINDO) MENGGUNAKAN ALGORITMA SCALE INVARIANT FEATURE TRANSFORM (SIFT) DAN CONVOLUTIONAL NEURAL NETWORK (CNN)

Widya Agata, Ayu (Unknown)
S J Saputra, Wahyu (Unknown)
Aji Putra, Chrystia (Unknown)



Article Info

Publish Date
27 Mar 2024

Abstract

Bahasa isyarat berperan penting sebagai media komunikasi bagi tuna rungu dan tuna wicara. Namun, keterbatasan pemahaman masyarakat umum terhadap bahasa isyarat menjadi hambatan dalam interaksi dengan mereka. Untuk mengatasi masalah ini, dirancang suatu sistem pengenalan bahasa isyarat yang dapat membantu masyarakat umum berkomunikasi dengan mudah. Sistem ini mengenali alfabet Bahasa Isyarat Indonesia (BISINDO) dengan menggabungkan algoritma Scale Invariant Feature Transform (SIFT) dan Convolutional Neural Network (CNN). Pendekatan ini dipilih karena SIFT digunakan untuk ekstraksi fitur awal, sementara CNN untuk mengenali pola yang kompleks, meningkatkan kekuatan model terhadap variasi gerakan dan pencahayaan dalam bahasa isyarat. Dengan menggunakan algoritma SIFT dan CNN gerakan tangan Bahasa isyarat indonesia dapat diperoleh, dicocokkan, dikenali, diautentikasi dan kinerja pencocokannya disimulasikan menggunakan library tersorflow dan OpenCV. Dalam penelitian, beberapa gerakan memerlukan percobaan berulang untuk deteksi yang akurat, mengingat kemiripan dengan gerakan bahasa isyarat lain. Meskipun demikian, akurasi tertinggi tercapai pada model dengan nilai epoch 55, mencapai 99.78%. Dengan demikian, integrasi algoritma SIFT dan CNN dalam sistem pengenalan bahasa isyarat dapat menjadi solusi efektif untuk mengatasi hambatan komunikasi antara tuna rungu, tuna wicara, dan masyarakat umum.

Copyrights © 2024






Journal Info

Abbrev

jati

Publisher

Subject

Computer Science & IT

Description

Adalah jurnal mahasiswa yang diterbitkan oleh Teknik Informatika Institut Teknologi Nasional Malang, sebagai media publikasi hasil Skripsi Mahasiswa Teknik Informatika ke khalayak luas, diterbitkan secara berkala 6 kali setahun pada bulan Februari, April, Juni, Agustus, Oktober, ...