Claim Missing Document
Check
Articles

Rekognisi Bahasa Isyarat Indonesia (BISINDO) Berbasis Long-Short Term Memory Dengan Optimasi Sampling Frame Gunaya, I Wayan; Kesiman, Made Windu Antara; Suputra, Putu Hendra
Jurnal Teknologi Informasi dan Ilmu Komputer Vol 13 No 4: Agustus 2026
Publisher : Fakultas Ilmu Komputer, Universitas Brawijaya

Show Abstract | Download Original | Original Source | Check in Google Scholar | DOI: 10.25126/jtiik.134

Abstract

Bahasa Isyarat Indonesia atau BISINDO merupakan bahasa isyarat yang lahir dari komunitas Tuli yang ada di Indonesia. Gerakan tangan, tubuh, hingga ekspresi wajah merupakan bagian terpenting dalam penggunaan bahasa isyarat. Pada penelitian ini, dilakukan proses rekognisi gerakan bahasa isyarat berdasarkan gerakan tangan, tubuh, dan wajah dengan menggunakan metode LSTM. Dataset yang digunakan merupakan dataset primer yang terdiri dari 100 kosa isyarat yang dibuat berdasarkan dialek Denpasar, Provinsi Bali. Penelitian ini tidak hanya berfokus pada proses rekognisi, tetapi juga mengevaluasi pengaruh variasi jumlah frame terhadap performa model melalui penerapan metode sampling frame. Pemilihan jumlah frame dilakukan dengan memilih representasi frame sebanyak 15, 20, 25, dan 30 frame. Keempat jumlah sampling frame tersebut kemudian dilatih dan diuji pada model LSTM. Hasil penelitian ini menunjukkan hasil sampling frame optimal adalah pada 30 frames yang memperoleh hasil pelatihan dengan nilai loss validasi terkecil pada 7,8% dan hasil pengujian WER terbaik pada 13% jika dibandingkan dengan hasil sampling frame lainnya. Berdasarkan hasil penelitian ini, diharapkan model LSTM yang telah diperoleh dan diimplementasikan ke dalam prototipe sistem dapat digunakan oleh masyarakat umum dalam menjembatani komunikasi masyarakat umum dengan komunitas Tuli serta oleh peneliti selanjutnya dalam pengembangan lebih lanjut proses rekognisi gerakan Bahasa Isyarat Indonesia.   Abstract Indonesian Sign Language or BISINDO is a natural sign language that emerged from the Deaf community in Indonesia. Hand movements, body posture, and facial expressions play essential roles in conveying meaning within sign language communication. In this study, sign language gesture recognition is performed based on hand, body, and facial movements using the Long Short-Term Memory (LSTM) method. The dataset used is a primary dataset consisting of 100 sign vocabulary items constructed based on the Denpasar dialect in Bali Province. This study does not solely focus on the recognition process, but also evaluates the effect of varying the number of frames on model performance through the application of a frame sampling method. The selection of frame quantities was conducted by choosing representative samples of 15, 20, 25, and 30 frames. These four sampling configurations were subsequently trained and tested using an LSTM model. The results of this study indicate that the optimal frame sampling configuration is 30 frames, which achieved the lowest validation loss of 7.8% during training and the best Word Error Rate (WER) of 13% during testing, compared to the other sampling configurations. Based on these findings, it is expected that the LSTM model developed and implemented within a prototype system can be utilized by the general public to help bridge communication between the general public and the Deaf community and by future researchers for the further development of Indonesian Sign Language gesture recognition processes.
Co-Authors A. A. Istri Ita Paramitha Adhi Suarjana, I Kadek Adi Saputra Yasa, I Gede Adi Yoga Dewantara, I Made Adnyana, I Putu Wandra Agung Istri Ariningrat, I Gusti Agus Eka Wilantara, Putu Agus Jayadi Putra, Kadek Agus Kamiana Agus Kristiawan, I Gde Made Agus Nyoman Reditya Ary Prasetya Agus Sutrisna, I Kadek Ajeng Wulandari Pratama Ajiwerdhi, Anak Agung Gde Putra Alfin Nur Anak Agung Gde Putra Ajiwerdhi Ananta Satriadi, Kadek Andika, I Gede Andreana, I Made Dwi Anggara, I Made Dika Ardipa, Gede Sukra Ari Kamelia Dewi, Ni Made Ari Mahendra, I Komang Ari Putra, Ida Bagus Gede Arimbawa, I Gusti Ngurah Putra Arisma Dewi, Komang Ayu Ary Wahyuningsih, Ni Made Ayu Ary Widayanti, Putu Aryasih, Putu Putri Asmara, I Wayan Dana Astuti, Ni Putu Pasek Wida Ayu Nirma Lestari, Gusti Bagus Maha Putra, I Gusti Bunga Anindya, Made Candra Adi Pranata, Gede Chrisnapati, Padma Nyoman Chrisnapati, Padma Nyoman Cipta, I Putu Agus Eka Yatna David Setiawan David Setiawan, David Dessy Seri Wahyuni Dewa Gede Hendra Divayana, Dewa Gede Hendra Dewa Putu Doniawan Dewi, Made Sulatri Dewi, Ni Putu Dita Ariani Sukma Dewi, Ni Putu Sri Indra Padma Doniawan, Dewa Putu Dwi Purniyati, Gusti Ayu Dwi Suparyanta, Kadek Eka Saptaridevi, Ni Luh Endra Wiartika P, I Made Evi Wellyastini, Kadek Fikri Haikal Gd Tuning Somara Putra Gde Angga Putra Sutanjaya Gede Aditra Pradnyana Gede Agus Putra Yasa Gede Candra Adi Pranata Gede Indrawan Gede Saindra Santyadiputra Gede Saindra Santyadiputra, Gede Saindra Gede Sukra Ardipa Gede Widiartana Yasa Gunaya, I Wayan Gusti Ayu Dwi Purniyati Gusti Ayu Nirma Lestari Hady Permana S, Putu Trisna Haryantara, I Nyoman I DEWA AYU MADE SARTINI I Gde Made Agus Kristiawan I Gede Adi Saputra Yasa I Gede Adi Saputra Yasa I Gede Agus Pebriana I Gede Aris Gunadi I Gede Arya Sudarmayana I Gede Bendesa Subawa I Gede Bintang Arya Budaya I Gede Ditatara Krisna I Gede Hendrayana I Gede Kesumayudha Widiana I Gede Mahendra Darmawiguna I Gede Rusdy Mahayana Putra I Gede Sastra Kurniawan I Gede Sudirta I Gede Sudirta, I Gede I Gede Sudirtha I Gusti Agung Istri Ariningrat I Gusti Ayu Agung Diatri Indradewi I Gusti Bagus Maha Putra I Gusti Ngurah Bagus Putra Asmara I Kadek Adhi Suarjana I Kadek Agus Sutrisna I Kadek Yostab Mariyantoni I Ketut Resika Arthana I km. Lanang Oka Wiryawan I Komang Ari Mahendra I Komang Hendra Trinium Jaya I Made Adi Yoga Dewantara I Made Agus Wirahadi Putra I Made Angga Darma Putra I Made Ardwi Pradnyana I Made Arya Riananda Putra I Made Dika Anggara I Made Dwi Andreana I Made Endra Wiartika P I Made Gede Sunarya I Made Putrama I Made Restu Arta Jaya I Made Yoga Yudisthira Sandra I Md. Dendi Maysanjaya I Nengah Eka Mertayasa I Nyoman Haryantara I Putu Agus Eka Yatna Cipta I Putu Gede Karwina Styawan I Putu Sujana Atmaja I PUTU WANDRA ADNYANA I Putu Wira Adnyana I Wayan Dana Asmara I Wayan Pandu Wibawa S I Wayan Pio Pratama Ida Ayu Putu Purnami Ida Ayu Widiyanthi Ida Bagus Gede Ari Putra Ida Bagus Jyotisananda Ida Bagus Redy Santiawan Ida Purnamasari, Putu Ika Hendriana, Komang Indradewi, Gusti Ayu Agung Diatri Intan Pebriyanti Jaya, I Made Restu Arta Juliawan, Komang Gede Satria Kaban, Ekinnisura Kadek Agus Jayadi Putra Kadek Agus Risda Sanjaya Kadek Ananta Satriadi Kadek Dwi Suparyanta Kadek Evi Wellyastini Kadek Wikan Paramasila Kadek Yota Ernanda Aryanto Kamiana, Agus Karwina Styawan, I Putu Gede Ketut Agustini Ketut Gede Widia Pratama Putra Ketut Satria Ketut Tri Sutrisna Oka Ketut Widiantara Komang Ayu Arisma Dewi Komang Gede Satria Juliawan Komang Ika Hendriana Komang Jepri Kusuma Jaya Komang Setemen Komang Sudana Yasa Pande Komang Sudana Yasa Pande Kurniansyah, Adrian Lanang Nugraha, Made Luh Putu Eka Damayanthi Luh Putu Eka Damayanthi Luh Sri Darmaningsih M.Cs S.Kom I Made Agus Wirawan . Made Bunga Anindya Made Lanang Nugraha Made Sulatri Dewi Mahendri Pramadewi, Pande Made Mariyantoni, I Kadek Yostab Maryati, Ni Made Rai Maryati, Ni Made Rai Mika Karmila, Ni Komang Natih, I Dewa Gede Agung Wibhisana Ni Kadek Pande Dwika Liona Ni Komang Diani Ni Komang Mika Karmila Ni Komang Oktari Permata Sari Ni Komang Sriasih Ni Luh Kadek Tristiana Pratiwi Ni Luh Nita Sari Ni Luh Putu Kurniawati Ni Made Ari Kamelia Dewi Ni Made Ayu Ary Wahyuningsih Ni Made Rai Maryati Ni Made Yeni Dwi Rahayu Ni Putu Bali Pratiwi Ni Putu Pasek Wida Astuti Nining Rahayuningsih Niti, Made Ayu Asri Nugrahini, Ni Putu Prita Nur, Alfin Nyoman C, Padma Nyoman C, Padma Nyoman Chrisnapati, Padma Nyoman Juli Budiartawan Nyoman Sugihartini Oka Wiryawan, I km. Lanang Oky Sanjaya, Kadek P. WAYAN ARTA SUYASA Padama Nyoman Crisnapati Padma Nyoman C Padma Nyoman Chrisnapati Padma Nyoman Crisnapati Padma Nyoman Crisnapati Pande Dwika Liona, Ni Kadek Pande Made Mahendri Pramadewi Pandu Wibawa S, I Wayan Pebriana, I Gede Agus Pebriyanti, Intan Permana S, Putu Trisna Hady Pramadewi, Pande Made Mahendri Pratama, Putu Gilang Pratiwi, Ni Putu Bali Prianka Vedanty, Putu Pusparani, Diah Ayu Putra Yasa, Gede Agus Putra, Gd Tuning Somara Putra, Kadek Agus Jayadi Putu Agus Eka Wilantara Putu Angga Sudyatmika Putu Ary Widayanti Putu Ayu Puspitawati Putu Hendra Suputra Putu Ida Purnamasari Putu Putri Aryasih Putu Soni Ermawati Putu Trisna Hady Permana S Putu Yuditia Riani Putu Yuli Krisnawati Putu Zasya Eka Satya Nugraha Rahayuningsih, Nining rahmi, rugayatur Reditya Ary Prasetya, Agus Nyoman Redy Santiawan, Ida Bagus Rinaldi Munir rugayatur rahmi Saputri, Tesya Saragih, Andi Siaputra Sari, Ni Luh Nita Sariyasa . Sartini, I Dewa Ayu Made Sastra Kurniawan, I Gede Satria Juliawan, Komang Gede Satria, Ketut Selvina Rinesti Sindu, I Gede Partha Soni Ermawati, Putu Sri Darmaningsih, Luh Sriasih, Ni Komang Sudarmayana, I Gede Arya Sujaya, Made Agus Panji Sulatri Dewi, Made Sumantara, I Gusti Lanang Trisna Suputra, I Komang Hery Abdi Surya Diputra, I Gusti Nyoman Anton Surya, I Putu Bayu Ananta Sutanjaya, Gde Angga Putra Sutrisna Oka, Ketut Tri Taufik Ismail Taufik Ismail Tristiana Pratiwi, Ni Luh Kadek Wiartika P, I Made Endra Widiantara, Ketut Widiantara, Ketut Widiyanthi, Ida Ayu Wikan Paramasila, Kadek Winaya, Ayu Nyoman Waisantini Wira Adnyana, I Putu Wismawan, Komang Hendra Wulandari Pratama, Ajeng Yasa, Gede Widiartana Yoga Yudisthira Sandra, I Made Yogi Aditya Yostab Mariyantoni, I Kadek Yuditia Riani, Putu Yuli Krisnawati, Putu