p-Index From 2021 - 2026
16.207
P-Index
This Author published in this journals
All Journal TEKNIK INFORMATIKA Sainteks Jurnal Pseudocode SMATIKA Jurnal Ilmiah KOMPUTASI Sistemasi: Jurnal Sistem Informasi Jurnal Informatika JURNAL MEDIA INFORMATIKA BUDIDARMA InComTech: Jurnal Telekomunikasi dan Komputer Jurnal SOLMA Prosiding Seminar Nasional Teknoka Dinamisia: Jurnal Pengabdian Kepada Masyarakat SELAPARANG: Jurnal Pengabdian Masyarakat Berkemajuan JURNAL INSTEK (Informatika Sains dan Teknologi) Jurnal Sisfokom (Sistem Informasi dan Komputer) MATRIK : Jurnal Manajemen, Teknik Informatika, dan Rekayasa Komputer IJID (International Journal on Informatics for Development) JURIKOM (Jurnal Riset Komputer) JIPI (Jurnal Ilmiah Penelitian dan Pembelajaran Informatika) Jurnal Linguistik Komputasional Jurnal ICT : Information Communication & Technology Building of Informatics, Technology and Science FIKROH: JURNAL PEMIKIRAN DAN PENDIDIKAN ISLAM Jurnal Teknologi Dan Sistem Informasi Bisnis Zonasi: Jurnal Sistem Informasi Jurnal Informatika dan Rekayasa Perangkat Lunak Jurnal Asiimetrik: Jurnal Ilmiah Rekayasa Dan Inovasi JOURNAL OF INFORMATION SYSTEM RESEARCH (JOSH) Jurnal Sistem Komputer dan Informatika (JSON) Infotech: Journal of Technology Information Jurnal Pengabdian kepada Masyarakat Nusantara Jurnal Teknik Informatika (JUTIF) KLIK: Kajian Ilmiah Informatika dan Komputer Sibatik Journal : Jurnal Ilmiah Bidang Sosial, Ekonomi, Budaya, Teknologi, Dan Pendidikan Jurnal Minfo Polgan (JMP) Jurnal Penyuuhan dan Pemberdayaan Masyarakat (JPPM) Journal of Computers and Digital Business STORAGE: Jurnal Ilmiah Teknik dan Ilmu Komputer SmartComp Fikroh: Jurnal Pemikiran dan Pendidikan Islam JURNAL TEKNIK INFORMATIKA DAN KOMPUTER Kesatria : Jurnal Penerapan Sistem Informasi (Komputer dan Manajemen) SAMBARA: Jurnal Pengabdian Kepada Masyarakat Cosmic Jurnal Teknik Journal of Informatics and Advanced Computing BHAKTI JIVANA Smatika Jurnal : STIKI Informatika Jurnal DIGINTEL-AI : DIGital INnovation and inTELligence – AI TEKNOSAINS: Jurnal Sains, Teknologi dan Informatika
Claim Missing Document
Check
Articles

Pengenalan BISINDO Berbasis MediaPipe dengan Transformer Encoder, Long Short-Term Memory, Connectionist Temporal Classification, dan Text-to-Speech Adellia, Elvina; Hasan, Firman Noor
Jurnal INSTEK (Informatika Sains dan Teknologi) Vol 11 No 2 (2026): OCTOBER
Publisher : Department of Informatics Engineering, Faculty of Science and Technology, Universitas Islam Negeri Alauddin, Makassar, Indonesia

Show Abstract | Download Original | Original Source | Check in Google Scholar | DOI: 10.24252/instek.v11i2.69940

Abstract

Perbedaan pemahaman antara pengguna Bahasa Isyarat Indonesia (BISINDO) dan masyarakat yang belum menguasainya masih menghambat komunikasi. Penelitian ini bertujuan mengembangkan prototipe pengenalan 15 kosakata atau frasa dasar BISINDO secara real-time dengan keluaran teks dan suara. Dataset terdiri atas 4.500 sequence yang direkam oleh satu peraga isyarat, yaitu peneliti sendiri. Sistem menggunakan MediaPipe untuk mengambil landmark tangan dan tubuh. Fitur koordinat dan velocity disusun menjadi sequence 30 frame, kemudian diproses menggunakan model Transformer Encoder dan LSTM. Hasil prediksi diolah menggunakan CTC dan Levenshtein Distance, ditampilkan melalui Streamlit, dan diubah menjadi suara dengan Text-to-Speech. Evaluasi dilakukan pada 450 sequence yang juga digunakan sebagai data validasi. Hasilnya menunjukkan accuracy 95,56%, precision 95,53%, recall 95,57%, F1-score 95,55%, dan CER 4,00%. Pada pengujian real-time, akurasi mencapai 92,00% pada jarak ±100 cm, 92,67% pada pencahayaan terang, dan 92,67% pada posisi kamera lurus. Namun, akurasi turun menjadi 65,33% pada jarak jauh, 81,33% pada pencahayaan redup, dan 78,00% pada posisi serong. Hasil penelitian masih terbatas pada kosakata, peraga isyarat, dan kondisi pengujian yang digunakan.
Co-Authors Abdillah, Allif Rizki Abdul Syakir Achmad Ramadhan Achmad Sufyan Aziz Adellia, Elvina Adrian Muharianto Afandi, Irfan Ricky Affandi, Irfan Ricky Afikah, Prista Afnan Sabili, Dian Ainurrafik Agus Fikri Agus Fikri Ahmad Rizal Dzikrillah Ahmad Rizal Dzikrillah Ahmad Roshid Ahmad Syahril Ahmad Syahril Al Ghozi, Dhiyauddin Aldini, Mizan Aldini Alfandi Safira Alim, Endy Sjaiful Allif Rizki Abdillah Allif Rizki Abdillah Allif Rizki Abdillah Ammar Rusydi Ananda Prasta Warasati Janah Ananda, Ridha Faiz Andika Saputra Andriyani, Widyastuti Anhari, Tirta Anwar Hidayat Ari Wibowo Arief Wibowo Arien Bianingrum Rossianiz Arvin Rafialdo Aulia, Muhammad Fathan Avorizano, Arry Azhar Haikal Anwar Azhar Haikal Anwar Azis Styo Nugroho Bagas Kembar Rezkyllah Bahrul Rozak Bahrul Rozak Bisma Indrawan Dan Mugisidi Dandie Triyanto Desty Afni Dewi Mayangsari Dian Ainurrafik Afnan Sabili Dian Ainurrafik Afnan Sabili Diana Fitri Lessy Diana Fitri Lessy Dimas Febriawan Dimas Febriawan Dimas Febriawan Dion Parisda Ray Djeli Moh Yusuf Doni Gunawan Rambe E Erizal Erizal Erizal Estu Sinduningrum Estu Sinduningrum Fachri Zaini Fadli Al Gani Fadli Hardiyanto Putra Fadli, Khairul Faisal Parsakh Nursyamsi Faisal Parsakh Nursyamsyi Fajar Sidik Faldy Irwiensyah Faldy Irwiensyah Faldy Irwiensyah, Faldy Farhan Bias Purnama Putra Farhan Nufairi Farhan Nufairi Fathurrohman, Sewin Fauzan Setya Ananto Fauzi Kurniawan Fayakun Kun Febriandirza, Arafat Febriawan, Dimas Fikri, Agus Gusnul Mahesa Hafizh Dhery Al Assyam Hana, Muhammad Yusril Handika, Yusuf Hanif, Isa Faqihuddin Hazbi Santoso Hibatullah Faisal Hibatullah Faisal Hibatullah Faisal Hilmi Ammar Hilmy Zhafran Muflih I Ketut Sudaryana, I Ketut Ibnu Suhada Iin Nurul Latifah Indra Ramadhan Indra Ramadhan Indriyanti, Prastika Ine Rahayu Purnamaningsih Intan Diah Hardyatman Intania Widyaningrum Irawati Irawati Irfan Ricky Afandi Irfan Ricky Affandi Irma Wahyuningtyas Irwansyah Irwansyah Irwansyah Isa Faqihuddin Hanif Isnan Wisnu Prastiyo Januar, Rudolf Kamayani, Mia kivandi Nugroho Krisna, Mohammad Dito Dwi Kurniyati Nur Lathifah Dini Rachmawati Lingga Lingga Lingga Lita Astri Pramesti Lulu Nadira Slamat Luqman Abdur Rahman Malik Lutfi Triyuli Evana Rizki Luthfi Akbar Ramadhan M. Asep Rizkiawan Meliyawati MILASARI, LISA ASTRIA Mohammad Akhdaan Juliandra Muchammad Sholeh Muchammad Sholeh Muflih, Hilmy Zhafran Muhamad Andi Eria Putra Muhamad Saiful Arif Muhammad Abid Fajar Muhammad Ardhi Ryan Saputra Muhammad Ghiffar Sistani Muhammad Ikhwan Muhammad Ikhwan Muhammad Rafly Al Fattah Zain Muhammad Ridwan Muhammad Rifansyah Mukti, Avis Tantra Mutiara Zahra Arifin Nanang Juhandi Hermawan Neneng Siti Maryam Nisa Qonita Rizkina Nofendri, Yos Nugroho, Dendy Aprilianto Nunik Pratiwi Oktarina Heriyani Pamungkas, Dimas Panji Islami Anakku Pavita, Rachma Pranata, Ananda Bagas Prisilia Talakua Prista Afikah Putri, Kirana Alyssa Rafli Erlangga Rahman Malik, Luqman Abdur Rahmatullah, Ahmad Faiz Ramadhan, Bagas Ramadhita, Nindia Fitri Ramzah, Harry Reisa Inayah Rian gustini Rico Setyo Nugroho Ridwan Bagus Andreyanto Ridwan Maulana Subekti Rika Nurhayati Riyan Ariyansah Rizal Rizal Rizki Alamsyah Rizki Dittyata Rizki Kamelia Rizky Ramdhani Rosalina Rosalina Rozak, Bahrul Saputra, Ramadani Sari, Jessica Windi Sari, Laila Atikah Sari, Riska Amelia Puspita Selphia Nur Azzahra Setiawan, Ahmat Sewin Fathurrohman Simamora, Silvia Damayanti Sinduningrum, Estu Sistani, Muhammad Ghiffar Siti Nurhaliza Sri Fitriani Sunata, Muhamad Hafidz Ardian Syahri, Alfi Tasya Rizki Salsabilla Tia Anggita Sari Transiska, Dwi Trializa, Vina Tupan Tri M Vivi Andriani Wahyu Stiyawan Wahyuningtyas, Irma Wanda Aulia Winanta, Haditya Pandu Windi Al Azmi Wiyono Wiyono Wulandari, Sania Yuni Yanti Fadilah Samual Yusuf Handika Zahra, Khofifah Humaeroh Az Zaini, Fachri Zuhri Halim