Claim Missing Document
Check
Articles

IMPLEMENTASI MULTIMODAL LAYOUTLMV3 DAN HYBRID INTELLIGENCE UNTUK OTOMATISASI EKSTRAKSI ENTITAS NOTA BELANJA Aldestra Bagus Wardana; Daniel Swanjaya; Resty Wulanningrum
Nusantara of Engineering (NOE) Vol 9 No 02 (2026): Volume 9 Nomor 2 - 2026
Publisher : Universitas Nusantara PGRI Kediri

Show Abstract | Download Original | Original Source | Check in Google Scholar | DOI: 10.29407/noe.v9i02.29012

Abstract

Pengelolaan administrasi transaksi keuangan pada Koperasi Mahasiswa (KOPMA) Universitas Nusantara PGRI Kediri saat ini masih didominasi oleh proses input data secara manual. Hal ini berimplikasi pada tingginya risiko kesalahan pencatatan (human error) serta rendahnya efisiensi waktu operasional. Penelitian ini bertujuan untuk mengimplementasikan teknologi Document AI melalui model pembelajaran mendalam (deep learning) LayoutLMv3 guna mengekstraksi informasi krusial dari dokumen nota belanja yang memiliki variasi tata letak sangat heterogen. Pendekatan yang diusulkan mengintegrasikan modalitas teks, informasi spasial, dan fitur visual di dalam satu arsitektur transformer terpadu. Guna mengoptimalkan tingkat akurasi hasil ekstraksi, penelitian ini juga menerapkan konsep Hybrid Intelligence dengan memadukan Regular Expression (Regex) sebagai filter pasca-pemrosesan serta mekanisme Human-in-the-Loop melalui antarmuka Streamlit. Pengujian yang dilakukan terhadap 1.000 sampel citra nota belanja menunjukkan bahwa pendekatan multimodal ini secara signifikan mampu mengakselerasi kecepatan pendataan transaksi. Selain itu, sistem ini terbukti menjaga integritas data keuangan melalui validasi akhir oleh admin, sehingga dapat menjadi solusi digitalisasi dokumen yang andal.  
Co-Authors Abu Tholib Achmad Iqbal Maulana Aeri Rachmad Ahmad Bagus Setiawan Ahmad Fakhruddin Luthfi Aji Prasetya Wibawa Aldestra Bagus Wardana Amanda, Novia Aminuyati Anardha, Danuar Aditya Andrean Ferdyana Vabian Eka Sakti Angel, Gresiva Devi Anggi Nur Fadzila Anik Nur Handayani Aprianto, Kresna Ardi Sanjaya Aristanti, Apriska Ade Arsyad, Nandito Pramudya Asmoro, Shandy Sadewa Asri, Puput Puji Bagus Fadzerie Robby Cholid Ilham Isniawan Chrisnatae, Mayo Alvarosy Dadi Setyawan Danar Putra Pamungkas, Danar Putra Daniel Swanjaya Daniel Swanjaya2 Dewangga, Rio Agung Dhimas Taka Desfrika Perdana Doni Abdul Fatah Donny Firdani Dusea Widya Dara, Made Ayu Ema Utami Erna Daniati Fadli Hidayat, M Noer Fadli, Abi Ihsan Fadzerie Robby, Bagus Fatkur Rhohman, Fatkur Firmansyah, Muhammad Kukuh FITRIANA, VYRRA Gemini, Shalaisha Amelia Putri Heffi Awang Cahya Heru Suhartono, Wawan Heru Wahyu Herwanto Hidayah, Alvi Nurul Intan Nur Farida Iqbal Jauhari, Nur Mohamad Iqbal Jauhari Iswoyo, Yodhi Pratama Jauhari, Nur Mohamad Iqbal Juli Sulaksono Julian Sahertian Kamilah, Annisa' Nur Karim, Achmad Zainul Kohei Arai Krisna Dzakyya Darajat Krisnawan, Apreado Gilang Kristantio, Triyo Kurniawan, Afizza Fikri Kurniawan, Dimas Eri Kurniawati, Desi Dwi Ludfie, Miftachul Lusi Dwi Anggraini, Lusi Dwi M. Noer Fadli Hidayat Made Ayu Dunia Widyadara Mahardhika, Bima Mahdiyah, Umi Maliana, Diah Gusmia Maulian Amroni, Asna Maulian Amroni Mawarni, Reza Millenialdo Yanuar Ilham Moh Imam Yusuf Mustofa Muhaimin, Mohammad Aqil Muhamad Yusup Efendi Muhammad Abdul Aziz Mustofa, Arin Ayu Silvyani Muttaqien, Hidayatul N.S.A, M Mukhlish Nandha Vera Wihra Lelitavistara Nandha Vera Wihra Lelitavistara, Nandha Vera Wihra nata, Pramudya Cipta Panatagama Natasha, Sonya Naufal Muji Dwicahyo Nugraha, Reza Setya Nurul Mahpiroh Patmi Kasih Pratama, Regi Cendika Ramadhani, Gilang Ratih Kumalasari Niswatin Risa Helilintar Risky Aswi Ramadhani Rohmat Syamsul Huda Roni Heri Irawan Rony Heri Irawan Ruruh Andayani Bekti, Ruruh Andayani Safitri, Karinda Ayu salma - alawiyah Santoso, Christa Witta Putra Saraswati, Indra Lady Sari, Frisca Ayu Fatika Sari, Lya Rosita Sari, Putri Desi Kusuma Setiyawan, Gadang Putro Bagus Sinta Sanora Siregar, Muhammad Fariz Hardiansyah Siti Rochana SRI RAHAYU Supri yono Supri Yono, Supri Susanti, Riska Yuni Syaputri, Rika Wahyu Teguh, Aji Triprasetyo, Anggi Wahyu Ulfatus Syaidah Viana, Ella Okta Wahyu Cahyo Utomo Wijayanto, Muhammad Farid Winandari, Dhela Melani Wulandari, Safira Putri Yosianova, Imam Syahputra Zakaria, Reza Naim