Nusantara of Engineering (NOE)
Vol 9 No 02 (2026): Volume 9 Nomor 2 - 2026

IMPLEMENTASI MULTIMODAL LAYOUTLMV3 DAN HYBRID INTELLIGENCE UNTUK OTOMATISASI EKSTRAKSI ENTITAS NOTA BELANJA

Aldestra Bagus Wardana (Universitas Nusantara PGRI Kediri)
Daniel Swanjaya (Universitas Nusantara PGRI Kediri)
Resty Wulanningrum (Universitas Nusantara PGRI Kediri)



Article Info

Publish Date
05 Nov 2026

Abstract

Pengelolaan administrasi transaksi keuangan pada Koperasi Mahasiswa (KOPMA) Universitas Nusantara PGRI Kediri saat ini masih didominasi oleh proses input data secara manual. Hal ini berimplikasi pada tingginya risiko kesalahan pencatatan (human error) serta rendahnya efisiensi waktu operasional. Penelitian ini bertujuan untuk mengimplementasikan teknologi Document AI melalui model pembelajaran mendalam (deep learning) LayoutLMv3 guna mengekstraksi informasi krusial dari dokumen nota belanja yang memiliki variasi tata letak sangat heterogen. Pendekatan yang diusulkan mengintegrasikan modalitas teks, informasi spasial, dan fitur visual di dalam satu arsitektur transformer terpadu. Guna mengoptimalkan tingkat akurasi hasil ekstraksi, penelitian ini juga menerapkan konsep Hybrid Intelligence dengan memadukan Regular Expression (Regex) sebagai filter pasca-pemrosesan serta mekanisme Human-in-the-Loop melalui antarmuka Streamlit. Pengujian yang dilakukan terhadap 1.000 sampel citra nota belanja menunjukkan bahwa pendekatan multimodal ini secara signifikan mampu mengakselerasi kecepatan pendataan transaksi. Selain itu, sistem ini terbukti menjaga integritas data keuangan melalui validasi akhir oleh admin, sehingga dapat menjadi solusi digitalisasi dokumen yang andal.  

Copyrights © 2026






Journal Info

Abbrev

noe

Publisher

Subject

Computer Science & IT Control & Systems Engineering Electrical & Electronics Engineering Industrial & Manufacturing Engineering Mechanical Engineering

Description

This journal discusses the latest trends in computer science that fields information systems, data mining, software engineering, computer networks, artificial intelligence, geographic Information system, Decision support system, multimedia, and others relevant to computer science, information ...