JATI (Jurnal Mahasiswa Teknik Informatika)
Vol. 10 No. 2 (2026): JATI Vol. 10 No. 2

MULTIMODAL TEKS-NUMERIK: TINJAUAN SISTEMATIS TENTANG TEKNIK FUSI, KOMPATIBILITAS ENCODER, DAN KINERJA MODEL

Dipo Oktavian (Teknik Informatika, Universitas Muhammadiyah Riau)
Bayu Anugrah Putra (Teknik Informatika, Universitas Muhammadiyah Riau)



Article Info

Publish Date
20 Mar 2026

Abstract

Integrasi data multimodal teks dan numerik menawarkan nilai prediktif yang lebih tinggi dibandingkan penggunaan modalitas tunggal. Namun, perbedaan karakteristik struktural antar-modalitas dan kompleksitas penyelarasan representasi sering menghasilkan performa suboptimal jika desain encoder dan mekanisme fusi tidak ditangani secara adaptif.Penelitian ini bertujuan mengkaji pengaruh arsitektur encoder dan strategi fusi terhadap kinerja model dalam skenario integrasi teks-numerik.Kajian dilakukan melalui pendekatan Systematic Literature Review (SLR) terhadap 28 studi terpilih dari rentang tahun 2019 hingga 2025.Temuan menunjukkan bahwa intermediate fusion mendominasi arsitektur multimodal, di mana mekanisme attention dan gating memberikan peningkatan performa yang lebih signifikan dibandingkan teknik concatenation. Analisis juga mengungkapkan bahwa kontribusi modalitas bersifat domain-specific; teks mendominasi tugas semantik, sementara numerik unggul pada data sinyal fisik, sehingga kompatibilitas antara encoder dan strategi fusi menjadi kunci efektivitas model.

Copyrights © 2026






Journal Info

Abbrev

jati

Publisher

Subject

Computer Science & IT

Description

Adalah jurnal mahasiswa yang diterbitkan oleh Teknik Informatika Institut Teknologi Nasional Malang, sebagai media publikasi hasil Skripsi Mahasiswa Teknik Informatika ke khalayak luas, diterbitkan secara berkala 6 kali setahun pada bulan Februari, April, Juni, Agustus, Oktober, ...