Claim Missing Document
Check
Articles

Found 1 Documents
Search
Journal : Jurnal Pustaka AI : Pusat Akses Kajian Teknologi Artificial Intelligence

Pengaruh Few-shot Learning pada Kinerja LLM untuk Ekstraksi Entitas Iklan Lowongan Kerja Shafelbilyunazra, Alvalen; Prasetya, Didik Dwi
Jurnal Pustaka AI (Pusat Akses Kajian Teknologi Artificial Intelligence) Vol 5 No 2 (2025): Pustaka AI (Pusat Akses Kajian Teknologi Artificial Intelligence)
Publisher : Pustaka Galeri Mandiri

Show Abstract | Download Original | Original Source | Check in Google Scholar | DOI: 10.55382/jurnalpustakaai.v5i2.1069

Abstract

Ekstraksi informasi dari teks tidak terstruktur, seperti iklan lowongan kerja, merupakan tantangan besar. Pendekatan tradisional berbasis fine-tuning membutuhkan dataset berlabel masif dan sumber daya komputasi tinggi. Sebagai alternatif, Large Language Model (LLM) dengan In-Context Learning (ICL) menawarkan efisiensi. Penelitian ini menginvestigasi pengaruh few-shot learning, khususnya variasi jumlah contoh (k), terhadap akurasi LLM dalam ekstraksi entitas dari iklan lowongan kerja berbahasa Indonesia. Menggunakan model Gemini, eksperimen dilakukan dengan skenario zero-shot (k=0) hingga few-shot (k=1, 3, 5, 10, 20). Setiap skenario dievaluasi lima kali menggunakan Monte Carlo Cross-Validation, dengan metrik Presisi, Recall, dan F1-Score. Hasil menunjukkan korelasi positif antara jumlah contoh dan akurasi, namun dengan point of diminishing returns. Peningkatan kinerja drastis terjadi pada 1-5 shot, dan performa mencapai kejenuhan setelah 10 shot. Model cenderung memiliki Presisi lebih tinggi daripada Recall, memprioritaskan kebenaran ekstrak. Studi ini menyimpulkan bahwa strategi prompting optimal memerlukan keseimbangan akurasi dan efisiensi, merekomendasikan 5-10 contoh untuk sebagian besar aplikasi. Temuan ini memberikan panduan praktis untuk optimalisasi penggunaan LLM dalam ekstraksi informasi.
Co-Authors Abdul Wafi Adi Wahyu Wardani Ahmad Fajruddin Syauqi Ahmad Yusuf Setiawan Ainun Nur Baiti Aji P Wibawa Aji Prasetya Wibawa Akbar, Asna Isyarotul Andika Dwiyanto, Felix Andrew Nafalski Anik Nur Handayani Anjar Dwi Rahmawati Arbian Sulistyo, Danang Arifiati Fitri Anggraini Aryo Pinandito Ashar, Muhammad Azhar Ahmad Smaragdina Bagaskoro Biantoro, Yudhi Bintang Romadhon Cakir, Gulsun Kurubacak Denis Eka Cahyani Dwi Widiyasari Dyah Ayu Langening Tyas Ella Amelia Widodo F.ti Ayyu Sayyidul Laily Fadhli Almu’iini Ahda Fadli Hidayat, M. Noer Fatrisna Salsabila, Reni Firdaus, Nabilah Zakiyah Salmaa Gradiyanto Radityo Kusumo Hafid, Ahmad Hairani Hairani Hakkun Elmunsyah Hanifah Muslimah Az-Zahra, Hanifah Muslimah Haq, Salsabila Thifal Nabil Hariyanto Hariyanto Hayashi, Yusuke Hirashima, Tsukasa I Nyoman Gede Arya Astawa Intan Sulistyaningrum Sakkinah Iskandar Syah, Abdullah Kalifatullah, M. Ajie Khoirul Anwar KHOIRUL ANWAR Kusumo, Gradiyanto Radityo Laily, F.ti Ayyu Sayyidul Lalu Ganda Rady Putra Langlang Gumilar Lismi Animatul Chisbiyah Lutfi Budi Ilmawan, Lutfi Budi M. Ajie Kalifatullah Marsono Marsono Marsono Marsono Maskur Maskur Mayadi, Mayadi Mega Oktaviana Moh. Nur Zamzami Moh. Zainul Falah Muhammad Arief Nugroho Muhammad Aris Ichwanto muhammad hafiizh, muhammad Muhammad Jauharul Fuady Muhammad Mushawwir Muhammad Zidni Ridlo Mukhamad Angga Gumilang Muladi Nadiah Alma Ratnaduhita Nafalski, Andrew Nanscy Evi Wardani Natalina Wahyu Siswijayanti Nena Erviana Nunung Nurjanah Nur Hidayat, Wahyu Nuryakin, Mokhamad Perkasa, Gigih Prasetya, Luhur Adi Prasetyo, Muchamad Wahyu Pratama, Wahyu Styo Prihandicha, Adiftya Bayu Putro, Maulana Nur Antoro Ratnaduhita, Nadiah Alma Reni Fatrisna Salsabila Ridlo, Muhammad Zidni Rofiudin, Amir Ryan Kurniawan Samodra, Joko Setiadi Cahyono Putro Setiawan, Ahmad Yusuf Setyani, Ida Agus Shafelbilyunazra, Alvalen Sigit Perdana Siti Sendari Sofiya Anggraini Sucipto Sucipto Sucipto Sucipto Sulistyo, Danang Arbian Syaad Patmanthara Syaichul Fitrian Akbar Syamsul Arifin Triyanna Widiyaningtyas Triyanna Widyaningtyas Triyanna Widyaningtyas, Triyanna Tsukasa Hirashima Tsukasa Hirashima Tsukasa Hirashima Tuwoso Utomo Pujianto Wahfi, Muhammad Fikri Wahyu Sakti Gunawan Irianto Wahyu Tri Handoko Wahyudi, Erlik Prasetyo Wardani, Adi Wahyu Wibawa, Aji P Wibisono Sukmo Wardhono, Wibisono Sukmo Widiyanti Widiyanti, Widiyanti Wiryawan, Muhammad Zaki Yana Andayani Yusril Imamuddin Zainul Falah, Moh.