JOINTECOMS (Journal of Information Technology and Computer Science)
Vol. 6 No. 2 (2026): JOINTECOMS : Journal of Information Technology and Computer Science

Analisis Komparatif Kecerdasan Buatan Generatif pada Pemecahan Soal OSNK Matematika SMA melalui Black Box Testing

Ariadne Clarissa Darnetta Oswari (Universitas Multi Data Palembang)
Angelim (Universitas Multi Data Palembang)
Dicky Pratama (Universitas Multi Data Palembang)



Article Info

Publish Date
30 Jun 2026

Abstract

Perkembangan kecerdasan buatan (AI) generatif seperti ChatGPT dan Gemini telah banyak dimanfaatkan dalam bidang pendidikan , termasuk matematika. Namun, penggunaan instan teknologi ini berisiko membuat siswa kehilangan proses berpikir dan bernalar, sebuah masalah yang signifikan mengingat rendahnya literasi matematika pelajar di Indonesia berdasarkan data PISA. Penelitian ini bertujuan untuk menguji tingkat keakuratan AI (GPT-5.3 dan Gemini 3 Flash) dalam menjawab soal kompleks tingkat olimpiade, yakni Olimpiade Sains Nasional tingkat Kabupaten/Kota (OSNK) Matematika SMA tahun 2024 dan 2025. Pendekatan kuantitatif digunakan dengan metode Black Box Testing. Hasil akhir dari 15 sampel soal per tahun yang dikerjakan oleh kedua AI dievaluasi menggunakan kunci jawaban rujukan. Hasil uji statistik deskriptif menunjukkan bahwa Gemini 3 Flash memiliki konsistensi yang lebih baik dengan tingkat akurasi tertinggi mencapai 80% (Cukup Akurat) pada soal tahun 2025. Sedangkan, ChatGPT versi GPT-5.3 mengalami penurunan performa pada periode yang sama dengan tingkat akurasi hanya sebesar 53,33% (Kurang Akurat). Penelitian ini menyimpulkan bahwa Gemini 3 Flash lebih efektif dan konsisten dibandingkan ChatGPT dalam menyelesaikan persoalan matematika tingkat lanjut. Walaupun begitu, teknologi AI seharusnya hanya diposisikan sebagai pendamping belajar yang diiringi dengan proses penalaran mandiri dan validasi manual guna menjaga kualitas literasi matematika siswa.

Copyrights © 2026






Journal Info

Abbrev

jcoms

Publisher

Subject

Computer Science & IT

Description

JOINTECOMS (Journal of Information Technology and Computer Science) is a journal managed and published by the Informatic Engineering, University of Palangka Raya, Indonesia. JOINTECOMS has a publishing period four times in a year, namely in March, June, September, and December. Focus and scope of ...