Jurnal Pengembangan Teknologi Informasi dan Ilmu Komputer
Vol 8 No 8 (2024): Agustus 2024

Analisis Perturbasi Glaze dan Nightshade dalam Perlindungan Karya Seni Digital Menggunakan Image Quality Assessment

Zulhan, Galang (Unknown)
Santoso, Edy (Unknown)
Dewi, Candra (Unknown)



Article Info

Publish Date
05 Aug 2024

Abstract

Dalam beberapa kurun terakhir, kemampuan generative AI dalam menciptakan atau meniru suatu style karya seni telah berkembang dengan pesat, sehingga meningkatkan kekhawatiran mengenai orisinalitas dari banyaknya karya seni digital yang beredar di media sosial atau internet. Penelitian ini bertujuan untuk menyelidiki efektivitas metode perturbasi adversarial berupa Glaze dan Nightshade dalam menggagalkan AI untuk melakukan mimikri style. Dengan mengaplikasikan serangkaian metode tersebut pada beberapa artist dengan style karya seni yang berbeda, kami menghasilkan beberapa versi karya seni digital yang dimodifikasi untuk dilatih pada model Stable Diffusion. Generated image yang dihasilkan kemudian dianalisis untuk menilai kualitasnya dan sejauh mana style karya seni tersebut dipertahankan atau terdistorsi. Dalam penelitian ini, metrik yang digunakan untuk menilai kualitas dan kemiripan gambar adalah Image Quality Assessment (IQA), yang mencakup metrik objektif seperti Peak Signal to Noise Rasio (PSNR), Structural Similarity Index (SSIM), hingga evaluasi subjektif seperti Mean Opinion Score (MOS) dari human perception. Hasil kami menunjukkan bahwa Glaze hanya menunjukkan hasil perturbasi yang signifikan pada style abstrak, dengan mengurangi hasil supervised network prediction sebesar 47.7% dan hasil MOS sebesar 1.285 poin. Sementara itu, Nightshade hanya berhasil melakukan perturbasi pada style kartun, dengan mengurangi hasil supervised network prediction sebesar 13.3% dan hasil MOS sebesar 0.428 poin.

Copyrights © 2024






Journal Info

Abbrev

j-ptiik

Publisher

Subject

Computer Science & IT Control & Systems Engineering Education Electrical & Electronics Engineering Engineering

Description

Jurnal Pengembangan Teknlogi Informasi dan Ilmu Komputer (J-PTIIK) Universitas Brawijaya merupakan jurnal keilmuan dibidang komputer yang memuat tulisan ilmiah hasil dari penelitian mahasiswa-mahasiswa Fakultas Ilmu Komputer Universitas Brawijaya. Jurnal ini diharapkan dapat mengembangkan penelitian ...