Claim Missing Document
Check
Articles

Found 1 Documents
Search
Journal : Jurnal Ilmiah FIFO

Investigasi Pengaruh Skema Stride dan Step Training untuk Deteksi Jari Pada Region-based Fully Convolutional Network (R-FCN) dalam Teknologi Augmented Reality Hashfi Fadhillah; Suryo Adhi Wibowo; Rita Purnamasari
Jurnal Ilmiah FIFO Vol 12, No 2 (2020)
Publisher : Fakultas Ilmu Komputer

Show Abstract | Download Original | Original Source | Check in Google Scholar | DOI: 10.22441//fifo.2020.v12i2.003

Abstract

Abstract  Combining the real world with the virtual world and then modeling it in 3D is an effort carried on Augmented Reality (AR) technology. Using fingers for computer operations on multi-devices makes the system more interactive. Marker-based AR is one type of AR that uses markers in its detection. This study designed the AR system by detecting fingertips as markers. This system is designed using the Region-based Deep Fully Convolutional Network (R-FCN) deep learning method. This method develops detection results obtained from the Fully Connected Network (FCN). Detection results will be integrated with a computer pointer for basic operations. This study uses a predetermined step scheme to get the best IoU parameters, precision and accuracy. The scheme in this study uses a step scheme, namely: 25K, 50K and 75K step. High precision creates centroid point changes that are not too far away. High accuracy can improve AR performance under conditions of rapid movement and improper finger conditions. The system design uses a dataset in the form of an index finger image with a configuration of 10,800 training data and 3,600 test data. The model will be tested on each scheme using video at different distances, locations and times. This study produced the best results on the 25K step scheme with IoU of 69%, precision of 5.56 and accuracy of 96%.Keyword: Augmented Reality, Region-based Convolutional Network, Fully Convolutional Network, Pointer, Step training Abstrak Menggabungkan dunia nyata dengan dunia virtual lalu memodelkannya bentuk 3D merupakan upaya yang diusung pada teknologi Augmented Reality (AR). Menggunakan jari untuk operasi komputer pada multi-device membuat sistem yang lebih interaktif. Marker-based AR merupakan salah satu jenis AR yang menggunakan marker dalam deteksinya. Penelitian ini merancang sistem AR dengan mendeteksi ujung jari sebagai marker. Sistem ini dirancang menggunakan metode deep learning Region-based Fully Convolutional Network (R-FCN). Metode ini mengembangkan hasil deteksi yang didapat dari Fully Connected Network (FCN). Hasil deteksi akan diintegrasikan dengan pointer komputer untuk operasi dasar. Penelitian ini menggunakan skema step training yang telah ditentukan untuk mendapatkan parameter IoU, presisi dan akurasi yang terbaik. Skema pada penelitian ini menggunakan skema step yaitu: 25K, 50K dan 75K step. Presisi tinggi menciptakan perubahan titik centroid yang tidak terlalu jauh. Akurasi  yang tinggi dapat meningkatkan kinerja AR dalam kondisi pergerakan yang cepat dan kondisi jari yang tidak tepat. Perancangan sistem menggunakan dataset berupa citra jari telunjuk dengan konfigurasi 10.800 data latih dan 3.600 data uji. Model akan diuji pada tiap skema dilakukan menggunakan video pada jarak, lokasi dan waktu yang berbeda. Penelitian ini menghasilkan hasil terbaik pada skema step 25K dengan IoU sebesar 69%, presisi sebesar 5,56 dan akurasi sebesar 96%.Kata kunci: Augmented Reality, Region-based Convolutional Network, Fully Convolutional Network, Pointer, Step training 
Co-Authors Abdurrahman Rahim Thaha Aditia Tarigan Aditia, Tarigan Agung Adinegoro Aji Fajar Suryo Antoro Alfin, Khoerunnisa Alfin, Muhammad Aliefiya Rachman Anam, Nasehun Anatasya Bella Anatasya Bella Andriansyah, Teddy Andriyan Bayu Suksmono, Andriyan Bayu Angga Rus Dinar Annaria Anggi Putri Siagian Antanita, Yulintyandra Puja Anton Wachidin Widjaja Ardana, Arfio Ariando Ariando Ashiddiqi , Muhamad Hazbi Awlia, Winda Bainuri, Aulia Novria Basudewa, Muhammad Imansyah Bawazir , Ranya Fauzi Bimo Rian Tri Nugroho Citra Fairuz Ghina Dadan Nur Ramadan Darmawan, Galang Aditya Dewi Zakiawati Dimarta, Rafli Caesario Dimata, Rafli Caesario Edwin Rizki Handiarno Efri Suhartono Estananto Fahmi Oscandar Faisal Nur Achsani FARDAN FARDAN, FARDAN Fatur Rizki, Dwiki Feliana Putri Anindyta Efendi Felix Pidha Hilman Fenty Alia Firos Fathul Alam Fitriah Halimah Fityanul Akhyar Gading Aurelia Nabila Lubis Gaol, Satya Wira Fernanda Lumban Gelar Budiman H Simarangkir, Manase Sahat Hannissa Sanggarini Hashfi Fadhillah Hasril Hasril Hendratno, Farhan Ramadhan Putra INDRA PRATAMA PUTRA SALMON Indrarini Dyah Irawati Inung Wijayanto Irawan, Meisi Iwan Iwut Tritoasmoro Janah Eka Widiarni Jony Oktavian Haryanto Kamil, Muhammad Zulvikar Fadlillah KHAERUDIN SALEH Khaerudin Saleh Khairul Anas Kris Sujatmoko Ledya Novamizanti Lubis, Gading Aurelia Nabila M.Fauzi Ishak M.Fauzi Ishak Mahanani, Edo Lutfi Majid, Muhammad Adam Mangesti, Dewi Sri Mas Sarwoko Suraatmadja Mohamad Ramdhani Mua, Edward Christhoper Muhamad Reinaldi Kurniawan Muhammad Fikri Aufa Muhammad Hablul Barri Muhammad Obi Nugraha Munthe , Jhon Alvrian Murnisari Dardjan Murnisari Dardjan Murnisari Dardjan Mustikasari, Ira Nani Murniati Nugraha Nugraha Nugraha Nugraha Nugroho , Haris Tri Nur Arviah Sofyan Nur Ibrahim Nurwan Reza Fachrurrozi Parameswara, Prastama Agung Yusuf Pramuji, Mochammad Chandra Prasojo, M Heru Pratama , M Hidayatullah Pratiwi, Yullia Sartika Putri Purwanto Purwanto Putu Harry Gunawan R. Yunendah Nur Fu’adah Raditiana Patmasari Rahman, Muhammad Harits Rahman, Nurfadilah Ramadhana, Rexy Yusuf Ratnasari, Pungky Eka Ratri Dwi Atmaja Resandy, Refsi Reza Yudistira Rizki Amalia Ulfa Rizki, Chaerul Royan, Neil Rustam Rustam Rustam Sandi, Irfan Maulana Kurnia Saputra, Efa Maydhona SAPUTRA, EFA MAYDHONA Sari, Nita Winda Sasmi Hidayatul Yulianing Tyas Satria Mandala Savitri Amalia Simamora , Haichel Anggy Paro Simanullang, Charlos Alvaredo Siti Lainatul Afifah Siti Zahrotul Fajriyah Soetedjo, Erlangga Rahmat SOFIA SAIDAH Suci Aulia Sugondo Hadiyoso Suryo Adhi Wibowo Syauqi, Nabil Ali Syifa Nurgaida Yutia Tarigan Aditia Tarigan, Jepanta Taufik Yumna Tilawatila, Wawa Tora Fahrudin Trisucipto, Muhammad Wahid, Gloria Shekinah Florensia Wahidin Wahidin Wibawa, Made Hady Sadya Wibisono Sabdo Utomo Yonita Ersalina Leksono Yoren, Muhammad Ikhlashul Yudhi Afriyana Yudiansyah Yudiansyah Yugo Pratama Yulinda Eliskar Yunita Sri Wulandari, Kristina Yurika Ambar Lita Yurika Ambar Lita Yuti Malinda Yuti Malinda Zakaria, Rizqi Imam Arfa Zariaqwila , DTM Faiq