Hand KeyPoint Detection menggunakan Algoritma Single Shot Detector (SSD)

Abstract

Abstrak— Keyboard merupakan salah satu piranti masukan komputer yang terdiri dari huruf, angka, dan fungsi kontrol lainnya. Beberapa tugas muncul dalam bentuk teks yang diinputkan ke dalam sistem komputer melalui keyboard. Dalam penggunaannya keyboard terdapat permasalahan yang sering terjadi misalnya tombol keyboard yang tidak berfungsi, selain itu juga keyboard dapat mengetik sendiri tanpa diperintah yang diakibatkan oleh tombol keyboard yang sudah tenggelam. Sehingga penggunaan keyboard menjadi kurang effisien. Berdasarkan permasalahan tersebut maka dibutuhkannya sistem Keyboard Virtual  yang memiliki kecerdasan yang di rancang menggunakan Metode Single Shot Detector (SSD). Tujuan Virtual keyboard ini yaitu menggunakan library opencv berbasis Artificial intelligence, Menerapkan landmark pada jari telunjuk dan jari tengah sebagai keypoint klik  terhadap Virtual Keyboard dan melakukan pengujian hasil berdasarkan pengaruh jarak dan cahaya terhadap jari tangan. Hasil yang diperoleh dari penelitian ini yaitu masing-masing tombol yang dibuat pada virtual keyboard telah berfungsi dengan baik dan memiliki titik koordinat pada masing-masing tombol virtual keyboard. Pengujian yang telah dilakukan berdasarkan jarak antara 10 cm – 150 cm memiliki akurasi sebesar 86,66%. Sedangkan pengujian sistem berdasarkan intensitas cahaya yang terdiri dari 0,8 lux, 6.0 lux, 26,2 lux, 60 lux, 200 lux dan 627 lux memiliki akurasi sebesar 83,3%. Pengujian kata dilakukan sebanyak 10 kali dan menghasilkan akurasi sebesar 100%. Pengujian tangan kanan dan kiri memiliki akurasi sebesar 100%.

Kata kunci— Virtual Keyboard, Artificial Intelligence, Single Shot Detector, landmark

Abstract— computer itself certainly requires companion devices, one of which is a keyboard. The keyboard is a computer input device that has an arrangement of letters, numbers, and other control functions, the use of the keyboard is very important because some tasks appear in the form of text. But on the keyboard, some problems often occur, for example, keyboard keys that don't work, besides that the keyboard can type itself without being ordered which is caused by keyboard keys that have sunk. So that the use of the keyboard becomes less efficient. Based on these problems, we need an Artificial Intelligence-Based Virtual Keyboard System Using the Single Shot Detector (SSD) Method. The purpose of this virtual keyboard is Creating a virtual keyboard system using a webcam camera as an alternative to conventional keyboards, To develop interaction between humans and computers in operating the keyboard using a webcam camera and Obtain accuracy values based on word testing, testing using the right and left hands, testing based on the effect of distance and testing based on the influence finger light. The results obtained from this study are that each button made on the virtual keyboard functioned properly and has a coordinate point for each virtual keyboard button. The tests that have been carried out based on the distance between 10 cm – 150 cm have an accuracy of 86.66%. While system testing based on light intensity consisting of 00.8 lux, 06.0 lux, 26.2 lux, 60 lux, 200 lux, and 627 lux has an accuracy of 83.3%. The word test was carried out 10 times and resulted in an accuracy of 100%. Right, and left-hand testing has an accuracy of 100%.

Keywords: Virtual Keyboard, Artificial Intelligence, Single Shot Detector, landmark