Implementasi Hand Gesture Recognition Sebagai Pengembangan Aplikasi Kendali Robot Divisi Kontes Robot Tematik Indonesia

Penelitian ini bertujuan untuk merancang dan mengimplementasikan sistem kendali robot beroda berbasis Hand Gesture Recognition menggunakan MediaPipe dan mikrokontroler ESP32 dengan komunikasi Wi-Fi (UDP). Sistem memanfaatkan kamera laptop untuk mendeteksi gestur tangan pengguna secara real-time dan menerjemahkannya menjadi kode perintah gerak robot. Deteksi gestur dilakukan dengan menganalisis koordinat landmark dari MediaPipe, di mana posisi vertikal titik PIP dan TIP dibandingkan untuk menentukan kondisi jari terbuka atau tertutup. Kombinasi status kelima jari membentuk pola biner yang dicocokkan dengan konfigurasi gestur untuk menghasilkan perintah gerak. Pengujian dilakukan dengan mengukur intensitas cahaya menggunakan lux meter, latar pola, dan jarak tangan terhadap kamera menggunakan meteran. Hasil menunjukkan sistem mampu mengenali tujuh gestur dengan akurasi rata-rata 95,71% dan frame rate 14,28 FPS pada jarak 40 cm. Sistem ini terbukti efektif, stabil, dan berpotensi diterapkan pada teknologi kendali tanpa kontak.