Sistema de Detecção de Gestos Para Controle de Drones

  • João P. S. S. Santos IFS
  • Benicio B. Cruz ITA
  • Maria C. A. de Andrade UNICAMP
  • Fábio L. S. Prudente IFS
  • Stephanie K. A. Sousa IFS
  • Phillipe C. Santos IFS

Resumo


Este artigo explora o desenvolvimento e implementação de um sistema de controle de drones utilizando detecção de gestos, destacando o uso de técnicas de visão computacional. O sistema proposto emprega uso de ferramentas de captura e interpretação de gestos manuais, que são associados a comandos de ação para o drone. A solução visa facilitar a interação humana com drones, oferecendo um controle intuitivo e sem a necessidade de controles físicos tradicionais. Experimentos realizados demonstraram a funcionalidade do sistema, que responde em tempo real aos comandos gestuais. O estudo discute também desafios como a calibração para a detecção dos gestos e a influência de variáveis ambientais, como iluminação e fundo visual. O trabalho conclui que a detecção de gestos para controle de drones é uma abordagem viável e com capacidade de expansão em futuras aplicações.

Referências

Chen, B.; Hua, C.; Li, D.; He, Y.; Han, J. Intelligent Human–UAV interaction system with joint cross-validation over Action–Gesture recognition and scene understanding. Appl. Sci. 2019, 9, 3277.

Kainz, O.; Jakab, F. Approach to Hand Tracking and Gesture Recognition Based on Depth-Sensing Cameras and EMG Monitoring. Acta Informatica Pragensia, v. 3, n. 1, p. 104-112, 2014.

Khaksar, S. et al. Design and Evaluation of an Alternative Control for a Quad-Rotor Drone Using Hand-Gesture Recognition. Sensors, v. 23, n. 12, p. 5462, 2023.

Liu, C.; Szirányi, T. Real-Time Human Detection and Gesture Recognition for On-Board UAV Rescue. Sensors, v. 21, n. 6, p. 2180, 2021.

Silva, E. S. et al. A preliminary evaluation of the leap motion sensor as controller of new digital musical instruments. In: Proceedings of a conference, 2013.

Singha, J.; Das, K. Hand gesture recognition based on Karhunen-Loeve transform. arXiv preprint arXiv:1306.2599, 2013.

Tezza, D.; Andujar, M. The state-of-the-art of human–drone interaction: A survey. IEEE Access 2019, 9, 167438–167454.

Yoo, M. et al. Motion Estimation and Hand Gesture Recognition-Based Human–UAV Interaction Approach in Real Time. Sensors, v. 22, n. 7, p. 2513, 2022.
Publicado
20/07/2025
SANTOS, João P. S. S.; CRUZ, Benicio B.; ANDRADE, Maria C. A. de; PRUDENTE, Fábio L. S.; SOUSA, Stephanie K. A.; SANTOS, Phillipe C.. Sistema de Detecção de Gestos Para Controle de Drones. In: SEMINÁRIO INTEGRADO DE SOFTWARE E HARDWARE (SEMISH), 52. , 2025, Maceió/AL. Anais [...]. Porto Alegre: Sociedade Brasileira de Computação, 2025 . p. 215-226. ISSN 2595-6205. DOI: https://doi.org/10.5753/semish.2025.8257.