Body Tracking MDV: a system applied to physiotherapy using gesture-control technologies
Abstract
This article presents a program for the area of physiotherapy implemented with gesture control technologies, mapping the patient’s body and tracking the exercise during its execution. The basis of its functioning is in the system of validation of the exercise by comparing angles and references of the body points, with models of correct movements previously stored. The program also provides feedback on patient evolution, comparing movements of the same exercise throughout the treatment. The project aims at helping the physiotherapist to monitor the patients’ performance. Body Tracking MDV is available, including its source code at: http://www.marcosdiasvendramini.com.br/mestrado/.
References
Balista, V. G. (2013). Sistema de realidade virtual para avaliação e reabilitação de déficit motor. SBGames. São Paulo, pages 16–20.
Campos, A. (2006). O que é software livre. BR-Linux. Florianópolis, março de.
Caprani, N., O’Connor, N. E., and Gurrin, C. (2012). Touch screens for the older user. In Assistive Technologies, pages 95–118. InTech.
Chan, J. C., Leung, H., Tang, J. K., and Komura, T. (2011). A virtual reality dance training system using motion capture technology. IEEE Transactions on Learning Technologies, 4(2):187–195.
Clua, E. W. G. (2014). Jogos sérios aplicados a saúde. Journal of Health Informatics, 6.
Duarte, N., Postolache, O., and Scharcanski, J. (2014). Ksgphysio-kinect serious game for physiotherapy. In Electrical and Power Engineering (EPE), 2014 International Conference and Exposition on, pages 606–611. IEEE.
Estepa, A., Piriz, S. S., Albornoz, E., and Martínez, C. (2016). Development of a kinect-based exergaming system for motor rehabilitation in neurological disorders. In Journal of Physics: Conference Series, volume 705, page 012060. IOP Publishing.
Fernandes, F. G., Santos, S. C., de Oliveira, L. C., Rodrigues, M. L., and Vita, S. S. B. V. (2014). Realidade virtual e aumentada aplicada em reabilitação fisioterapêutica utilizando o sensor kinect e dispositivos móveis. anais... volume 12, pages 1–6. Universidade Federal de Uberlândia.
Han, J., Shao, L., Xu, D., and Shotton, J. (2013). Enhanced computer vision with microsoft kinect sensor: A review. Cybernetics, IEEE Transactions on, 43(5):1318–1334.
Instruments, N. (2017). O que é o labview? Online. Disponível em: [link]. Acesso em: 12 mar. 2017.
Junior, V. D., Monteiro, C. B., Nakamura, R., Yojo, L. S., Araújo, L. V., and Nunes, F. L. (2013). Mover: Serious game aplicado a reabilitação motora usando sensor de movimento kinect.
Liu, T. T., Hsieh, C. T., Chung, R. C., and Wang, Y. S. (2013). Physical rehabilitation assistant system based on kinect. In Applied Mechanics and Materials, volume 284, pages 1686–1690. Trans Tech Publ.
Microsoft (2017). Kinect for windows sensor components and specifications. Online. Disponível em: [link]. Acesso em: 28 jan. 2017.
Mira (2016). Mira - product. Online. Disponível em: [link]. Acesso em: 12 set. 2016.
Neuroathome (2016). Virtual reality rehabilitation. Online. Disponível em: [link]. Acesso em: 08 dez. 2016.
Rehabilitation, V. R. (2017). Kinect rehabilitation with biofeedback. Online. Disponível em: [link]. Acesso em: 22 jan. 2017.
Romano, R. G., Raia, F., Dias, I. R., and Assis, S. M. B. (2013). Tecnologia de games e reabilitação virtual: adaptação do software labview para captura dos dados do wii balance board. Millenium, (45):181–191.
Saini, S., Rambli, D. R. A., Sulaiman, S., Zakaria, M. N., and Shukri, S. R. M. (2012). A low-cost game framework for a home-based stroke rehabilitation system. In 2012 International Conference on Computer & Information Science (ICCIS), volume 1, pages 55–60. IEEE.
Sousa, F. H. (2011). Uma revisão bibliográfica sobre a utilização do nintendo R© wii como instrumento terapêutico e seus fatores de risco. Revista Espaço Acadêmico, 11(123):155–160.
Sousa, K. A., Neto, J. F. N., Silva, É. S., and Rodrigues, M. A. F. (2016). A gesture control system to support rehabilitation exercises. In Virtual and Augmented Reality (SVR), 2016 XVIII Symposium on, pages 170–177. IEEE.
Vendramini, M. D., Fernandes, A. M., and Paschoal, A. R. (2015). Serious games na saude: aplicação de dispositivos non-touch em atividades de fisioterapia. In: XV Workshop de Informática Médica, Recife-PE.
Webb, J. and Ashley, J. (2012). Beginning Kinect Programming with the Microsoft Kinect SDK. Apress.
Campos, A. (2006). O que é software livre. BR-Linux. Florianópolis, março de.
Caprani, N., O’Connor, N. E., and Gurrin, C. (2012). Touch screens for the older user. In Assistive Technologies, pages 95–118. InTech.
Chan, J. C., Leung, H., Tang, J. K., and Komura, T. (2011). A virtual reality dance training system using motion capture technology. IEEE Transactions on Learning Technologies, 4(2):187–195.
Clua, E. W. G. (2014). Jogos sérios aplicados a saúde. Journal of Health Informatics, 6.
Duarte, N., Postolache, O., and Scharcanski, J. (2014). Ksgphysio-kinect serious game for physiotherapy. In Electrical and Power Engineering (EPE), 2014 International Conference and Exposition on, pages 606–611. IEEE.
Estepa, A., Piriz, S. S., Albornoz, E., and Martínez, C. (2016). Development of a kinect-based exergaming system for motor rehabilitation in neurological disorders. In Journal of Physics: Conference Series, volume 705, page 012060. IOP Publishing.
Fernandes, F. G., Santos, S. C., de Oliveira, L. C., Rodrigues, M. L., and Vita, S. S. B. V. (2014). Realidade virtual e aumentada aplicada em reabilitação fisioterapêutica utilizando o sensor kinect e dispositivos móveis. anais... volume 12, pages 1–6. Universidade Federal de Uberlândia.
Han, J., Shao, L., Xu, D., and Shotton, J. (2013). Enhanced computer vision with microsoft kinect sensor: A review. Cybernetics, IEEE Transactions on, 43(5):1318–1334.
Instruments, N. (2017). O que é o labview? Online. Disponível em: [link]. Acesso em: 12 mar. 2017.
Junior, V. D., Monteiro, C. B., Nakamura, R., Yojo, L. S., Araújo, L. V., and Nunes, F. L. (2013). Mover: Serious game aplicado a reabilitação motora usando sensor de movimento kinect.
Liu, T. T., Hsieh, C. T., Chung, R. C., and Wang, Y. S. (2013). Physical rehabilitation assistant system based on kinect. In Applied Mechanics and Materials, volume 284, pages 1686–1690. Trans Tech Publ.
Microsoft (2017). Kinect for windows sensor components and specifications. Online. Disponível em: [link]. Acesso em: 28 jan. 2017.
Mira (2016). Mira - product. Online. Disponível em: [link]. Acesso em: 12 set. 2016.
Neuroathome (2016). Virtual reality rehabilitation. Online. Disponível em: [link]. Acesso em: 08 dez. 2016.
Rehabilitation, V. R. (2017). Kinect rehabilitation with biofeedback. Online. Disponível em: [link]. Acesso em: 22 jan. 2017.
Romano, R. G., Raia, F., Dias, I. R., and Assis, S. M. B. (2013). Tecnologia de games e reabilitação virtual: adaptação do software labview para captura dos dados do wii balance board. Millenium, (45):181–191.
Saini, S., Rambli, D. R. A., Sulaiman, S., Zakaria, M. N., and Shukri, S. R. M. (2012). A low-cost game framework for a home-based stroke rehabilitation system. In 2012 International Conference on Computer & Information Science (ICCIS), volume 1, pages 55–60. IEEE.
Sousa, F. H. (2011). Uma revisão bibliográfica sobre a utilização do nintendo R© wii como instrumento terapêutico e seus fatores de risco. Revista Espaço Acadêmico, 11(123):155–160.
Sousa, K. A., Neto, J. F. N., Silva, É. S., and Rodrigues, M. A. F. (2016). A gesture control system to support rehabilitation exercises. In Virtual and Augmented Reality (SVR), 2016 XVIII Symposium on, pages 170–177. IEEE.
Vendramini, M. D., Fernandes, A. M., and Paschoal, A. R. (2015). Serious games na saude: aplicação de dispositivos non-touch em atividades de fisioterapia. In: XV Workshop de Informática Médica, Recife-PE.
Webb, J. and Ashley, J. (2012). Beginning Kinect Programming with the Microsoft Kinect SDK. Apress.
Published
2017-07-02
How to Cite
VENDRAMINI, Marcos D.; NARDI, Paulo Augusto; PASCHOAL, Alexandre R..
Body Tracking MDV: a system applied to physiotherapy using gesture-control technologies. In: BRAZILIAN SYMPOSIUM ON COMPUTING APPLIED TO HEALTH (SBCAS), 17. , 2017, São Paulo.
Anais [...].
Porto Alegre: Sociedade Brasileira de Computação,
2017
.
p. 1849-1858.
ISSN 2763-8952.
DOI: https://doi.org/10.5753/sbcas.2017.3732.
