Conexão Linguística: Leitura e interpretação de sinais gramaticais de LIBRAS utilizando machine learning

  • Francisco Wallyson do Nascimento Silva UESPI
  • Cornelia Janayna Pereira Passarinho UESPI

Resumo


LIBRAS é uma língua de sinais utilizada pela comunidade brasileira como forma de expressão e comunicação, através de sinais e de expressões corporais e faciais, tendo como principal intuito a inclusão social e a acessibilidade linguística para pessoas surdas. Esta pesquisa visa ao desenvolvimento de um software leitor de sinais que representem expressões de LIBRAS, transcrevendo esses símbolos gramaticais para a língua portuguesa. Para tal, utilizou-se uma ferramenta desenvolvida para JavaScript, uma biblioteca chamada TensorFlow, utilizada para criação de modelos de aprendizado de máquina a nível de produção. O diferencial deste trabalho reside no desenvolvimento de uma ferramenta web para interpretação de sinais gramaticais de LIBRAS, utilizando técnicas de aprendizado de máquina e bibliotecas como TensorFlow e Media-Pipe, sem a necessidade de servidores back-end robustos. A continuidade da pesquisa propõe direções futuras que visam ampliar a precisão e a abrangência dos resultados obtidos.

Referências

(2020). Libras básico. [link]. Accessado em: 2023-10-06.

Agência IBGE (2021). Um em cada quatro idosos tinha algum tipo de deficiência em 2019.

Caiafa, E. G. d. A., Basilio, A., de Lima, A. A., and Araujo, G. M. (2023). Interpretação de gestos de libras usando k-means e random forest. XLI SIMPÓSIO BRASILEIRO DE TELECOMUNICAÇÕES E PROCESSAMENTO DE SINAIS.

da Silva, R. P. (2022). Visão computacional: um estudo de caso aplicado à língua brasileira de sinais (libras). Instituto Federal de Educação, Ciência e Tecnologia do Rio Grande do Norte.

de Amorim Silva, R., Lima, L. G., and Bastos, R. O. (2016). Aperfeiçoando o aprendizado de libras utilizando elementos de internet das coisas.

IBGE (2022). Pesquisa nacional de saúde: 2019: ciclos de vida: Brasil e grandes regiões.

Libras, N. (2022). Aprenda os 50 sinais mais fÁceis mais usados da libras (são mais que 50). [link]. Acesso em: 14 set. 2023.

Lobato, L. (2021). Ibge confirma: surdez não é sinônimo de libras. [link].

Silva, D. N. (2024). Língua brasileira de sinais (libras); brasil escola. [link]. Accessado em: 2023-10-06.

TensorFlow.js Models (n.d.). Mediapipe hands keypoints. [link].
Publicado
11/09/2024
SILVA, Francisco Wallyson do Nascimento; PASSARINHO, Cornelia Janayna Pereira. Conexão Linguística: Leitura e interpretação de sinais gramaticais de LIBRAS utilizando machine learning. In: ESCOLA REGIONAL DE COMPUTAÇÃO DO CEARÁ, MARANHÃO E PIAUÍ (ERCEMAPI), 12. , 2024, Parnaíba/PI. Anais [...]. Porto Alegre: Sociedade Brasileira de Computação, 2024 . p. 275-280. DOI: https://doi.org/10.5753/ercemapi.2024.243347.