Context-Aware Recommendation System for Augmentative and Alternative Communication

  • Leonardo S. V. Filho UFRPE
  • Beatriz P. Silva UFRPE
  • Taciana P. Falcão UFRPE
  • Rafael F. L. Mello UFRPE / Cesar School
  • André C. A. Nascimento UFRPE

Resumo


Sistemas de Comunicação Aumentativa e Alternativa (CAA) baseiam-se em grandes vocabulários de pictogramas cuja navegação pode ser exigente, sobretudo na comunicação espontânea em diferentes ambientes. Propomos um sistema de recomendação de pictogramas sensível ao contexto que integra agrupamento espacial de coordenadas GPS e modelagem temporal difusa por funções gaussianas, ordenando os pictogramas pela combinação de verossimilhança temporal e frequência de uso com decaimento temporal. Comparamos essa abordagem probabilística com um modelo Random Forest sob o mesmo protocolo de avaliação temporal, usando mais de 671.000 interações reais de 27 usuários de uma aplicação real de CAA. O modelo probabilístico atinge Recall@5 de 0,28 e MRR@10 de 0,17, superando consistentemente o Random Forest e estabelecendo uma interpretável para comparações futuras.

Referências

Alfuraih, R. K., Almalki, N. S., and AlNemary, F. M. (2024). Effectiveness of picture exchange communication system in developing requesting skills for children with multiple disabilities. Frontiers in Psychology, Volume 15 - 2024.

AssistiveWare (2025). Proloquo2Go: Symbol-based AAC application. [link]. Accessed: 2026-04-08.

Breiman, L. (2001). Random forests. Machine Learning, 45(1):5–32.

Evangeline, B., Moorthy, A. D., and Kuppa, K. S. (2026). Cpr-sat: A context-aware pictogram recommendation system – a speech assistive technology. SoftwareX, 34:102635.

Evangeline, S. B. and Moorthy, A. D. (2024). Improving communication for people with speech disabilities: Exploring context-aware recommendation systems in assistive technology. In 2024 International Conference on Intelligent Computing and Emerging Communication Technologies (ICEC), pages 1–6.

Garcia, L. F., de Oliveira, L. C., and de Matos, D. M. (2016). Evaluating pictogram prediction in a location-aware augmentative and alternative communication system. Assistive Technology, 28(2):83–92. PMID: 26479456.

Ji, Y., Sun, A., Zhang, J., and Li, C. (2023). A critical study on data leakage in recommender system offline evaluation. ACM Trans. Inf. Syst., 41(3).

Neamtu, R., Camara, A., Pereira, C., and Ferreira, R. (2019). Using Artificial Intelligence for Augmentative Alternative Communication for Children with Disabilities. Lecture Notes in Computer Science (including subseries Lecture Notes in Artificial Intelligence and Lecture Notes in Bioinformatics), 11746 LNCS:234–243. ISBN: 9783030293802.

Pereira, J., Medeiros, S., Zanchettin, C., and Fidalgo, R. (2022a). Pictogram prediction in alternative communication boards: a mapping study. In Anais do XXXIII Simpósio Brasileiro de Informática na Educação, pages 705–717, Porto Alegre, RS, Brasil. SBC.

Pereira, J. A., Macêdo, D., Zanchettin, C., de Oliveira, A. L. I., and do Nascimento Fidalgo, R. (2022b). Pictobert: Transformers for next pictogram prediction. Expert Systems with Applications, 202:117231.

Pereira, J. A., Pereira, J. A., Zanchettin, C., and do Nascimento Fidalgo, R. (2024). Praact: Predictive augmentative and alternative communication with transformers. Expert Systems with Applications, 240:122417.

Srinivasan, S., Patel, S., Khade, A., Bedi, G., Mohite, J., Sen, A., and Poovaiah, R. (2022). Efficacy of a novel augmentative and alternative communication system in promoting requesting skills in young children with autism spectrum disorder in india: A pilot study. Autism & Developmental Language Impairments, 7:23969415221120749.

Tobii Dynavox (2019). My Tobii Dynavox. [link]. Accessed: 2026-04-08.

Zastudil, C., Holyfield, C., Smith, J. A., Nguyen, H., and MacNeil, S. (2024). Predictive anchoring: A novel interaction to support contextualized suggestions for grid displays. In Proceedings of the 26th International ACM SIGACCESS Conference on Computers and Accessibility, ASSETS ’24, New York, NY, USA. Association for Computing Machinery.
Publicado
19/10/2026
V. FILHO, Leonardo S.; SILVA, Beatriz P.; FALCÃO, Taciana P.; MELLO, Rafael F. L.; NASCIMENTO, André C. A.. Context-Aware Recommendation System for Augmentative and Alternative Communication. In: ENCONTRO NACIONAL DE INTELIGÊNCIA ARTIFICIAL E COMPUTACIONAL (ENIAC), 23. , 2026, Cuiabá/MT. Anais [...]. Porto Alegre: Sociedade Brasileira de Computação, 2026 . p. 3721-3732. ISSN 2763-9061. DOI: https://doi.org/10.5753/eniac.2026.31569.