Heuristics for Accessibility Evaluation in Chatbots

• Augusto Castilho de Medeiros UFJF
• Pedro Henrique Dias Valle USP
• André Luiz de Oliveira UFJF

DOI: https://doi.org/10.5753/wbots.2024.3978

Abstract

Context: The advance of Artificial Intelligence and its increased use to support the most diverse daily tasks such as customer service through chat-bots, raises concerns about their accessibility. Motivation: Therefore, chat-bots be designed to ensure users with cognitive, perceptual, or motor limitations can use it to achieve their goals without any barrier. It raises the following research question addressed in this study: How to effectively evaluate the accessibility of chat-bots? In this work, we introduce a catalog of eleven heuristics for evaluating the accessibility of chat-bots. Methodology: We derived the proposed heuristics from an accessibility evaluation of several popular chat-bots based on the Web Content Accessibility Guidelines (WCAG). Results: The proposed heuristics have the potential to support designers in the development of user-interfaces for chat-bot applications in compliance with web accessibility guidelines.

References

Barbosa, C. V. T. (2019). Chatbots e acessibilidade: Uma investigação sobre a acessibilidade dos assistentes virtuais com enfoque em pessoas com deficiência visual.

Batista, G. O. d. S., de Souza Monteiro, M., and de Castro Salgado, L. C. (2022). Investigando chatbots governamentais: um panorama sobre a usabilidade dentro e fora do brasil. In Anais do X Workshop de Computação Aplicada em Governo Eletrônico, pages 73–84. SBC.

Correa, J., Viana, D., and Teles, A. (2021). Desenvolvendo chatbots com o dialogflow. Sociedade Brasileira de Computação.

da Silva Monteiro, J. C. (2023). “e aí, siri?!”: possibilidades pedagógicas com assistentes virtuais. SCIAS-Educação, Comunicação e Tecnologia, 5(2):90–103.

de Melo Cabral, C. (2023). Acessibilidade Digital em Conteúdos Didáticos para Pessoas com Deficiência Intelectual. Editora Appris.

de Oliveira, R. D. and Okimoto, M. L. L. R. (2022). A experiência das pessoas com deficiência visual com chatbots web. Cadernos de Educação Tecnologia e Sociedade, 15(se2):41–52.

Folstad, A. and Brandtzaeg, P. B. (2017). Chatbots and the new world of hci. Interactions, 24(4).

Godinho, A. M., de Meirelles Belliard, A., Efing, A. C., Cavet, C. A., Dantas, E., Schaefer, F., Medon, F., Glitz, F., Schulman, G., Alves, H. M., et al. (2023). Telemedicina: Desafios Éticos e Regulatórios. Editora Foco.

International Organization for Standardization (2014). ISO/IEC Guide 71:2014. ISO, Geneva, Switzerland.

ISO (2022). Web content accessibility guidelines (wcag) overview.

Malar, J. P. (2023). Inteligência artificial pode ser solução para acelerar crescimento global, diz estudo. [link]. Acessado: 12 mai. 2023.

Nunes, J. M. d. A. (2022). Adaptação linguística e acessibilidade em sistema com agente conversacional (chatbot).

OLIVEIRA, R. D. d. (2021). Recomendações de acessibilidade e usabilidade para Chatbots web: inclusão do usuário cego. Curitiba, 2021. PhD thesis, Dissertação (Mestrado)—Setor de Artes, Comunicação e Design da Universidade . . . .

Tede, P. C. d. A. R. and de Almeida Barros, F. (2016). Agentes inteligentes conversacionais: conceitos básicos e desenvolvimento. Sociedade Brasileira de Computação.