Taxonomy for Evaluation of Digital Learning Resources: Proposition and Analysis of Adequacy by Experts

• Ozonias de Oliveira Brito Junior Universidade Federal de Pernambuco
• Yuska Paola Costa Aguiar UFPB
• Hermano Perrelli de Moura Universidade Federal de Pernambuco

DOI: https://doi.org/10.5753/cbie.sbie.2020.232

Abstract

The diversity and plurality of approaches to the assessment of Digital Learning Resources is a reality. The non-existence of a consensus about the criteria to be adopted, nor an explicit relationship between these and the quality models, they are barriers to the evaluation process itself. To mitigate these problems, the Taxonomy for Assessment of DLR is proposed from the compilation of 26 national and international approaches. This organizes and conceptualizes 49 criteria in four dimensions: software quality, quality of use, pedagogical quality and hybrid quality. To analyze the adequacy of the taxonomy, online surveys and interviews were carried out. 32 Software Engineers, 45 Usability experts and 4 Educators participated.

Keywords: Digital Learning Resources, Taxonomy for Evaluation, Informatics in Education, Multidimensional Evaluation

References

Bayona-Oré, Sussy et al. (2014). Critical success factors taxonomy for software process deployment. In: Software Quality Journal, v. 22, n. 1, p. 21-48.


Brito Junior, O. de O., Aguiar, Y. P. C. (2016). Abordagens para Avaliação de Softwares Educativos e sua Coerência com os Modelos de Qualidade de Software. In: Simpósio Brasileiro de Informática na Educação, v. 27, n. 1, p. 270-280.


Brito Junior, O. de O., Aguiar, Y. P. C. (2018). Taxonomia de Critérios para Avaliação de Software Educativo - TaCASE. In: Simpósio Brasileiro de Informática na Educação, v. 29, n. 1, p. 298-307.


Cresswell, John W. (2013). Research Design: qualitative, quantitative, and mixed methods approaches. (4 ed.). Sage, Los Angeles.


França, R. S. de and Silva, A. C. B. da (2014). Avaliação de softwares educativos para o ensino de Língua Portuguesa. In: Revista Brasileira de Informática na Educação, v. 22, n. 03, p. 23-33.


Guarda, G., and Goulart, I. (2018). Jogos lúdicos sob a ótica do pensamento computacional: Experiências do projeto logicamente. In: Simpósio Brasileiro de Informática na Educação, v. 29, n. 1, p. 486-496.


Lin, Yu Han and Oliveira M. C. de (2018). Avaliação de Software utilizando MAEP: Uma Análise do Protótipo de um Simulador Imersivo de Realidade Virtual. In: Anais SULCOMP, v. 9.


Medeiros, Angélica. (2019). YPEDUC: Uma adaptação de Metodologia Ágil para o Desenvolvimento de Software Educativo. In: Simpósio Brasileiro de Informática na Educação, v. 30, n. 1, p. 379-389.


Mesquita, H. O., Aranha, E. and Silva, T. R. (2018). Uma Abordagem para o Desenvolvimento de Jogos Digitais Educativos no Ensino Básico. In: Simpósio Brasileiro de Informática na Educação, v. 29, n. 1, p. 874-884.


Pereira, W. S. et al. (2016). “Validação de uma abordagem combinada para avaliação de Software Educativo: avanços e desafios”. In: Revista Tecnologias na Educação, v. 8, n. 16.


Wohlin C. (2014). Guidelines for snowballing in systematic literature studies and a replication in software engineering. In: Proceedings of the 18th international conference on evaluation and assessment in software engineering, p. 1-10.