Challenges in educational game data modeling from the perspective of computing students: an empirical study
Resumo
The use of Game Learning Analytics (GLA) is fundamental in assessing educational serious games, providing evidence of the player’s learning path through collecting and analyzing interaction data records. The GLBoard model facilitates the implementation of these techniques through a generic and flexible data template for any educational game. However, learning designers consider a previous step, data modeling, complex. In this regard, this work presents an empirical study to investigate the emerging difficulties of this process. Results of the interaction of computer science students indicate that the main challenges are process abstraction, game appropriation, time to carry out the process, and the need for prior knowledge of computer science disciplines programming, database, and systems modeling.Referências
Almeida, L. H. G. d. and Brennand, E. G. d. G. (2016). Learning analytics em ambiente virtual de aprendizagem moodle: um estudo de caso em componentes curriculares para cursos semipresenciais. Gestão & Aprendizagem, pages 76–93.
Alonso-Fernandez, C., Calvo, A., Freire, M., Martinez-Ortiz, I., and Fernandez-Manjon, B. (2017). Systematizing game learning analytics for serious games. In 2017 IEEE global engineering education conference (EDUCON), pages 1111–1118. IEEE.
Alonso-Fernández, C., Calvo-Morata, A., Freire, M., Martínez-Ortiz, I., and Fernández-Manjón, B. (2019a). Applications of data science to game learning analytics data: A systematic literature review. Computers & Education, 141:103612.
Alonso-Fernández, C., Calvo-Morata, A., Freire, M., Martínez-Ortiz, I., and Fernández-Manjón, B. (2022). Game learning analytics:: Blending visual and data mining techniques to improve serious games and to better understand player learning. Journal of Learning Analytics, 9(3):32–49.
Alonso-Fernández, C., Calvo-Morata, A., Freire, M., Martínez-Ortiz, I., and Manjón, B. F. (2021). Data science meets standardized game learning analytics. In 2021 IEEE Global Engineering Education Conference (EDUCON), pages 1546–1552. IEEE.
Alonso-Fernández, C., Cano, A. R., Calvo-Morata, A., Freire, M., Martínez-Ortiz, I., and Fernández-Manjón, B. (2019b). Lessons learned applying learning analytics to assess serious games. Computers in Human Behavior, 99:301–309.
Banihashem, S. K., Dehghanzadeh, H., Clark, D., Noroozi, O., and Biemans, H. J. (2024). Learning analytics for online game-based learning: A systematic literature review. Behaviour & Information Technology, 43(12):2689–2716.
Bardin, L. (2015). Análise de conteúdo (la reto & a. pinheiro, tradução)(6ª edição). Lisboa, Portugal: Edições, 70.
Cordeiro, E. A. and Duarte, E. M. (2020). Jogos educacionais digitais: estado da arte em trabalhos de conclusão de curso. Revista Sítio Novo, 4(1):125–133.
Emerson, A., Cloude, E. B., Azevedo, R., and Lester, J. (2020). Multimodal learning analytics for game-based learning. British journal of educational technology, 51(5):1505–1526.
Freire, M., Serrano-Laguna, Á., Manero, B., Martínez-Ortiz, I., Moreno-Ger, P., and Fernández-Manjón, B. (2016). Game learning analytics: Learning analytics for serious games. In Learning, design, and technology, pages 1–29. Springer Nature Switzerland AG.
Hauge, J. B., Berta, R., Fiucci, G., Manjón, B. F., Padrón-Nápoles, C., Westra, W., and Nadolski, R. (2014). Implications of learning analytics for serious game design. In 2014 IEEE 14th international conference on advanced learning technologies, pages 230–232. IEEE.
Honda, F., Macena, J., Duarte, J. C., Pires, F., Pessoa, M., and Oliveira, E. H. (2023). Um estudo de caso para a implementação de game learning analytics (gla) no desenvolvimento de jogos educacionais. In Workshop de Aplicações Práticas de Learning Analytics em Instituições de Ensino no Brasil (WAPLA), pages 138–146. SBC.
İnan, E. and Ebner, M. (2020). Learning analytics and moocs. In Learning and Collaboration Technologies. Designing, Developing and Deploying Learning Experiences: 7th International Conference, LCT 2020, Held as Part of the 22nd HCI International Conference, HCII 2020, Copenhagen, Denmark, July 19–24, 2020, Proceedings, Part I 22, pages 241–254. Springer.
Kitto, K., Whitmer, J., Silvers, A., and Webb, M. (2020). Creating data for learning analytics ecosystems.
Loh, C. S., Sheng, Y., and Ifenthaler, D. (2015). Serious games analytics: Theoretical framework. Serious games analytics: Methodologies for performance measurement, assessment, and improvement, pages 3–29.
Macena, J., Honda, F., Melo, D., Pires, F., Oliveira, E. H. T., Fernandes, D., and Pessoa, M. (2024). Desafios na implementação de técnicas de gla em um jogo educacional de algoritmos: um estudo de caso. In Anais Estendidos do XXIII Simpósio Brasileiro de Jogos e Entretenimento Digital. SBC.
Melo, D., Melo, R., Bernardo, J. R. S., Pessoa, M., Rodríguez, L. C., and Pires, F. (2020). Uma estratégia de game learning analytics para avaliar level design em um jogo educacional. In Anais do XXXI Simpósio Brasileiro de Informática na Educação, pages 622–631. SBC.
Nascimento, A. M. d. S. and Leite Bruno, S. (2024). Jogos digitais educacionais: o que as dissertações e teses dizem? International Journal Education and Teaching (PDVL), 7(2):62–87.
Nascimento, L. T., Honda, F., Melo, D., Pessoa, M., Oliveira, E. H., Fernandes, D., and Pires, F. G. (2023). My name: desenvolvimento de um conjunto de mecânicas para abordar o problema da mochila em um jogo educacional. In Simpósio Brasileiro de Informática na Educação (SBIE), pages 888–899. SBC.
Oliveira, E. H., de Oliveira, D. B., Carvalho, L. S., and Pereira, F. D. (2022). Learning analytics no ensino de introdução à programação de computadores. In Workshop de Aplicações Práticas de Learning Analytics em Instituições de Ensino no Brasil (WAPLA), pages 50–59. SBC.
Perez-Colado, I., Alonso-Fernandez, C., Freire, M., Martinez-Ortiz, I., and Fernandez-Manjon, B. (2018). Game learning analytics is not informagic! In 2018 IEEE Global Engineering Education Conference (EDUCON), pages 1729–1737. IEEE.
Plass, J. L., Homer, B. D., and Kinzer, C. K. (2015). Foundations of game-based learning. Educational psychologist, 50(4):258–283.
Portella, F. F., Tubelo, R. A., Zanatta, E. J., and Pinto, M. E. B. (2017). Experiência da una-sus/ufcspa no desenvolvimento de jogos educacionais. Experiências exitosas da Rede UNA-SUS, page 196.
Saveski, G. L., Westera, W., Yuan, L., Hollins, P., Manjón, B. F., Ger, P. M., and Stefanov, K. (2016). What serious game studios want from ict research: identifying developers’ needs. In Games and Learning Alliance: 4th International Conference, GALA 2015, Rome, Italy, December 9-11, 2015, Revised Selected Papers 4, pages 32–41. Springer.
Sclater, N. (2017). Learning analytics explained. Routledge.
Serrano-Laguna, Á., Martínez-Ortiz, I., Haag, J., Regan, D., Johnson, A., and Fernández-Manjón, B. (2017). Applying standards to systematize learning analytics in serious games. Computer Standards & Interfaces, 50:116–123.
Siemens, G. and Long, P. (2011). Penetrating the fog: Analytics in learning and education. EDUCAUSE review, 46(5):30.
Silva, D., Melo, R., Pires, F., and Pessoa, M. (2021). Avaliacão de objetos digitais de aprendizagem: como os licenciados em computação analisam jogos educacionais? Revista Novas Tecnologias na Educação, 19(2):111–121.
Silva, D., Pires, F., Melo, R., and Pessoa, M. (2022). Glboard: um sistema para auxiliar na captura e análise de dados em jogos educacionais. In Anais Estendidos do XXI Simpósio Brasileiro de Jogos e Entretenimento Digital, pages 959–968. SBC.
Tarouco, L. M. R., Konrath, M. L. P., and da Silva Grando, A. R. (2005). O aluno como co-construtor e desenvolvedor de jogos educacionais. Revista Novas Tecnologias na Educação, 3(2).
Wallner, G. and Kriglstein, S. (2013). Visualization-based analysis of gameplay data–a review of literature. Entertainment Computing, 4(3):143–155.
Alonso-Fernandez, C., Calvo, A., Freire, M., Martinez-Ortiz, I., and Fernandez-Manjon, B. (2017). Systematizing game learning analytics for serious games. In 2017 IEEE global engineering education conference (EDUCON), pages 1111–1118. IEEE.
Alonso-Fernández, C., Calvo-Morata, A., Freire, M., Martínez-Ortiz, I., and Fernández-Manjón, B. (2019a). Applications of data science to game learning analytics data: A systematic literature review. Computers & Education, 141:103612.
Alonso-Fernández, C., Calvo-Morata, A., Freire, M., Martínez-Ortiz, I., and Fernández-Manjón, B. (2022). Game learning analytics:: Blending visual and data mining techniques to improve serious games and to better understand player learning. Journal of Learning Analytics, 9(3):32–49.
Alonso-Fernández, C., Calvo-Morata, A., Freire, M., Martínez-Ortiz, I., and Manjón, B. F. (2021). Data science meets standardized game learning analytics. In 2021 IEEE Global Engineering Education Conference (EDUCON), pages 1546–1552. IEEE.
Alonso-Fernández, C., Cano, A. R., Calvo-Morata, A., Freire, M., Martínez-Ortiz, I., and Fernández-Manjón, B. (2019b). Lessons learned applying learning analytics to assess serious games. Computers in Human Behavior, 99:301–309.
Banihashem, S. K., Dehghanzadeh, H., Clark, D., Noroozi, O., and Biemans, H. J. (2024). Learning analytics for online game-based learning: A systematic literature review. Behaviour & Information Technology, 43(12):2689–2716.
Bardin, L. (2015). Análise de conteúdo (la reto & a. pinheiro, tradução)(6ª edição). Lisboa, Portugal: Edições, 70.
Cordeiro, E. A. and Duarte, E. M. (2020). Jogos educacionais digitais: estado da arte em trabalhos de conclusão de curso. Revista Sítio Novo, 4(1):125–133.
Emerson, A., Cloude, E. B., Azevedo, R., and Lester, J. (2020). Multimodal learning analytics for game-based learning. British journal of educational technology, 51(5):1505–1526.
Freire, M., Serrano-Laguna, Á., Manero, B., Martínez-Ortiz, I., Moreno-Ger, P., and Fernández-Manjón, B. (2016). Game learning analytics: Learning analytics for serious games. In Learning, design, and technology, pages 1–29. Springer Nature Switzerland AG.
Hauge, J. B., Berta, R., Fiucci, G., Manjón, B. F., Padrón-Nápoles, C., Westra, W., and Nadolski, R. (2014). Implications of learning analytics for serious game design. In 2014 IEEE 14th international conference on advanced learning technologies, pages 230–232. IEEE.
Honda, F., Macena, J., Duarte, J. C., Pires, F., Pessoa, M., and Oliveira, E. H. (2023). Um estudo de caso para a implementação de game learning analytics (gla) no desenvolvimento de jogos educacionais. In Workshop de Aplicações Práticas de Learning Analytics em Instituições de Ensino no Brasil (WAPLA), pages 138–146. SBC.
İnan, E. and Ebner, M. (2020). Learning analytics and moocs. In Learning and Collaboration Technologies. Designing, Developing and Deploying Learning Experiences: 7th International Conference, LCT 2020, Held as Part of the 22nd HCI International Conference, HCII 2020, Copenhagen, Denmark, July 19–24, 2020, Proceedings, Part I 22, pages 241–254. Springer.
Kitto, K., Whitmer, J., Silvers, A., and Webb, M. (2020). Creating data for learning analytics ecosystems.
Loh, C. S., Sheng, Y., and Ifenthaler, D. (2015). Serious games analytics: Theoretical framework. Serious games analytics: Methodologies for performance measurement, assessment, and improvement, pages 3–29.
Macena, J., Honda, F., Melo, D., Pires, F., Oliveira, E. H. T., Fernandes, D., and Pessoa, M. (2024). Desafios na implementação de técnicas de gla em um jogo educacional de algoritmos: um estudo de caso. In Anais Estendidos do XXIII Simpósio Brasileiro de Jogos e Entretenimento Digital. SBC.
Melo, D., Melo, R., Bernardo, J. R. S., Pessoa, M., Rodríguez, L. C., and Pires, F. (2020). Uma estratégia de game learning analytics para avaliar level design em um jogo educacional. In Anais do XXXI Simpósio Brasileiro de Informática na Educação, pages 622–631. SBC.
Nascimento, A. M. d. S. and Leite Bruno, S. (2024). Jogos digitais educacionais: o que as dissertações e teses dizem? International Journal Education and Teaching (PDVL), 7(2):62–87.
Nascimento, L. T., Honda, F., Melo, D., Pessoa, M., Oliveira, E. H., Fernandes, D., and Pires, F. G. (2023). My name: desenvolvimento de um conjunto de mecânicas para abordar o problema da mochila em um jogo educacional. In Simpósio Brasileiro de Informática na Educação (SBIE), pages 888–899. SBC.
Oliveira, E. H., de Oliveira, D. B., Carvalho, L. S., and Pereira, F. D. (2022). Learning analytics no ensino de introdução à programação de computadores. In Workshop de Aplicações Práticas de Learning Analytics em Instituições de Ensino no Brasil (WAPLA), pages 50–59. SBC.
Perez-Colado, I., Alonso-Fernandez, C., Freire, M., Martinez-Ortiz, I., and Fernandez-Manjon, B. (2018). Game learning analytics is not informagic! In 2018 IEEE Global Engineering Education Conference (EDUCON), pages 1729–1737. IEEE.
Plass, J. L., Homer, B. D., and Kinzer, C. K. (2015). Foundations of game-based learning. Educational psychologist, 50(4):258–283.
Portella, F. F., Tubelo, R. A., Zanatta, E. J., and Pinto, M. E. B. (2017). Experiência da una-sus/ufcspa no desenvolvimento de jogos educacionais. Experiências exitosas da Rede UNA-SUS, page 196.
Saveski, G. L., Westera, W., Yuan, L., Hollins, P., Manjón, B. F., Ger, P. M., and Stefanov, K. (2016). What serious game studios want from ict research: identifying developers’ needs. In Games and Learning Alliance: 4th International Conference, GALA 2015, Rome, Italy, December 9-11, 2015, Revised Selected Papers 4, pages 32–41. Springer.
Sclater, N. (2017). Learning analytics explained. Routledge.
Serrano-Laguna, Á., Martínez-Ortiz, I., Haag, J., Regan, D., Johnson, A., and Fernández-Manjón, B. (2017). Applying standards to systematize learning analytics in serious games. Computer Standards & Interfaces, 50:116–123.
Siemens, G. and Long, P. (2011). Penetrating the fog: Analytics in learning and education. EDUCAUSE review, 46(5):30.
Silva, D., Melo, R., Pires, F., and Pessoa, M. (2021). Avaliacão de objetos digitais de aprendizagem: como os licenciados em computação analisam jogos educacionais? Revista Novas Tecnologias na Educação, 19(2):111–121.
Silva, D., Pires, F., Melo, R., and Pessoa, M. (2022). Glboard: um sistema para auxiliar na captura e análise de dados em jogos educacionais. In Anais Estendidos do XXI Simpósio Brasileiro de Jogos e Entretenimento Digital, pages 959–968. SBC.
Tarouco, L. M. R., Konrath, M. L. P., and da Silva Grando, A. R. (2005). O aluno como co-construtor e desenvolvedor de jogos educacionais. Revista Novas Tecnologias na Educação, 3(2).
Wallner, G. and Kriglstein, S. (2013). Visualization-based analysis of gameplay data–a review of literature. Entertainment Computing, 4(3):143–155.
Publicado
20/07/2025
Como Citar
HONDA, Fabrizio; PIRES, Fernanda; PESSOA, Marcela; OLIVEIRA, Elaine H. T..
Challenges in educational game data modeling from the perspective of computing students: an empirical study. In: WORKSHOP SOBRE EDUCAÇÃO EM COMPUTAÇÃO (WEI), 33. , 2025, Maceió/AL.
Anais [...].
Porto Alegre: Sociedade Brasileira de Computação,
2025
.
p. 1252-1263.
ISSN 2595-6175.
DOI: https://doi.org/10.5753/wei.2025.9175.
