Mensuração da Proficiência dos Estudantes do Curso de Bacharelado em Sistemas de Informação, na Prova do ENADE (2017) via Teoria de Resposta ao Item
Resumo
Este estudo teve como objetivo mensurar o desempenho dos estudantes do curso de Sistemas de Informação que realizaram o Exame Nacional de Desempenho dos Estudantes (ENADE) por meio da Teoria de Resposta ao Item (TRI). A mensuração do desempenho foi realizada utilizando o modelo logístico de três parâmetros (ML3P), com dados extraídos do site do Instituto Nacional de Estudos e Pesquisas Educacionais Anísio Teixeira (INEP), referentes à prova do ENADE aplicada em 2017, contemplando um total de 11.523 estudantes. A escala estimada permitiu classificar os estudantes em três níveis de desempenho (Básico, Intermediário e Avançado). Os resultados indicaram que os itens presentes na prova do ENADE apresentaram um elevado grau de dificuldade para o grupo avaliado. Observou-se, ainda, baixo desempenho dos estudantes nos temas de Probabilidade, Programação e Banco de Dados, porém um desempenho superior relativo nas áreas de Inteligência Artificial e Teoria da Computação. Esses resultados sugerem a necessidade de ações institucionais e de políticas públicas voltadas à melhoria do desempenho acadêmico dos estudantes nessas áreas do conhecimento.
Palavras-chave:
Desempenho, Proficiência, ENADE, Teoria de Resposta ao Item
Referências
AKAIKE, H. A new look at the statistical model identification. IEEE Transactions on Automatic Control., Boston, v.19, n.6, p.716-723, Dec. 1974.
ANDERSON, L. W.; KRATHWOHL, D. R. A taxonomy for learning, teaching, and assessing: A revision of Bloom's taxonomy of educational objectives. New York: Longman, 2001.
Andrade, D.F., Tavares, H.R., Cunha, R.V. (2000). Teoria da Resposta ao Item: Conceitos e Aplicações. São Paulo: Associação Brasileira de Estatística.
Araújo, R. A. (2019). Análise dos microdados do Enade: proposta de uma ferramenta de exploração utilizando mineração de dados. Dissertação (Mestrado em Ciência da Computação) - Universidade Federal de Goiás, Goiânia.
Birnbaum, A. (1968). Some latent trait models and their use in inferring and examinee's ability. In F.M. Lord & M.R. Novick, Statistical theories of mental test scores. Reading, MA: Addison-Wesley, ch. 17-20.
Bock, R. D. and Zimowski, M. F. (1997). Multiple Group IRT. In Handbook of Modern Item Response Theory. W.J. van der Linder e R.K. Hambleton Eds. New York: Spring-Verlag.
Baker, F.B.(2001). The basics of item response theory. Washington, DC: ERIC.
BORGATTO, A. F.; ANDRADE, D. F. de. Análise clássica de testes com diferentes graus de dificuldade. Estudos em Avaliação Educacional, São Paulo, v. 23, n. 52, p. 146–156, 2012.
BRASIL Instituto Nacional de Estudos e Pesquisas Educacionais Anísio Teixeira Sinaes. Brasília, 2017.
CHARÃO, Andrea S.; WIECHORK, Karina; RODRIGUES, Marlon L. S.; BARBOSA, Fernando P.. Explorando Resultados por Questão no Enade em Ciência da Computação para Subsidiar Revisão de Projeto Pedagógico de Curso. In: WORKSHOP SOBRE EDUCAÇÃO EM COMPUTAÇÃO (WEI), 28. , 2020, Cuiabá. Anais [...]. Porto Alegre: Sociedade Brasileira de Computação, 2020 . p. 16-20. ISSN 2595-6175.
CUNHA, Renan; SALES, Claudomiro; SANTOS, Reginaldo. Análise Automática com os Microdados do ENADE para Melhoria do Ensino dos Cursos de Ciência da Computação. In: WORKSHOP SOBRE EDUCAÇÃO EM COMPUTAÇÃO (WEI),29., 2021, Evento Online. Anais [...]. Porto Alegre: Sociedade Brasileira de Computação, 2021 . p. 208-217. ISSN 2595-6175.
Camargo, R. V. W., Camargo, R. de C. C. P., Andrade, D. F. de, & Bornia, A. C. (2016). Desempenho dos alunos de ciências contábeis na prova ENADE/2012: uma aplicação da Teoria da Resposta ao Item. Revista De Educação E Pesquisa Em Contabilidade (REPeC), 10(3). DOI: 10.17524/repec.v10i3.140.
Coelho, E. C., Ribeiro Junior, P. J. & Bonat, W. H. (2014). Exame nacional de desenvolvimento de estudantes de estatística-desafios e perspectivas pela TRI. Revista da Estatística da Universidade Federal de Ouro Preto, 3(2), pp. 323-337.
Chalmers, R., P. (2012). mirt: A Multidimensional Item Response Theory Package for the R Environment. Journal of Statistical Software, 48(6), 1-29.
Hambleton, R.K., Swaminathan, H., Rogers, H.J. (1991). Fundamentals of Item Response Theory. Newburry Park: Sage Publications.
KATAOKA, V. Y. et al. O uso do r no ensino de probabilidade na educação básica: Animation e teachingdemos (the use of r in probability teaching at basic education: Animation and teaching demos). Proc. 18o Simpósio Nacional de Probabilidade e Estatística, São Paulo, 2008.
Lord, F.M. (1952). A theory of test scores (Psychometric Monograph No. 7). Iowa City, IA: Psychometric Society.
Lord, F.M. (1953). The relation of test score to the trait underlying the test. Educational and Psychological Measurement, 13, 517-549.
Lord, F.M., Norvick, M.R. (1968). Statistical Theories of Mental Test Score. Reading: Addison-Wesley.
Lord, F.M. (1980). Applications of Item Response Theory to Practical Testing Problems. Hillsdale: Lawrence Erlbaum Associates.
Lima, P. D. S., Ambrosio, A. P., Brancher, J. D., and Felix, I. (2018). Sysenadeanalise das questoes de provas do enade organizadas pelos temas abordados. In Anais dos Workshops do Congresso Brasileiro de Informatica na Educação, volume 7, page 419.
MATIAS, J. P. S. Uma ferramenta para visualização do desempenho dos cursos da UFC Quixadá no ENADE. Trabalho de Conclusão de Curso (Ciência da Computação) – Universidade Federal do Ceará, Quixadá, 2026.
NOGUEIRA, S. O. ENADE: Analise de itens de formação geral e de estatística pela TRI. Dissertação de Mestrado, Programa de PósGraduação em Psicologia, Universidade São Francisco, Itatiba, 2008.
PASQUALI, L. Psicometria: teoria dos testes na psicologia e na educação. Petrópolis: Vozes, 2003.
Pestana, MH, & Gageiro, JG (2003). Análise de dados para ciências sociais: A complementaridade de SPSS [Data Analysis for Social Sciences: The Complementarity of SPSS] (3ª ed.). Lisboa: Edições Silabo.
PASQUALI, L. TRI - Teoria de Resposta ao Item: teoria, procedimentos e aplicações. Brasília: LabPAM/UnB, 2007.
PRIMI, Ricardo et al. Análise do funcionamento diferencial dos itens do Exame Nacional do Estudante (Enade) de Psicologia de 2006. Psico-USF, São Paulo, SP, v. 15, n. 3, p. 379-393, 2010.
PRIMI, R.; HUTZ, C. S.; SILVA, M. C. R. A prova do ENADE de psicologia 2006: concepção, construção e análise psicométrica da prova. Avaliação Psicológica, v. 10, n. 3, p. 271-294, 2011.
Rasch, G. (1960, 1980). Probabilistic models for some intelligence and attainment tests. Chicago, IL: MESA Press.
Rizopoulos, D. (2006). ltm: An R package for latent variable modelling and item response theory analyses. Journal of Statistical Software, 17(5), 1–25.
RABELO, M. Avaliação Educacional: Fundamentos, Metodologia e Aplicações no Contexto Brasileiro. Rio de Janeiro. SBM, 2013.
R DEVELOPMENT CORE TEAM. R: A Language and Environment for Statistical Computing, 2026. R Foundation for Statistical Computing. Vienna, Austria. ISBN: 3-90005107-0.
RAMOS, M. S.; OLIVEIRA, P. T. G.; BRAGA, A. R. Análise do Desempenho dos Estudantes do Curso Redes de Computadores da Universidade Federal do Ceará no ENADE. In: Anais do XXXII Workshop sobre Educação em Computação (WEI). Porto Alegre: SBC, 2024. p. 658-668.
RSTUDIO. RStudio: Integrated development environment for R (Versão 4.2.2) [Computer software]. Boston, MA.
Samejima, R. (1969). Estimation of latent ability using a response pattern of graded scores (Psychometric Monograph No. 17). Psychometric Society.
Samejima, F. (1972). A general model for tree-response data (Psychometric Monograph, No. 18). Psychometric Society.
SCHWARZ, G. Estimating the dimensional of a model. Annals of Statistics, Hayward, v.6, n.2, p.461-464, Mar. 1978.
SCHER, V. T. et al. Uma aplicação da teoria da resposta ao item na avaliação do ENADE do curso de Administração. XIV Colóquio Internacional de Gestão Universitária, Florianópolis-SC, 3 a 5 de dezembro de 2014.
SIEVERT, C. et al. Plotly: Create Interactive Web Graphics via plotly.js. 2021. Disponível em: Acesso em: 03 fev. 2021.
THIMOTY, A. B. Confirmatory factor analysis for applied research. 2. ed. New York: The Guilford Press, 2015.
TRUJILLO, D. E. S. Análise Automatizada de Dados do ENADE com aplicação para os Cursos de Ciência da Computação. In: Anais do Workshop sobre Educação em Computação (WEI). Porto Alegre: SBC, 2025.
ANDERSON, L. W.; KRATHWOHL, D. R. A taxonomy for learning, teaching, and assessing: A revision of Bloom's taxonomy of educational objectives. New York: Longman, 2001.
Andrade, D.F., Tavares, H.R., Cunha, R.V. (2000). Teoria da Resposta ao Item: Conceitos e Aplicações. São Paulo: Associação Brasileira de Estatística.
Araújo, R. A. (2019). Análise dos microdados do Enade: proposta de uma ferramenta de exploração utilizando mineração de dados. Dissertação (Mestrado em Ciência da Computação) - Universidade Federal de Goiás, Goiânia.
Birnbaum, A. (1968). Some latent trait models and their use in inferring and examinee's ability. In F.M. Lord & M.R. Novick, Statistical theories of mental test scores. Reading, MA: Addison-Wesley, ch. 17-20.
Bock, R. D. and Zimowski, M. F. (1997). Multiple Group IRT. In Handbook of Modern Item Response Theory. W.J. van der Linder e R.K. Hambleton Eds. New York: Spring-Verlag.
Baker, F.B.(2001). The basics of item response theory. Washington, DC: ERIC.
BORGATTO, A. F.; ANDRADE, D. F. de. Análise clássica de testes com diferentes graus de dificuldade. Estudos em Avaliação Educacional, São Paulo, v. 23, n. 52, p. 146–156, 2012.
BRASIL Instituto Nacional de Estudos e Pesquisas Educacionais Anísio Teixeira Sinaes. Brasília, 2017.
CHARÃO, Andrea S.; WIECHORK, Karina; RODRIGUES, Marlon L. S.; BARBOSA, Fernando P.. Explorando Resultados por Questão no Enade em Ciência da Computação para Subsidiar Revisão de Projeto Pedagógico de Curso. In: WORKSHOP SOBRE EDUCAÇÃO EM COMPUTAÇÃO (WEI), 28. , 2020, Cuiabá. Anais [...]. Porto Alegre: Sociedade Brasileira de Computação, 2020 . p. 16-20. ISSN 2595-6175.
CUNHA, Renan; SALES, Claudomiro; SANTOS, Reginaldo. Análise Automática com os Microdados do ENADE para Melhoria do Ensino dos Cursos de Ciência da Computação. In: WORKSHOP SOBRE EDUCAÇÃO EM COMPUTAÇÃO (WEI),29., 2021, Evento Online. Anais [...]. Porto Alegre: Sociedade Brasileira de Computação, 2021 . p. 208-217. ISSN 2595-6175.
Camargo, R. V. W., Camargo, R. de C. C. P., Andrade, D. F. de, & Bornia, A. C. (2016). Desempenho dos alunos de ciências contábeis na prova ENADE/2012: uma aplicação da Teoria da Resposta ao Item. Revista De Educação E Pesquisa Em Contabilidade (REPeC), 10(3). DOI: 10.17524/repec.v10i3.140.
Coelho, E. C., Ribeiro Junior, P. J. & Bonat, W. H. (2014). Exame nacional de desenvolvimento de estudantes de estatística-desafios e perspectivas pela TRI. Revista da Estatística da Universidade Federal de Ouro Preto, 3(2), pp. 323-337.
Chalmers, R., P. (2012). mirt: A Multidimensional Item Response Theory Package for the R Environment. Journal of Statistical Software, 48(6), 1-29.
Hambleton, R.K., Swaminathan, H., Rogers, H.J. (1991). Fundamentals of Item Response Theory. Newburry Park: Sage Publications.
KATAOKA, V. Y. et al. O uso do r no ensino de probabilidade na educação básica: Animation e teachingdemos (the use of r in probability teaching at basic education: Animation and teaching demos). Proc. 18o Simpósio Nacional de Probabilidade e Estatística, São Paulo, 2008.
Lord, F.M. (1952). A theory of test scores (Psychometric Monograph No. 7). Iowa City, IA: Psychometric Society.
Lord, F.M. (1953). The relation of test score to the trait underlying the test. Educational and Psychological Measurement, 13, 517-549.
Lord, F.M., Norvick, M.R. (1968). Statistical Theories of Mental Test Score. Reading: Addison-Wesley.
Lord, F.M. (1980). Applications of Item Response Theory to Practical Testing Problems. Hillsdale: Lawrence Erlbaum Associates.
Lima, P. D. S., Ambrosio, A. P., Brancher, J. D., and Felix, I. (2018). Sysenadeanalise das questoes de provas do enade organizadas pelos temas abordados. In Anais dos Workshops do Congresso Brasileiro de Informatica na Educação, volume 7, page 419.
MATIAS, J. P. S. Uma ferramenta para visualização do desempenho dos cursos da UFC Quixadá no ENADE. Trabalho de Conclusão de Curso (Ciência da Computação) – Universidade Federal do Ceará, Quixadá, 2026.
NOGUEIRA, S. O. ENADE: Analise de itens de formação geral e de estatística pela TRI. Dissertação de Mestrado, Programa de PósGraduação em Psicologia, Universidade São Francisco, Itatiba, 2008.
PASQUALI, L. Psicometria: teoria dos testes na psicologia e na educação. Petrópolis: Vozes, 2003.
Pestana, MH, & Gageiro, JG (2003). Análise de dados para ciências sociais: A complementaridade de SPSS [Data Analysis for Social Sciences: The Complementarity of SPSS] (3ª ed.). Lisboa: Edições Silabo.
PASQUALI, L. TRI - Teoria de Resposta ao Item: teoria, procedimentos e aplicações. Brasília: LabPAM/UnB, 2007.
PRIMI, Ricardo et al. Análise do funcionamento diferencial dos itens do Exame Nacional do Estudante (Enade) de Psicologia de 2006. Psico-USF, São Paulo, SP, v. 15, n. 3, p. 379-393, 2010.
PRIMI, R.; HUTZ, C. S.; SILVA, M. C. R. A prova do ENADE de psicologia 2006: concepção, construção e análise psicométrica da prova. Avaliação Psicológica, v. 10, n. 3, p. 271-294, 2011.
Rasch, G. (1960, 1980). Probabilistic models for some intelligence and attainment tests. Chicago, IL: MESA Press.
Rizopoulos, D. (2006). ltm: An R package for latent variable modelling and item response theory analyses. Journal of Statistical Software, 17(5), 1–25.
RABELO, M. Avaliação Educacional: Fundamentos, Metodologia e Aplicações no Contexto Brasileiro. Rio de Janeiro. SBM, 2013.
R DEVELOPMENT CORE TEAM. R: A Language and Environment for Statistical Computing, 2026. R Foundation for Statistical Computing. Vienna, Austria. ISBN: 3-90005107-0.
RAMOS, M. S.; OLIVEIRA, P. T. G.; BRAGA, A. R. Análise do Desempenho dos Estudantes do Curso Redes de Computadores da Universidade Federal do Ceará no ENADE. In: Anais do XXXII Workshop sobre Educação em Computação (WEI). Porto Alegre: SBC, 2024. p. 658-668.
RSTUDIO. RStudio: Integrated development environment for R (Versão 4.2.2) [Computer software]. Boston, MA.
Samejima, R. (1969). Estimation of latent ability using a response pattern of graded scores (Psychometric Monograph No. 17). Psychometric Society.
Samejima, F. (1972). A general model for tree-response data (Psychometric Monograph, No. 18). Psychometric Society.
SCHWARZ, G. Estimating the dimensional of a model. Annals of Statistics, Hayward, v.6, n.2, p.461-464, Mar. 1978.
SCHER, V. T. et al. Uma aplicação da teoria da resposta ao item na avaliação do ENADE do curso de Administração. XIV Colóquio Internacional de Gestão Universitária, Florianópolis-SC, 3 a 5 de dezembro de 2014.
SIEVERT, C. et al. Plotly: Create Interactive Web Graphics via plotly.js. 2021. Disponível em: Acesso em: 03 fev. 2021.
THIMOTY, A. B. Confirmatory factor analysis for applied research. 2. ed. New York: The Guilford Press, 2015.
TRUJILLO, D. E. S. Análise Automatizada de Dados do ENADE com aplicação para os Cursos de Ciência da Computação. In: Anais do Workshop sobre Educação em Computação (WEI). Porto Alegre: SBC, 2025.
Publicado
05/10/2026
Como Citar
VALENTE, Mário Diego Rocha; MONTEIRO, Dionne Cavalcante; TAVARES, Heliton Ribeiro.
Mensuração da Proficiência dos Estudantes do Curso de Bacharelado em Sistemas de Informação, na Prova do ENADE (2017) via Teoria de Resposta ao Item. In: SIMPÓSIO BRASILEIRO DE INFORMÁTICA NA EDUCAÇÃO (SBIE), 37. , 2026, Goiânia/GO.
Anais [...].
Porto Alegre: Sociedade Brasileira de Computação,
2026
.
p. 1-15.
DOI: https://doi.org/10.5753/sbie.2026.23539.
