Criação e aplicação de Testes Adaptativos Informatizados: um estudo de caso

• Leandro Henrique Mendonça de Oliveira USP
• Sandra Maria Aluísio USP
• Jean Píton Gonçalves USP

Resumo

O principal objetivo da avaliação diagnóstica é medir o conhecimento do aluno e posicioná-lo adequadamente nos programas de ensino. Baseado nos modelos de resposta da Teoria de Resposta de Itens (TRI), o teste adaptativo informatizado em conjunto com um banco de itens sensível ao conteúdo, é uma das implementações mais elegantes no campo da avaliação informatizada. Este trabalho apresenta o processo de criação e calibração de um banco de itens sensível ao conteúdo referente ao Exame de Proficiência em Inglês (EPI) para os alunos da pós-graduação do Instituto de Ciências Matemáticas e de Computação (ICMC) da Universidade de São Paulo (USP). Especificamente, são descritas todas as atividades envolvidas no processo de desenvolvimento, estruturação e calibração do banco de itens.

Referências

Aquino, V. T. (2001) “Avaliação automática de exames de proficiência em inglês ”, Dissertação de Mestrado, Universidade de São Paulo – USP, São Carlos, 2001.

Baker F. (1998) “Item Response Theory Parameter Estimation Techniques ”, MARCEL DEKKER, INC, 1998.

Bilmes, J. A. (1998) “A gentle tutorial of the algorithm and its application to parameter estimation mixture and hidden markov models”, Technical Report TC-97-021, International Computer Science Institute, 1998.

Gonçalves, J. P. (2004) “A integração de Testes Adaptativos Informatizados e Ambientes Computacionais de Tarefas para o aprendizado do inglês instrumental ”, Dissertação de mestrado, ICMC-USP, São Carlos, Brasil, 2004.

Gonçalves, J. P., Aluísio, S. M., Oliveira, L. H. M., e Oliveira Jr. O. N. (2004) “A Learning Environment for English for Academic Purposes based on Adaptive Tests and Task-based Systems” In: Proceedings of ITS’2004, (no prelo)

Hambleton, R. K. e Swaminathan, H. (1985) “Item Response Theory: Principles and Applications ”, Kluwer Nijhoff, 1985.

Hanson, B. (1996) “Estimating parametric continuous latent distributions”, Author’s Note, 1996.

Huang, S. X. (1996) “A content-balanced adaptive testing algorithm for computer-based training systems”, In: ITS’96 International Conference in ITS, Montral, 1996.

Kingsbury, G. G. e Zara, A. R. (1989) “Procedures for selecting items for computerized adaptive tests”, In: Applied measurement in education, 1989, pp. 16.

Meyer, P. L. (1973) “Probabilidade: aplicações à estatística ”, Ao Livro Técnico S.A., 1973.

Olea J., Ponsoda, V. e Prieto, G. (1999) “Tests Informatizados: Fundamentos y Applicaciones ”, Ediciones Pirámede, 1999.

Rudner, M. L. (1998) “An on-line, interactive, computer adaptive testing mini - tutorial”, 1998.

Swales, J. (1990) “Genre Analysis – English in academic and research settings”, Cambridge University Press, 1990.

Wainer, H. e K iely, G. L. (1987) “Item clusters and computerized adaptive testing: a case of testlets”, In: Journal of Educational Measurement, 1987, pp. 16.

Woodruff, D. e Hanson, B. (1997) “Estimation for item response models using the EM algorithm for finite mixtures”, In: Annual Meeting of the Psychometric Society , Tennessee, 1997.

Xcalibre Manual (1997) “User’s manual for the XCALIBRE marginal maximum-likelihood estimation”, Assessment Systems Corporation [link], 1997.