Usability Evaluation of Brazil’s Higher Education Admission System (SiSU): Barriers and Recommendations
Abstract
Introduction: This paper reports on a large-scale Usability Test of Brazil’s Unified Admission System (SiSU), conducted in partnership with the Ministry of Education (MEC) with 65 participants (including public school, private school, and university students). Objective: The objective was to evaluate the usability of SiSU and provide recommendations for improving the user experience for the 2026 edition. Methodology: The usability test was a large-scale evaluation of the SiSU system. The test included a group of users performing a set of tasks in a controlled environment. Data was recorded on participants’ performance, opinions, and feelings about their experiences. The study also included an online survey and the User Experience Questionnaire Short Version (UEQ-S) to gather impressions of the system. Results: The results showed an 81% task success rate but revealed recurring issues such as technical jargon, interface inconsistencies, navigation difficulties, and form-flling barriers. Improvement proposals were prioritized based on impact and implementation effort, with numerous recommendations classified as low-effort yet high-impact. The study reinforces the importance of applying Human-Computer Interaction (HCI) methods to enhance inclusive digital public services.
Keywords:
Usability Evaluation, Unified Admission System (SiSU), Higher Education Admission, Digital Public Services, E-government
References
Agarwal, P., Prem, D., Bogart, C., Fallatah, A., Castro-Guzman, A. A., Chanpaisaeng, P., Doehring, S., Burnett, M., e Sarma, A. (2023). Socioeconomicmag meets a platform for ses-diverse college students: A case study.
Alves, D. C. e Brito, M. L. L. (2021). Permanência estudantil e autonomia universitária: a questão do sisu no contexto de uma universidade estadual do interior da bahia. Avaliação: Revista da Avaliação da Educação Superior (Campinas), 26:24–44.
Barbosa, P. W., Teixeira, G. D. S., Halmenschlager, V., e Tillmann, E. A. (2024). Segunda opção no SiSU e evasão: uma análise para a FURG. Estudos em Avaliação Educacional, 35:e09186.
Barbosa, S. D. J., Silva, B. S. d., Silveira, M. S., Gasparini, I., Darin, T., e Barbosa, G. D. J. (2021). Interação Humano-Computador e Experiência do Usuário. Autopublicação.
Benavides, L. M. C., Tamayo Arias, J. A., Arango Serna, M. D., Branch Bedoya, J. W., e Burgos, D. (2020). Digital transformation in higher education institutions: A systematic literature review. Sensors, 20(11).
Bond, M., Marín, V. I., Dolch, C., Bedenlier, S., e Zawacki-Richter, O. (2018). Digital transformation in german higher education: student and teacher perceptions and usage of digital media. International journal of educational technology in higher education, 15(1):1–20.
Brasil (2024). Nível de Maturidade. [link]. [Accessed 24-02-2025].
Cabello, A., Imbroisi, D., Alvarez, G., Ferreira, G. V., Arruda, J., e de Freitas, S. (2021). Formas de ingresso em perspectiva comparada: por que o sisu aumenta a evasão? o caso da unb. Avaliação: Revista da Avaliação da Educação Superior (Campinas), 26:446–460.
Cetic.br e NIC.br (2024). Pesquisa sobre o uso das Tecnologias de Informação e Comunicação nos domicílios brasileiros: TIC Domicílios 2024. [link].
Cássia, S., Rosiane, S., Gonçalves, M. L., Henrique, G., e Souza, D. (2024). Vestibular x sisu: uma análise das mudanças nos cursos de administração e ciências contábeis da ufv/crp. Revista Evidência, 13:113–132.
de Castro Ariovaldo, T. C. e Nogueira, C. M. M. (2018). Nova forma de acesso ao ensino superior público: um estado do conhecimento sobre o sistema de seleção unifcada-sisu. Revista Internacional de Educação Superior, 4(1):152–174.
de Castro Rodrigues, D., de Lima, M., da Conceição, M. D., de Siqueira, V. S., e Barbosa, R. M. (2019). A data mining approach applied to the high school national examination: Analysis of aspects of candidates to brazilian universities. In Progress in Artificial Intelligence: 19th EPIA Conference on Artificial Intelligence, EPIA 2019, Vila Real, Portugal, September 3–6, 2019, Proceedings, Part I, pages 3–14. Springer-Verlag.
Demenech, L. M., Neiva-Silva, L., Antochevis, A. F., Almeida, T. R. d., e Dumith, S. C. (2023). Estresse percebido entre estudantes de graduação: fatores associados, a influência do modelo enem/sisu e possíveis consequências sobre a saúde. Jornal Brasileiro de Psiquiatria, 72(1):19–28.
Figueiredo, M. S. (2024). Cotistas preenchendo vagas de ampla concorrência em universidades federais: concorrência concomitante na lista de espera do sisu. Revista Brasileira de Estudos Pedagógicos, 104:e5598.
Figueiredo, R., Pedrosa, G., Gardenghi, J., Venson, E., Judice, M., Judice, A., Costa, F., Silva, W., e Marsicano, G. (2024). Co-design and co-creation in digital public services: A service design approach. In Anais do XII Workshop de Computação Aplicada em Governo Eletrônico, pages 87–98, Porto Alegre, RS, Brasil. SBC.
Flores, S. R. (2017). A democratização do ensino superior no brasil, uma breve história: da colônia a república. Revista Internacional de Educação Superior, 3(2):401–416.
Gonçalves, A. L. (2025). Enem: Um constante desafo para os jovens brasileiros: Certezas ou dÚvidas para uma vaga ao ensino superior. Revista Ibero-Americana de Humanidades, Ciências e Educação, 11(1):733–748.
Kim, J. H., Baek, J., Hwang, C., Bae, C., e Park, J. (2021). Condensed Discriminative Question Set for Reliable Exam Score Prediction, pages 446–450. Springer-Verlag.
Locatelli, M. S., Miranda, M. P., da Silva Costa, I. J., Prates, M. T., Thomé, V., Monteiro, M. Z., Lacerda, T., Pagano, A., Neto, E. R., Meira, W., e Almeida, V. (2025). Examining the Behavior of LLM Architectures within the Framework of Standardized National Exams in Brazil, pages 879–890. AAAI Press.
Luz, J. N. N. d. e Veloso, T. C. M. A. (2014). Sistema de seleção unificada (sisu): refletindo sobre o processo de seleção. Educação e Fronteiras, 4(10):68–83.
Marinho, W., Clua, E. W., Mart{ı},í L., e Marinho, K. (2023). Predicting item response theory parameters using question statements texts. In LAK23: 13th International Learning Analytics and Knowledge Conference, pages 1–10. Association for Computing Machinery.
Melo, D., da Silva, T., Monteiro, I., Sampaio, A., Meireles, C., Braz, L., Cruz, G., e Vasconcelos, D. (2022). Digital government and user experience: how the combination of evaluation methods can contribute to the improvement of m-gov applications. In Proceedings of the XVIII Brazilian Symposium on Information Systems, SBSI ’22, New York, NY, USA. Association for Computing Machinery.
Mendes, M. S. (2015). MALTU – um modelo para avaliação da interação em sistemas sociais a partir da linguagem textual do usuário. Tese (doutorado em ciência da computação), Universidade Federal do Ceará, Fortaleza.
Menezes, K., Junior, D. S., Guerra, J., Ferreira, R., Todt, E., Reis, R., Bona, L., Gonçalves, A. P., e Pereira, R. (2024). Redesign da plataforma mec red: Um estudo informado por diferentes métodos. In Anais do XXXV Simpósio Brasileiro de Informática na Educação, pages 1321–1335, Porto Alegre, RS, Brasil. SBC.
Neris, V. P. A., Rosa, J. C. S., Maciel, C., Pereira, V. C., Galvão, V. F., e Arruda, I. L. (2024). Grandihc-br 2025-2035 - gc4: Sociocultural aspects in human-computer interaction. In Proceedings of the XXIII Brazilian Symposium on Human Factors in Computing Systems, IHC ’24, New York, NY, USA. Association for Computing Machinery.
Nogueira, C. M. M., Nonato, B. F., Ribeiro, G. M., e Flontino, S. R. D. (2017). Promessas e limites: O sisu e sua implementaÇÃo na universidade federal de minas gerais. Educação em Revista, 33:e161036.
Oliveira, L. C. d., Amaral, M. A. a., Bim, S. A., Valença, G., Almeida, L. D. A., Salgado, L. C. d. C., Gasparini, I., e da Silva, C. B. R. (2024). Grandihc-br 2025-2035 - gc3: Plurality and decoloniality in hci. In Proceedings of the XXIII Brazilian Symposium on Human Factors in Computing Systems, IHC ’24, New York, NY, USA. Association for Computing Machinery.
Pagaime, A. (2022). Estudantes com deficiência e as cotas do Sisu: critérios de elegibilidade para ingresso nas universidades federais. Tese (doutorado em educação e ciências sociais: Desigualdades e diferenças), Faculdade de Educação, Universidade de São Paulo, São Paulo.
Pagaime, A. e Prieto, R. G. (2024). Pessoas com deficiência e as cotas do sisu: Mapeamento dos critérios de elegibilidade. Cadernos de Pesquisa, 54:e10610–e10610.
Ribeiro, J. L. L. d. S. e Morais, V. G. (2020). A possível relação entre o sisu e a evasão nos primeiros semestres dos cursos universitários. Revista Brasileira de Educação, 25:e250040.
Ristoff, D. (2014). O novo perfil do campus brasileiro: uma análise do perfil socioeconômico do estudante de graduação. Avaliação: Revista da Avaliação da Educação Superior (Campinas), 19(3):723–747.
Rodrigues, K. R. d. H., Carvalho, L. P., Freire, A. P., e Pimentel, M. d. G. C. (2024). Grandihc-br 2025-2035 - gc2: Ethics and responsibility: Principles regulations and societal implications of human participation in hci research. In Proceedings of the XXIII Brazilian Symposium on Human Factors in Computing Systems, IHC ’24, New York, NY, USA. Association for Computing Machinery.
Schrepp, M., Hinderks, A., e Thomaschewski, J. (2017). Design and evaluation of a short version of the user experience questionnaire (ueq-s). International Journal of Interactive Multimedia and Artificial Intelligence, 4:103.
Silva, F. L. e. (2001). Reflexões sobre o conceito e a função da universidade pública. Estudos Avançados, 15(42):295–304.
Soares, R. H. S. e Fernandes, J. H. C. (2016). Análise exploratória da adesão ao sistema de seleção unificada (sisu) pelas universidades federais por meio da análise de redes sociais mapeadas a partir de dados abertos. InCID: Revista de Ciência da Informação e Documentação, 7(1):181–200.
Sousa Lima, A. M., Choquenaira Florez, A. Y., Aspauza Lescano, A. I., de Oliveira Novaes, J. V., de Fatima Martins, N., Traina Junior, C., Parros Machado de Sousa, E., Rodrigues Junior, J. F., e Ferreira Cordeiro, R. L. (2021). Analysis of enem’s attendants between 2012 and 2017 using a clustering approach. Journal of Information and Data Management, 11(2).
Vargas, H. M. (2019). O SiSU na berlinda: presente e um provocação para o futuro. Educação em Revista, 35:e215020.
Venson, E., da Costa Figueiredo, R. M., e Canedo, E. D. (2024). Leveraging a startup-based approach for digital transformation in the public sector: A case study of brazil’s startup gov.br program. Government Information Quarterly, 41(3):101943.
Wahyu Sulistya, A. Q., Bastian Sulistiyo, B., Aditya, F., Aritonang, I. D., Amos Simangunsong, S., Shihab, M. R., e Ranti, B. (2019). A case study of indonesian government digital transformation: Improving public service quality through e-government implementation. In 2019 5th International Conference on Science and Technology (ICST), volume 1, pages 1–6.
Alves, D. C. e Brito, M. L. L. (2021). Permanência estudantil e autonomia universitária: a questão do sisu no contexto de uma universidade estadual do interior da bahia. Avaliação: Revista da Avaliação da Educação Superior (Campinas), 26:24–44.
Barbosa, P. W., Teixeira, G. D. S., Halmenschlager, V., e Tillmann, E. A. (2024). Segunda opção no SiSU e evasão: uma análise para a FURG. Estudos em Avaliação Educacional, 35:e09186.
Barbosa, S. D. J., Silva, B. S. d., Silveira, M. S., Gasparini, I., Darin, T., e Barbosa, G. D. J. (2021). Interação Humano-Computador e Experiência do Usuário. Autopublicação.
Benavides, L. M. C., Tamayo Arias, J. A., Arango Serna, M. D., Branch Bedoya, J. W., e Burgos, D. (2020). Digital transformation in higher education institutions: A systematic literature review. Sensors, 20(11).
Bond, M., Marín, V. I., Dolch, C., Bedenlier, S., e Zawacki-Richter, O. (2018). Digital transformation in german higher education: student and teacher perceptions and usage of digital media. International journal of educational technology in higher education, 15(1):1–20.
Brasil (2024). Nível de Maturidade. [link]. [Accessed 24-02-2025].
Cabello, A., Imbroisi, D., Alvarez, G., Ferreira, G. V., Arruda, J., e de Freitas, S. (2021). Formas de ingresso em perspectiva comparada: por que o sisu aumenta a evasão? o caso da unb. Avaliação: Revista da Avaliação da Educação Superior (Campinas), 26:446–460.
Cetic.br e NIC.br (2024). Pesquisa sobre o uso das Tecnologias de Informação e Comunicação nos domicílios brasileiros: TIC Domicílios 2024. [link].
Cássia, S., Rosiane, S., Gonçalves, M. L., Henrique, G., e Souza, D. (2024). Vestibular x sisu: uma análise das mudanças nos cursos de administração e ciências contábeis da ufv/crp. Revista Evidência, 13:113–132.
de Castro Ariovaldo, T. C. e Nogueira, C. M. M. (2018). Nova forma de acesso ao ensino superior público: um estado do conhecimento sobre o sistema de seleção unifcada-sisu. Revista Internacional de Educação Superior, 4(1):152–174.
de Castro Rodrigues, D., de Lima, M., da Conceição, M. D., de Siqueira, V. S., e Barbosa, R. M. (2019). A data mining approach applied to the high school national examination: Analysis of aspects of candidates to brazilian universities. In Progress in Artificial Intelligence: 19th EPIA Conference on Artificial Intelligence, EPIA 2019, Vila Real, Portugal, September 3–6, 2019, Proceedings, Part I, pages 3–14. Springer-Verlag.
Demenech, L. M., Neiva-Silva, L., Antochevis, A. F., Almeida, T. R. d., e Dumith, S. C. (2023). Estresse percebido entre estudantes de graduação: fatores associados, a influência do modelo enem/sisu e possíveis consequências sobre a saúde. Jornal Brasileiro de Psiquiatria, 72(1):19–28.
Figueiredo, M. S. (2024). Cotistas preenchendo vagas de ampla concorrência em universidades federais: concorrência concomitante na lista de espera do sisu. Revista Brasileira de Estudos Pedagógicos, 104:e5598.
Figueiredo, R., Pedrosa, G., Gardenghi, J., Venson, E., Judice, M., Judice, A., Costa, F., Silva, W., e Marsicano, G. (2024). Co-design and co-creation in digital public services: A service design approach. In Anais do XII Workshop de Computação Aplicada em Governo Eletrônico, pages 87–98, Porto Alegre, RS, Brasil. SBC.
Flores, S. R. (2017). A democratização do ensino superior no brasil, uma breve história: da colônia a república. Revista Internacional de Educação Superior, 3(2):401–416.
Gonçalves, A. L. (2025). Enem: Um constante desafo para os jovens brasileiros: Certezas ou dÚvidas para uma vaga ao ensino superior. Revista Ibero-Americana de Humanidades, Ciências e Educação, 11(1):733–748.
Kim, J. H., Baek, J., Hwang, C., Bae, C., e Park, J. (2021). Condensed Discriminative Question Set for Reliable Exam Score Prediction, pages 446–450. Springer-Verlag.
Locatelli, M. S., Miranda, M. P., da Silva Costa, I. J., Prates, M. T., Thomé, V., Monteiro, M. Z., Lacerda, T., Pagano, A., Neto, E. R., Meira, W., e Almeida, V. (2025). Examining the Behavior of LLM Architectures within the Framework of Standardized National Exams in Brazil, pages 879–890. AAAI Press.
Luz, J. N. N. d. e Veloso, T. C. M. A. (2014). Sistema de seleção unificada (sisu): refletindo sobre o processo de seleção. Educação e Fronteiras, 4(10):68–83.
Marinho, W., Clua, E. W., Mart{ı},í L., e Marinho, K. (2023). Predicting item response theory parameters using question statements texts. In LAK23: 13th International Learning Analytics and Knowledge Conference, pages 1–10. Association for Computing Machinery.
Melo, D., da Silva, T., Monteiro, I., Sampaio, A., Meireles, C., Braz, L., Cruz, G., e Vasconcelos, D. (2022). Digital government and user experience: how the combination of evaluation methods can contribute to the improvement of m-gov applications. In Proceedings of the XVIII Brazilian Symposium on Information Systems, SBSI ’22, New York, NY, USA. Association for Computing Machinery.
Mendes, M. S. (2015). MALTU – um modelo para avaliação da interação em sistemas sociais a partir da linguagem textual do usuário. Tese (doutorado em ciência da computação), Universidade Federal do Ceará, Fortaleza.
Menezes, K., Junior, D. S., Guerra, J., Ferreira, R., Todt, E., Reis, R., Bona, L., Gonçalves, A. P., e Pereira, R. (2024). Redesign da plataforma mec red: Um estudo informado por diferentes métodos. In Anais do XXXV Simpósio Brasileiro de Informática na Educação, pages 1321–1335, Porto Alegre, RS, Brasil. SBC.
Neris, V. P. A., Rosa, J. C. S., Maciel, C., Pereira, V. C., Galvão, V. F., e Arruda, I. L. (2024). Grandihc-br 2025-2035 - gc4: Sociocultural aspects in human-computer interaction. In Proceedings of the XXIII Brazilian Symposium on Human Factors in Computing Systems, IHC ’24, New York, NY, USA. Association for Computing Machinery.
Nogueira, C. M. M., Nonato, B. F., Ribeiro, G. M., e Flontino, S. R. D. (2017). Promessas e limites: O sisu e sua implementaÇÃo na universidade federal de minas gerais. Educação em Revista, 33:e161036.
Oliveira, L. C. d., Amaral, M. A. a., Bim, S. A., Valença, G., Almeida, L. D. A., Salgado, L. C. d. C., Gasparini, I., e da Silva, C. B. R. (2024). Grandihc-br 2025-2035 - gc3: Plurality and decoloniality in hci. In Proceedings of the XXIII Brazilian Symposium on Human Factors in Computing Systems, IHC ’24, New York, NY, USA. Association for Computing Machinery.
Pagaime, A. (2022). Estudantes com deficiência e as cotas do Sisu: critérios de elegibilidade para ingresso nas universidades federais. Tese (doutorado em educação e ciências sociais: Desigualdades e diferenças), Faculdade de Educação, Universidade de São Paulo, São Paulo.
Pagaime, A. e Prieto, R. G. (2024). Pessoas com deficiência e as cotas do sisu: Mapeamento dos critérios de elegibilidade. Cadernos de Pesquisa, 54:e10610–e10610.
Ribeiro, J. L. L. d. S. e Morais, V. G. (2020). A possível relação entre o sisu e a evasão nos primeiros semestres dos cursos universitários. Revista Brasileira de Educação, 25:e250040.
Ristoff, D. (2014). O novo perfil do campus brasileiro: uma análise do perfil socioeconômico do estudante de graduação. Avaliação: Revista da Avaliação da Educação Superior (Campinas), 19(3):723–747.
Rodrigues, K. R. d. H., Carvalho, L. P., Freire, A. P., e Pimentel, M. d. G. C. (2024). Grandihc-br 2025-2035 - gc2: Ethics and responsibility: Principles regulations and societal implications of human participation in hci research. In Proceedings of the XXIII Brazilian Symposium on Human Factors in Computing Systems, IHC ’24, New York, NY, USA. Association for Computing Machinery.
Schrepp, M., Hinderks, A., e Thomaschewski, J. (2017). Design and evaluation of a short version of the user experience questionnaire (ueq-s). International Journal of Interactive Multimedia and Artificial Intelligence, 4:103.
Silva, F. L. e. (2001). Reflexões sobre o conceito e a função da universidade pública. Estudos Avançados, 15(42):295–304.
Soares, R. H. S. e Fernandes, J. H. C. (2016). Análise exploratória da adesão ao sistema de seleção unificada (sisu) pelas universidades federais por meio da análise de redes sociais mapeadas a partir de dados abertos. InCID: Revista de Ciência da Informação e Documentação, 7(1):181–200.
Sousa Lima, A. M., Choquenaira Florez, A. Y., Aspauza Lescano, A. I., de Oliveira Novaes, J. V., de Fatima Martins, N., Traina Junior, C., Parros Machado de Sousa, E., Rodrigues Junior, J. F., e Ferreira Cordeiro, R. L. (2021). Analysis of enem’s attendants between 2012 and 2017 using a clustering approach. Journal of Information and Data Management, 11(2).
Vargas, H. M. (2019). O SiSU na berlinda: presente e um provocação para o futuro. Educação em Revista, 35:e215020.
Venson, E., da Costa Figueiredo, R. M., e Canedo, E. D. (2024). Leveraging a startup-based approach for digital transformation in the public sector: A case study of brazil’s startup gov.br program. Government Information Quarterly, 41(3):101943.
Wahyu Sulistya, A. Q., Bastian Sulistiyo, B., Aditya, F., Aritonang, I. D., Amos Simangunsong, S., Shihab, M. R., e Ranti, B. (2019). A case study of indonesian government digital transformation: Improving public service quality through e-government implementation. In 2019 5th International Conference on Science and Technology (ICST), volume 1, pages 1–6.
Published
2025-09-08
How to Cite
DA COSTA NUNES, Erik Henrique; SILVA, Pedro Victor de Sousa; SOUZA, Anna Julia Abreu Lima de; MONTEIRO, Ingrid Teixeira; VASCONCELOS, Davi; YAMADA, Erika Mayumi Kasai.
Usability Evaluation of Brazil’s Higher Education Admission System (SiSU): Barriers and Recommendations. In: BRAZILIAN SYMPOSIUM ON HUMAN FACTORS IN COMPUTATIONAL SYSTEMS (IHC), 24. , 2025, Belo Horizonte/MG.
Anais [...].
Porto Alegre: Sociedade Brasileira de Computação,
2025
.
p. 80-105.
DOI: https://doi.org/10.5753/ihc.2025.10807.
