Avaliação da integração do método colaborativo do USARP com LLM
Resumo
A elicitação colaborativa de requisitos de software é essencial para a qualidade dos sistemas, mas enfrenta desafios cognitivos e de coordenação entre participantes. Métodos estruturados, como o USARP, buscam mitigar essas dificuldades por meio de práticas colaborativas. Neste trabalho, investigamos o impacto da integração de Modelos de Linguagem de Grande Escala (LLMs) ao USARP, considerando diferentes estratégias de engenharia de prompts. Um experimento controlado comparou a aplicação tradicional do método com o uso de LLMs em abordagens Zero-Context e Context-Rich. Os resultados indicam melhoria na qualidade dos requisitos, especialmente com prompts enriquecidos, corroborando estudos sobre a influência do contexto no desempenho de LLMs.
Palavras-chave:
Elicitação de requisitos, USARP Tool, LLM, Engenhariade prompt, Colaboração em Engenharia de Software
Referências
Abbasi, M. A., Ihantola, P., Mikkonen, T., and Mäkitalo, N. (2025). Towards human-ai synergy in requirements engineering: A framework and preliminary study. In 2025 Sixth International Conference on Intelligent Data Science Technologies and Applications (IDSTA), pages 81–88.
Brown, T., Mann, B., Ryder, N., Subbiah, M., Kaplan, J. D., Dhariwal, P., Neelakantan, A., Shyam, P., Sastry, G., Askell, A., et al. (2020). Language models are few-shot learners. Advances in neural information processing systems, 33:1877–1901.
Dalpiaz, F. and Niu, N. (2020). Requirements engineering in the days of artificial intelligence. IEEE software, 37(4):7–10.
de Oliveira, G. F., Ferreira, B., and Marques, A. B. (2020). Usarp method: eliciting and describing usability requirements with personas and user stories. In Proceedings of the XXXIV Brazilian Symposium on Software Engineering, pages 437–446.
Diniz, W., Gadelha, B., Steinmacher, I., and França, C. (2025). Habilidades colaborativas no mercado de ti: Uma investigação sobre requisitos de soft skills. In Anais do XX Simpósio Brasileiro de Sistemas Colaborativos, pages 139–150, Porto Alegre, RS, Brasil. SBC.
Fonseca, C., Zaina, L., and Marques, A. (2024). Avaliação de métodos para elicitação e especificação de requisitos de usabilidade com histórias de usuário: Um experimento controlado. In Anais do XXXVIII Simpósio Brasileiro de Engenharia de Software, pages 257–268, Porto Alegre, RS, Brasil. SBC.
Garcia, P., Depollo, J. V., Barroso, L., Figueiredo, E., Constantino, K., Fernandes, F., and Côgo, F. R. Documenting user stories: Does llm help? Gonçalves, E., Lima, I., Sousa, J., Rocha, M., and Rabelo, J. (2024). Gestlab: Software de gestão do conhecimento e processos colaborativos no contexto universitário. In Anais do XIX Simpósio Brasileiro de Sistemas Colaborativos, pages 174–182, Porto Alegre, RS, Brasil. SBC.
Hemmat, A., Sharbaf, M., Kolahdouz-Rahimi, S., Lano, K., and Tehrani, S. Y. (2025). Research directions for using llm in software requirement engineering: a systematic review. Frontiers in Computer Science, Volume 7 - 2025:1519437.
Hou, X., Zhao, Y., Liu, Y., Yang, Z., Wang, K., Li, L., Luo, X., Lo, D., Grundy, J., and Wang, H. (2024). Large language models for software engineering: A systematic literature review. ACM Transactions on Software Engineering and Methodology, 33(8):1–79.
Huang, K., Wang, F., Huang, Y., and Arora, C. (2025). Prompt engineering for requirements engineering: A literature review and roadmap.
Kasauli, R., Knauss, E., Horkoff, J., Liebel, G., and de Oliveira Neto, F. G. (2021). Requirements engineering challenges and practices in large-scale agile system development. Journal of Systems and Software, 172:110851.
Liu, P., Yuan, W., Fu, J., Jiang, Z., Hayashi, H., and Neubig, G. (2023). Pre-train, prompt, and predict: A systematic survey of prompting methods in natural language processing. ACM Computing Surveys, 55(9):1–35.
Mantau, M. and Benitti, F. (2023). The awareness assessment model: measuring the awareness and collaboration support over the participant’s perspective. In Anais do XVIII Simpósio Brasileiro de Sistemas Colaborativos, pages 30–43, Porto Alegre, RS, Brasil. SBC.
Marques, A. B., Fiori, M. V., and Ferreira, B. (2023). Evolving the usarp method to support usability requirements elicitation and specification. In Anais do Workshop em Engenharia de Requisitos - Proceedings of the 26th Workshop on Requirements Engineering (WER2023).
Quattrocchi, G., Pasquale, L., Spoletini, P., and Baresi, L. (2026). Can llms generate user stories and assess their quality? IEEE Transactions on Software Engineering, pages 1–17.
Silva, E. B., Andrade, M. E., Lima, A. M., and Marques, A. B. (2024). Unlock the power of the usarp method: The usarp tool contribution to usability requirements elicitation and specification. In Anais do Workshop em Engenharia de Requisitos - Proceedings of the 27th Workshop on Requirements Engineering (WER2024).
Stefani, C. E. and Duduchi, M. (2023). Elementos de colaboração nos métodos ágeis de desenvolvimento de software. In Anais do XVIII Simpósio Brasileiro de Sistemas Colaborativos, pages 86–100, Porto Alegre, RS, Brasil. SBC.
Valadão, J., Andrade, J., and Cordeiro Neto, J. (2014). Abordagens sociotécnicas e os estudos em tecnologias sociais. Pretexto, 15:44–61.
Vogelsang, A. (2024). Prompting the future: Integrating generative llms and requirements engineering. In REFSQ Workshops.
Wei, J., Wang, X., Schuurmans, D., et al. (2022). Chain-of-thought prompting elicits reasoning in large language models. In Proceedings of the AAAI Conference on Artificial Intelligence.
Wohlin, C., Runeson, P., Höst, M., Ohlsson, M. C., Regnell, B., and Wesslén, A. (2024). Experimentation in Software Engineering. Springer Berlin / Heidelberg, 2 edition.
Zamfirescu-Pereira, J. D., Wong, R. Y., Hartmann, B., and Yang, Q. (2023). Prompting large language models for human-centered decision making. ACM Transactions on Computer-Human Interaction, 30(5):1–31.
Brown, T., Mann, B., Ryder, N., Subbiah, M., Kaplan, J. D., Dhariwal, P., Neelakantan, A., Shyam, P., Sastry, G., Askell, A., et al. (2020). Language models are few-shot learners. Advances in neural information processing systems, 33:1877–1901.
Dalpiaz, F. and Niu, N. (2020). Requirements engineering in the days of artificial intelligence. IEEE software, 37(4):7–10.
de Oliveira, G. F., Ferreira, B., and Marques, A. B. (2020). Usarp method: eliciting and describing usability requirements with personas and user stories. In Proceedings of the XXXIV Brazilian Symposium on Software Engineering, pages 437–446.
Diniz, W., Gadelha, B., Steinmacher, I., and França, C. (2025). Habilidades colaborativas no mercado de ti: Uma investigação sobre requisitos de soft skills. In Anais do XX Simpósio Brasileiro de Sistemas Colaborativos, pages 139–150, Porto Alegre, RS, Brasil. SBC.
Fonseca, C., Zaina, L., and Marques, A. (2024). Avaliação de métodos para elicitação e especificação de requisitos de usabilidade com histórias de usuário: Um experimento controlado. In Anais do XXXVIII Simpósio Brasileiro de Engenharia de Software, pages 257–268, Porto Alegre, RS, Brasil. SBC.
Garcia, P., Depollo, J. V., Barroso, L., Figueiredo, E., Constantino, K., Fernandes, F., and Côgo, F. R. Documenting user stories: Does llm help? Gonçalves, E., Lima, I., Sousa, J., Rocha, M., and Rabelo, J. (2024). Gestlab: Software de gestão do conhecimento e processos colaborativos no contexto universitário. In Anais do XIX Simpósio Brasileiro de Sistemas Colaborativos, pages 174–182, Porto Alegre, RS, Brasil. SBC.
Hemmat, A., Sharbaf, M., Kolahdouz-Rahimi, S., Lano, K., and Tehrani, S. Y. (2025). Research directions for using llm in software requirement engineering: a systematic review. Frontiers in Computer Science, Volume 7 - 2025:1519437.
Hou, X., Zhao, Y., Liu, Y., Yang, Z., Wang, K., Li, L., Luo, X., Lo, D., Grundy, J., and Wang, H. (2024). Large language models for software engineering: A systematic literature review. ACM Transactions on Software Engineering and Methodology, 33(8):1–79.
Huang, K., Wang, F., Huang, Y., and Arora, C. (2025). Prompt engineering for requirements engineering: A literature review and roadmap.
Kasauli, R., Knauss, E., Horkoff, J., Liebel, G., and de Oliveira Neto, F. G. (2021). Requirements engineering challenges and practices in large-scale agile system development. Journal of Systems and Software, 172:110851.
Liu, P., Yuan, W., Fu, J., Jiang, Z., Hayashi, H., and Neubig, G. (2023). Pre-train, prompt, and predict: A systematic survey of prompting methods in natural language processing. ACM Computing Surveys, 55(9):1–35.
Mantau, M. and Benitti, F. (2023). The awareness assessment model: measuring the awareness and collaboration support over the participant’s perspective. In Anais do XVIII Simpósio Brasileiro de Sistemas Colaborativos, pages 30–43, Porto Alegre, RS, Brasil. SBC.
Marques, A. B., Fiori, M. V., and Ferreira, B. (2023). Evolving the usarp method to support usability requirements elicitation and specification. In Anais do Workshop em Engenharia de Requisitos - Proceedings of the 26th Workshop on Requirements Engineering (WER2023).
Quattrocchi, G., Pasquale, L., Spoletini, P., and Baresi, L. (2026). Can llms generate user stories and assess their quality? IEEE Transactions on Software Engineering, pages 1–17.
Silva, E. B., Andrade, M. E., Lima, A. M., and Marques, A. B. (2024). Unlock the power of the usarp method: The usarp tool contribution to usability requirements elicitation and specification. In Anais do Workshop em Engenharia de Requisitos - Proceedings of the 27th Workshop on Requirements Engineering (WER2024).
Stefani, C. E. and Duduchi, M. (2023). Elementos de colaboração nos métodos ágeis de desenvolvimento de software. In Anais do XVIII Simpósio Brasileiro de Sistemas Colaborativos, pages 86–100, Porto Alegre, RS, Brasil. SBC.
Valadão, J., Andrade, J., and Cordeiro Neto, J. (2014). Abordagens sociotécnicas e os estudos em tecnologias sociais. Pretexto, 15:44–61.
Vogelsang, A. (2024). Prompting the future: Integrating generative llms and requirements engineering. In REFSQ Workshops.
Wei, J., Wang, X., Schuurmans, D., et al. (2022). Chain-of-thought prompting elicits reasoning in large language models. In Proceedings of the AAAI Conference on Artificial Intelligence.
Wohlin, C., Runeson, P., Höst, M., Ohlsson, M. C., Regnell, B., and Wesslén, A. (2024). Experimentation in Software Engineering. Springer Berlin / Heidelberg, 2 edition.
Zamfirescu-Pereira, J. D., Wong, R. Y., Hartmann, B., and Yang, Q. (2023). Prompting large language models for human-centered decision making. ACM Transactions on Computer-Human Interaction, 30(5):1–31.
Publicado
08/06/2026
Como Citar
MAGALHÃES, Andreza H.; OLIVEIRA, Ana Emilly A.; PINHEIRO, Valéria M.; MARQUES, Anna Beatriz S..
Avaliação da integração do método colaborativo do USARP com LLM. In: SIMPÓSIO BRASILEIRO DE SISTEMAS COLABORATIVOS (SBSC), 21. , 2026, Porto Alegre/RS.
Anais [...].
Porto Alegre: Sociedade Brasileira de Computação,
2026
.
p. 217-230.
ISSN 2326-2842.
DOI: https://doi.org/10.5753/sbsc.2026.20953.
