Você sabe diferenciar um resumo escrito por humanos do gerado pelo ChatGPT?

  • Francisco das C. F. Almeida UFPB
  • Yuska P. C. Aguiar UFPB
  • Rafael M. Magalhaes UFPB

Resumo


O ChatGPT gera textos artificialmente levando a discussões sobre produtividade, autoria e ética. Este estudo explora a percepção de acadêmicos sobre a origem, artificial ou humana, de resumos de Trabalhos de Conclusão de Curso (TCC) em Engenharia de Software. 23 TCCS foram analisados para extração de informações úteis na geração de resumos via ChatGPT. Os resumos foram disponibilizados, em agrupamentos aleatórios de 6, para classificação. A análise realizada por 25 avaliadores sugere que a maior facilidade em identificar corretamente resumos de origem humana, enquanto que os de origem artificial exigem um olhar técnico para classificação correta.

Referências

ChatGPT. (2022). "Home." Disponível em: [link]. Acesso em 25 de março de 2023.

FIA BUSINESS SCHOOL. (2023). "Chat GPT: o que é e como funciona." Disponível em: [link]. Acesso em 27 de março de 2023.

OpenAI. (2023). "ChatGPT — Notas de lançamento." Disponível em: [link]. Acesso em 03 de abril de 2023.

OpenAI. (s.d.). Documentação da API GPT. Beta. Disponível em: [link]. Acesso em 5 de abril de 2023.

Hardware.com.br. "ChatGPT já está começando a protagonizar problemas com plágios e direitos autorais". Disponível em: [link]. Acesso em 05 de abril de 2023.

Pilatti, L. A., Cantorani, J. R. H., & Cechin, M. R. (2023). Como desenvolver a estrutura IMRaD em artigo original. Retos, 49, 914-925.

Ramos, A. S. M. (s.d.). "Inteligência Artificial Generativa baseada em grandes modelos de linguagem - ferramentas de uso na pesquisa acadêmica." Disponível em: https://doi.org/10.1590/SciELOPreprints.6105.

OpenAI. "Model Index for Researchers." OpenAI, 2021, Disponível em: [link]. Acesso em 05 abril de 2023.

OpenAI. "GPT-4." OpenAI, Disponível em: [link]. Acesso em 06 abril de 2023.
Publicado
16/10/2023
ALMEIDA, Francisco das C. F.; AGUIAR, Yuska P. C.; MAGALHAES, Rafael M.. Você sabe diferenciar um resumo escrito por humanos do gerado pelo ChatGPT?. In: WORKSHOP SOBRE ASPECTOS DA INTERAÇÃO HUMANO-COMPUTADOR NA WEB SOCIAL (WAIHCWS), 14. , 2023, Maceió/AL. Anais [...]. Porto Alegre: Sociedade Brasileira de Computação, 2023 . p. 72-78. ISSN 2596-0296. DOI: https://doi.org/10.5753/waihcws.2023.233777.