Uso de LLMs para a classificação de aspectos em feedbacks de desenvolvedores de software (2025)
- Authors:
- Autor USP: FERRARINI, JOSÉ EDUARDO ATHAYDE - ICMC
- Unidade: ICMC
- Subjects: PROCESSAMENTO DE TEXTO; LÍNGUA PORTUGUESA; DESENVOLVIMENTO DE SOFTWARE; APRENDIZADO COMPUTACIONAL
- Language: Português
- Abstract: A evolução dos grandes modelos de linguagem (LLMs) oferece inúmeras oportunidades para realizar processamento de textos, inclusive com modelos especializados na língua Portuguesa, incluindo a análise de sentimentos orientada a aspectos. Este trabalho investiga a aplicação de LLMs e modelos de PLN (SBERT e BerTimbau) na classificação de aspectos em feedbacks de desenvolvedores de software. Para isso, foi gerado um dataset com 5700 feedbacks em português, com auxílio do ChatGPT e depois tratado e complementado com intervenção manual. Os feedbacks do arquivo se distribuem entre 15 aspectos definidos para avaliação de desempenho profissional. O BerTimbau foi refinado (fine-tuning) com esse dataset e comparado com versões base (sem fine-tuning), SBERT e diferentes LLMs. Os resultados indicam que as LLMs apresentam maior capacidade de generalização, com métricas equilibradas (precisão e revocação superiores a 80%), enquanto o BerTimbau com fine-tuning mostrou desempenho competitivo em alguns aspectos, mas com respostas mais rígidas e menor generalização. A principal contribuição deste trabalho é demonstrar o potencial do uso de LLMs para refinamento de modelos de linguagem menores para realização de tarefas mais específicas, identificando também sugestões para melhorar os resultados obtidos.
- Imprenta:
- Publisher place: São Carlos
- Date published: 2025
-
ABNT
FERRARINI, José Eduardo Athayde. Uso de LLMs para a classificação de aspectos em feedbacks de desenvolvedores de software. 2025. Trabalho de Conclusão de Curso (MBA) – Instituto de Ciências Matemáticas e de Computação, Universidade de São Paulo, São Carlos, 2025. Disponível em: https://bdta.abcd.usp.br/directbitstream/7f305a22-8cf6-4ad8-9f90-14c0b570b627/JoseEduardoAthaydeFerrarini_TCC_2025.pdf. Acesso em: 10 mar. 2026. -
APA
Ferrarini, J. E. A. (2025). Uso de LLMs para a classificação de aspectos em feedbacks de desenvolvedores de software (Trabalho de Conclusão de Curso (MBA). Instituto de Ciências Matemáticas e de Computação, Universidade de São Paulo, São Carlos. Recuperado de https://bdta.abcd.usp.br/directbitstream/7f305a22-8cf6-4ad8-9f90-14c0b570b627/JoseEduardoAthaydeFerrarini_TCC_2025.pdf -
NLM
Ferrarini JEA. Uso de LLMs para a classificação de aspectos em feedbacks de desenvolvedores de software [Internet]. 2025 ;[citado 2026 mar. 10 ] Available from: https://bdta.abcd.usp.br/directbitstream/7f305a22-8cf6-4ad8-9f90-14c0b570b627/JoseEduardoAthaydeFerrarini_TCC_2025.pdf -
Vancouver
Ferrarini JEA. Uso de LLMs para a classificação de aspectos em feedbacks de desenvolvedores de software [Internet]. 2025 ;[citado 2026 mar. 10 ] Available from: https://bdta.abcd.usp.br/directbitstream/7f305a22-8cf6-4ad8-9f90-14c0b570b627/JoseEduardoAthaydeFerrarini_TCC_2025.pdf
Download do texto completo
| Tipo | Nome | Link | |
|---|---|---|---|
 |
JoseEduardoAthaydeFerrari... | Direct link |
How to cite
A citação é gerada automaticamente e pode não estar totalmente de acordo com as normas
