| Nome do aluno | ELIANE ISADORA FAVERON MACIEL |
|---|---|
| Título do trabalho | Qualidade de testes gerados com LLMs: Um estudo Exploratório com o AutomTest |
| Resumo do trabalho |
A Inteligência Artificial, especialmente por meio das IAs generativas, tem se destacado, atualmente, em diferentes áreas, ao demonstrar capacidade de gerar textos, código-fonte e imagens. A presente pesquisa tem por objetivo investigar como histórias de usuário podem ser utilizadas como entrada para a geração automatizada de testes unitários por modelos de linguagem (LLMs), avaliando a qualidade dos testes gerados em linguagens de programação Java sob a perspectiva de test smells, tipos de história e estratégias de testes adotadas em metodologias ágeis. A pesquisa está estruturada em três eixos principais: (i) a análise da qualidade dos testes unitários produzidos por LLMs, com foco na identificação de test smells; (ii) a exploração de variações na formulação de histórias de usuário, avaliando seu impacto na cobertura e na efetividade dos testes gerados; e (iii) a comparação dos resultados gerados por diferentes LLMs quanto à eficácia dos testes gerados. O estudo adota uma abordagem exploratória. Como parte do método, serão realizadas adaptações no software AutomTest, com o objetivo de ampliar seu suporte a diferentes LLMs e estender o fluxo de geração de testes. Essas adaptações incluem novos a implantação de novos LLMs e incorporação de novas etapas no processo, como a geração automática de classes de equivalência, visando enriquecer os artefatos intermediários utilizados na criação dos testes unitários. Os experimentos controlados utilizarão o AutomTest como plataforma, permitindo a avaliação sistemática dos testes gerados por meio de métricas qualitativas e quantitativas. Espera-se que os resultados contribuam para a compreensão do potencial e das limitações do uso de LLMs no apoio às atividades de teste de software, bem como para o aprimoramento do software AutomTest, por meio da incorporação das adaptações propostas ao longo do estudo. |
| Orientador | Rita Suzana Pitangueira Maciel |
| Membro Titular 1 (com afiliação) | Ivan do Carmo Machado (PGcomp Ufba) |
| Link para o curriculum lattes |
http://lattes.cnpq.br/ |
| Membro Titular 2 (com afiliação) | Rodrigo Rocha Gomes Souza (IC Ufba) |
| Link para o curriculum lattes |
http://lattes.cnpq.br/ |
| Suplente 1 (com afiliação) | Cláudio Nogueira Sant'Anna (Ufba) |
| Link para o curriculum lattes |
http://lattes.cnpq.br/ |
| Suplente 2 (com afiliação) | Ana Patricia Mascarenhas (Uneb0 |
| Link para o curriculum lattes |
http://lattes.cnpq.br/ |
| Data do exame | 12 Mar, 2026 |
| Horário do exame | 2:00 PM |
Data da Defesa:
12/03/2026 - 14:00
Tipo de Defesa:
Qualificação de Mestrado