No dia 15 de agosto de 2025, o discente Dário Perereira dos Santos realizou a defesa de sua dissertação de mestrado no Programa de Pós-Graduação Profissional em Engenharia Elétrica (PPEE). O trabalho, intitulado “Avaliação de Grandes Modelos de Linguagem (LLMs) para a Tipificação de Documentos”, investigou o desempenho de diferentes modelos de linguagem de grande escala na classificação automática de documentos digitais.

A pesquisa surge em um momento de intenso avanço dos Modelos de Linguagem de Grande Escala (LLMs), que têm impulsionado aplicações em Processamento de Linguagem Natural (PLN), especialmente em tarefas de organização e classificação textual de grandes volumes de informações. Dário avaliou oito modelos baseados em arquiteturas transformer, incluindo LLaMA, Mistral, Gemma e DeepSeek, por meio de chamadas assíncronas via API.

Os resultados foram analisados segundo métricas clássicas de desempenho, como acurácia, precisão, revocação, F1-score, perplexidade e log-likelihood, considerando diferentes domínios de documentos. A dissertação identificou o LLaMA 3 como o modelo de melhor desempenho, seguido de suas variantes ajustadas, evidenciando a relevância da escolha do modelo de linguagem de acordo com o contexto e a tarefa específica.

Este estudo contribui com subsídios empíricos para a adoção de LLMs em sistemas de gestão documental automatizada. O PPEE parabeniza o discente Dário Perereira dos Santos pela dedicação e pelos relevantes resultados apresentados em sua dissertação.