Banca de DEFESA: MARCOS GABRIEL PEREIRA DA PAZ

Uma banca de DEFESA de MESTRADO foi cadastrada pelo programa.
DISCENTE: MARCOS GABRIEL PEREIRA DA PAZ
DATA : 01/12/2025
HORA: 09:00
LOCAL: Auditorio do CIn - Bloco B (Hibrida)
TÍTULO:

SciCheck: Reasoning Distillation for Biomedical Claim Verification

PALAVRAS-CHAVES:

Verificação de Alegações. Destilação de Raciocínio. Geração
Aumentada por Recuperação. Modelos de Linguagem de Grande Escala.

 

PÁGINAS: 65
RESUMO:

Alegações falsas sobre informações médicas podem gerar consequências
graves. Embora Modelos de Linguagem de Grande Escala (LLMs) já tenham sido
aplicados à verificação desse tipo de alegação, seu desempenho depende
diretamente do acesso a conteúdo relevante e de capacidades sólidas de
raciocínio. Grande parte dos estudos anteriores pressupõe o uso de
evidências de referência durante a inferência ou recorre a estratégias de
escalonamento dispendiosas e intensivas em recursos computacionais.
Entretanto, essas abordagens apresentam limitações em cenários reais de
verificação, nos quais as evidências relevantes são difíceis de localizar e
a eficiência é um fator determinante. Para enfrentar esse desafio, propomos
o SciCheck, uma abordagem inovadora que combina a recuperação de evidências
na web com um processo de destilação de raciocínio. Nosso método realiza o
ajuste fino de um modelo de linguagem de pequeno porte a partir de
trajetórias de raciocínio gerados por um LLM. O processo de destilação
envolve uma etapa de preparação dos dados que evita vazamentos de
informação e seleciona apenas as trajetórias de raciocínio que levam a
respostas corretas. Além disso, o treinamento combina evidências da web e
de referência para aprimorar a robustez do modelo, enquanto a avaliação é
conduzida exclusivamente com recuperação de evidências na web. Realizamos
uma avaliação experimental abrangente em diversos conjuntos de dados de
verificação de alegações. Os resultados demonstram que o SciCheck supera
abordagens concorrentes e modelos proprietários, como o Gemini 2.5 Flash,
na maioria dos cenários, apresentando ao mesmo tempo menor custo
computacional.

 

MEMBROS DA BANCA:
Interno - 2320094 - LUCIANO DE ANDRADE BARBOSA
Externo à Instituição - RAFAEL FERREIRA LEITE DE MELLO - UFRPE
Presidente - 1511095 - TSANG ING REN