← heapsort-ai

query generation

3 items

RESEARCHarXiv CS.CL·21d atrás

PQR: A Framework to Generate Diverse and Realistic User Queries that Elicit QA Agent Failures

O artigo apresenta PQR, uma estrutura para gerar consultas de usuário diversas e realistas que provocam falhas em agentes de QA baseados em LLM, superando os métodos existentes que focam em usuários adversários. O PQR funciona através de módulos de refinamento de consulta e de prompt que iteram para criar cenários de teste realistas que expõem as vulnerabilidades dos agentes.

28
RESEARCHarXiv CS.CL·08/05/2026

Generating Query-Focused Summarization Datasets from Query-Free Summarization Datasets

Este artigo propõe um modelo baseado em evidências para gerar consultas a partir de conjuntos de dados de sumarização sem consulta, abordando a escassez de dados para Sumarização Focada em Consulta (QFS). Os resultados experimentais indicam que os resumos gerados com essas consultas baseadas em evidências alcançam pontuações ROUGE competitivas, comprovando sua eficácia para a tarefa de QFS.

27