When Your LLM Reaches End-of-Life: A Framework for Confident Model Migration in Production Systems

Esta pesquisa apresenta uma estrutura para migrar sistemas LLM em produção quando seus modelos subjacentes chegam ao fim de sua vida útil ou precisam ser substituídos. Ela utiliza uma abordagem estatística Bayesiana para calibrar métricas de avaliação automatizadas contra julgamentos humanos, permitindo comparações de modelos confiantes com dados manuais limitados.