model migration

2 items

ARTICLEDEV.to AI·5h atrás

Claude Fable 5 dropped this morning. By noon, 13 of my 31 production skills were quietly obsolete.

Um desenvolvedor relata como o lançamento do Claude Fable 5 da Anthropic tornou 13 de suas 31 "skills" de IA em produção obsoletas da noite para o dia. As instruções antigas, criadas para modelos anteriores, agora degradam ativamente a qualidade da saída do novo modelo, exigindo uma reestruturação significativa.

prompt-engineering model migration autonomous agents large language models

RESEARCHarXiv CS.AI·01/05/2026

When Your LLM Reaches End-of-Life: A Framework for Confident Model Migration in Production Systems

Esta pesquisa apresenta uma estrutura para migrar sistemas LLM em produção quando seus modelos subjacentes chegam ao fim de sua vida útil ou precisam ser substituídos. Ela utiliza uma abordagem estatística Bayesiana para calibrar métricas de avaliação automatizadas contra julgamentos humanos, permitindo comparações de modelos confiantes com dados manuais limitados.

Production AI model migration Evaluation Metrics LLM