When Your LLM Reaches End-of-Life: A Framework for Confident Model Migration in Production Systems

Cette recherche présente un cadre pour la migration des systèmes LLM en production lorsque leurs modèles sous-jacents atteignent la fin de vie ou nécessitent un remplacement. Elle utilise une approche statistique bayésienne pour calibrer les métriques d'évaluation automatisées par rapport aux jugements humains, permettant une comparaison fiable des modèles avec des données manuelles limitées.