ReLoRA: Knowledge-Reusing Adaptation for Fast Rollout of Evolving LLM Services

El artículo presenta ReLoRA, un marco de readaptación que reutiliza el conocimiento para restaurar eficientemente adaptadores LoRA específicos de tareas para servicios de LLM en evolución. Esto aborda el costo computacional del reentrenamiento y la degradación de la calidad de la aplicación ingenua de adaptadores.