BaLoRA: Bayesian Low-Rank Adaptation of Large Scale Models

BaLoRA é uma extensão Bayesiana do LoRA que melhora a precisão da adaptação de modelos de grande escala. Esta abordagem inovadora não só quantifica a incerteza, mas também estreita significativamente a lacuna de desempenho em relação ao ajuste fino completo.