RESEARCH29
Structural Instability of Feature Composition
arXiv CS.LG·8 mai 2026
Cet article présente un cadre géométrique pour analyser l'instabilité des unions de caractéristiques dans les Autoencodeurs Sparses (SAEs), notamment en ce qui concerne la direction compositionnelle. Il dérive un seuil asymptotique de collapse compositionnel sous un modèle de dictionnaire sphérique.
Lire l'original ↗