heapsort
RESEARCH27

ILDR: Geometric Early Detection of Grokking

arXiv CS.LG·24 de abril de 2026

Este artículo propone el Ratio de Distancia Inter/Intra-clase (ILDR) como una nueva señal geométrica para la detección temprana del 'grokking' en redes neuronales. El ILDR, calculado a partir de representaciones de la penúltima capa, indica una reorganización geométrica en el espacio de representación antes de que mejore la precisión de validación, superando a los métodos de detección existentes.

Leer original