Monitoring Neural Training with Topology: A Footprint-Predictable Collapse Index

Ein neuer topologiebasierter Monitor, der Collapse Index (CI), wird vorgeschlagen, um repräsentativen Kollaps im neuronalen Training frühzeitig zu erkennen. Er nutzt schnelle, inkrementelle Updates, um ein frühzeitiges Warnsignal mit geringer Latenz für Interventionen beim LLM-Fine-Tuning und KGE-Training bereitzustellen.