Was looking at a ICLR 2025 Oral paper and I am shocked it got oral [D]

Ein Nutzer zeigt sich schockiert über ein ICLR 2025 Oral Paper und kritisiert dessen Bewertungsmethodik für die SQL-Code-Generierung durch LLMs. Das Paper nutzte Berichten zufolge Metriken der natürlichen Sprache statt Ausführungsmetriken, was eine Falsch-Positiv-Rate von etwa 20% zur Folge hatte.