AI comprehension

LLM Wire Format Benchmark: Which Format Can AI Actually Read and Write?

Esta investigación evalúa cómo los Modelos de Lenguaje Grandes (LLMs) comprenden y generan datos utilizando varios formatos de cable como JSON y TOON. Los hallazgos muestran que incluso los modelos avanzados luchan significativamente, con JSON fallando a los 500 registros y TOON causando consistentemente errores en la generación en múltiples LLMs de primer nivel.