AI comprehension

LLM Wire Format Benchmark: Which Format Can AI Actually Read and Write?

Cette recherche évalue la manière dont les grands modèles de langage (LLM) comprennent et génèrent des données à l'aide de divers formats de transmission comme JSON et TOON. Les résultats montrent que même les modèles avancés rencontrent des difficultés significatives, avec JSON qui échoue à 500 enregistrements et TOON qui provoque constamment des erreurs de génération sur plusieurs LLM de premier plan.