We Ran 52 AI Coding Benchmarks. Here's Every Uncomfortable Thing We Found.

Cette étude a mené 52 benchmarks de codage IA, révélant que le brief initial est la variable la plus critique dans le développement assisté par IA. Un brief structuré (CONTRACT.md) réduit les coûts de 54 % et améliore la qualité de 5/10 à 9/10, tandis que les équipes d'agents et les boucles de réessai se sont avérées coûteuses ou inefficaces.