ITBench-AA: Frontier Models Score Below 50% on the First Benchmark for Agentic Enterprise IT Tasks — by Artificial Analysis and IBM

ITBench-AA, o primeiro benchmark para tarefas de TI empresariais agenticas, revela que os modelos de IA atuais obtêm pontuações abaixo de 50%. Este estudo da Artificial Analysis e IBM destaca a necessidade de avanços significativos nos modelos para lidar eficazmente com as exigências da TI empresarial.