The 55.6% problem: why frontier LLMs fail at embedded code

Modelos de linguagem de fronteira (LLMs) apresentam desempenho surpreendentemente baixo (cerca de 50-55%) em tarefas de código embarcado, conforme o novo benchmark EmbedBench. Isso revela uma lacuna significativa em relação ao seu desempenho em outras áreas de desenvolvimento, mesmo testando em poucas plataformas de hardware.