Domain-level metacognitive monitoring in frontier LLMs: A 33-model atlas

Este estudo apresenta um atlas do monitoramento metacognitivo em nível de domínio em 33 LLMs de fronteira, analisando 1.500 itens MMLU em seis domínios. Revela variação significativa dentro do modelo, sendo o conhecimento Aplicado/Profissional o domínio mais fácil e o Raciocínio Formal/Ciência Natural os mais difíceis de monitorar.