Teaching Quality

From Scoring to Explanations: Evaluating SHAP and LLM Rationales for Rubric-based Teaching Quality Assessment

Esta pesquisa propõe uma estrutura para a interpretabilidade ao nível da frase na pontuação baseada em rubricas, combinando atribuições de valor de Shapley com justificativas de grandes modelos de linguagem (LLMs). Ela compara modelos de linguagem pré-treinados ajustados e LLMs direcionados para avaliação da qualidade de ensino, constatando que os PLMs oferecem melhor precisão de previsão apesar da compressão de rótulos.