PromptNCE: Pointwise Mutual Information Predictions Using Only LLMs and Contrastive Estimation Prompts

Este artigo apresenta o PromptNCE, um método para estimar a informação mútua pontual (PMI) usando apenas LLMs e prompts de estimativa contrastiva, superando a necessidade de críticos específicos da tarefa. Ele introduz um benchmark com PMI derivado de humanos e demonstra que o PromptNCE atinge correlação Spearman de até 0,82.