Performance Prediction

Predicting Performance of Symbolic and Prompt Programs with Examples

Este artigo de pesquisa propõe um modelo de "cara ou coroa" para prever o desempenho de programas simbólicos e de prompt em LLMs, usando poucos exemplos e um prior de desempenho. Ele revela que programas simbólicos exibem um desempenho de "tudo ou nada", enquanto programas de prompt têm um prior difuso.