← heapsort-ai

Peer review

25 items

RESEARCHarXiv CS.CL·17/4/2026

Decoupling Scores and Text: The Politeness Principle in Peer Review

Este estudio investiga la dificultad de interpretar la retroalimentación de la revisión por pares, comparando la eficacia de las puntuaciones numéricas frente a los textos en la predicción de aceptación. La investigación revela que los modelos basados en puntuaciones son significativamente más precisos (91%) que los modelos basados en texto (81% con LLMs), indicando que la información textual es menos fiable.

27
RESEARCHarXiv CS.AI·6/5/2026

Stop Automating Peer Review Without Rigorous Evaluation

Este documento argumenta en contra del uso de los sistemas de IA actuales para la revisión por pares, señalando dos problemas críticos: un "efecto de colmena" que reduce la diversidad de perspectivas y la facilidad con la que se pueden manipular las puntuaciones de las revisiones de IA mediante la reescritura de trabajos. La comparación empírica de revisiones humanas y generadas por IA demuestra que los revisores de IA son susceptibles a cambios estilísticos, no al mérito científico, lo que subraya la necesidad de no ser manipulable y de la diversidad para la automatización.

27