← heapsort-ai

Peer review

25 items

ARTICLE↑ trendingReddit r/MachineLearning·30/04/2026

Seems ICML is rejecting MANY unanimous positively rated papers [D]

O conteúdo descreve um desalinhamento percebido no processo de revisão da ICML, onde revisores se sentem pressionados a homogeneizar as pontuações para evitar discussões prolongadas, podendo levar à rejeição de artigos positivos. Destaca a relutância dos revisores em atualizar as pontuações, mesmo após as preocupações serem abordadas, criando dinâmicas distorcidas.

42
ARTICLE↑ trendingReddit r/MachineLearning·26/04/2026

How to collect evidence for LLM reviewer? [D]

Um pesquisador recebeu uma rejeição fraca de um avaliador suspeito de usar um LLM, cujos pontos eram irrelevantes e pouco originais, contrastando com o feedback positivo de outros revisores. O autor busca conselhos sobre como coletar evidências e relatar o avaliador ao comitê acadêmico por feedback de baixa qualidade ou gerado por LLM, considerando o desafio de provar o uso de IA.

42
ARTICLE↑ trendingReddit r/MachineLearning·18/04/2026

ICML 2026 - Heavy score variance among various batches? [D]

Um usuário do Reddit levanta a questão da grande variação nas pontuações de artigos entre diferentes lotes de revisão para o ICML 2026, com relatos de lotes com poucas notas altas versus outros com médias elevadas. A discussão explora possíveis causas como diferenças de domínio ou avaliadores mais rigorosos, e se a conferência aborda essa disparidade.

41
RESEARCH↑ trendingReddit r/MachineLearning·12/04/2026

Just did an analysis on ICLR 2025 vs 2026 scores and WOW [D]

O autor realizou uma análise comparativa das pontuações de revisão de artigos para o ICLR 2025 e 2026, observando uma correlação significativamente menor entre os revisores humanos para 2026. Isso sugere uma possível deterioração na consistência da qualidade das revisões em conferências de IA, uma questão relevante para a comunidade de pesquisa.

38
ARTICLE↑ trendingReddit r/MachineLearning·14/04/2026

What is the AC guidance for ICML? (Or: ICML qq thread) [D]

O usuário questiona se há uma pressão maior sobre os Area Chairs (ACs) na ICML para garantir que os revisores forneçam justificativas finais e cheguem a um consenso. Ele observa uma disparidade, vendo engajamento ativo dos ACs e justificativas finais para os artigos que revisou, mas silêncio total e justificativas ausentes para sua própria submissão, apesar de haver alguma discordância nas pontuações.

38
NEWS↑ trendingReddit r/MachineLearning·23/04/2026

UAI 2026 Reviews Waiting Place [D]

Este é um espaço para participantes da UAI 2026 compartilharem suas reações, sejam elas reclamações ou alívio, assim que as revisões da conferência forem divulgadas em breve. Deseja-se boa sorte a todos com seus resultados.

37
ARTICLE↑ trendingReddit r/MachineLearning·01/05/2026

AI/ML Conferences [D]

Um pesquisador de ML expressa desânimo com o sistema de revisão atual para conferências de IA/ML de alto nível, mencionando casos de artigos rejeitados mesmo após os autores abordarem todas as preocupações dos revisores. A postagem busca métodos melhores para garantir um processo de revisão justo para o grande volume de submissões.

36
CASE↑ trendingReddit r/MachineLearning·08/04/2026

[D] Dealing with an unprofessional reviewer using fake references and personal attacks in ICML26

Um autor descreve enfrentar um avaliador extremamente antiprofissional no ICML 2026, que utilizou referências falsas, ataques pessoais e argumentos sem sentido para desqualificar seu trabalho. O autor busca orientação sobre como intervir contra um avaliador que emprega citações fraudulentas e ataques ad hominem no processo de revisão por pares.

35
ARTICLE↑ trendingReddit r/MachineLearning·06/05/2026

NeurIPS 2026 AC-Pilot, how much would you trust this? [D]

O conteúdo questiona a eficácia do sistema "AC-Pilot" do NeurIPS 2026, que visa focar os revisores em preocupações listadas. Ele levanta dúvidas se os revisores desconsiderarão questões não listadas ou ainda priorizarão as pontuações brutas em vez das preocupações suficientemente abordadas, apesar das diretrizes.

35
RESEARCH↑ trendingReddit r/MachineLearning·08/04/2026

ICML 2026 am I cooked? [D]

Um pesquisador em transição da física teórica para IA busca feedback sobre as chances de aceitação de seu artigo de teoria de deep learning no ICML 2026, com base em pontuações de revisão. Ele descreve a evolução das avaliações e as condições para melhorar o resultado, enquanto também busca financiamento para a conferência.

33
ARTICLE↑ trendingReddit r/MachineLearning·13/04/2026

[ICML 2026] Extending the deadline for reviewer final justifications while not extending for Author-AC comments was a huge mistake [D]

O autor critica a decisão de estender o prazo para justificativas finais de revisores no ICML 2026 sem estender para o contato de autores com ACs, considerando-a um grande erro. Um revisor levantou novas questões críticas na justificativa final, não mencionadas antes, o que pode comprometer um artigo com outras avaliações fortes.

33
ARTICLE↑ trendingReddit r/MachineLearning·13/04/2026

Which conference/journal do you believe currently has the most fair and accurate review process?[D]

Este conteúdo aborda a percepção de que a qualidade do processo de revisão em conferências e periódicos importantes está diminuindo, resultando em decisões de aceitação quase aleatórias. O autor busca recomendações para uma conferência ou periódico com um processo de revisão mais justo e preciso.

32
RESEARCHarXiv CS.CL·18d atrás

Sem-Detect: Semantic Level Detection of AI Generated Peer-Reviews

Sem-Detect é um método inovador para distinguir revisões por pares escritas por humanos de revisões geradas por IA, combinando características textuais com análise semântica em nível de reivindicação. Ele explora a observação de que modelos de IA tendem a convergir para pontos semelhantes, enquanto revisores humanos introduzem ideias mais únicas, permitindo a detecção de revisões totalmente de IA e aquelas refinadas por LLMs mas com julgamento humano.

28