Hugging Face Blog·· 1 天前精选AI 评分69
Ai2 发布 Old Ideas, Novel Problems 研究：LLM 判断研究想法新颖性远不可靠
Can we trust LLMs to judge whether a research idea is novel?
AI 导读
Ai2 发布 Old Ideas, Novel Problems 研究及配套基准、数据和代码，测试 LLM 作为新颖性评审（novelty judge）的可靠性。
推荐理由
用 ICLR 评审挖掘构建新颖性基准，量化了 prompt、检索与推理预算对 LLM 新颖性判断的剧烈影响，对自动科研评估工具的选型和验证方法有直接参考价值。
来源：Hugging Face Blog · huggingface.co