Andrew Ng 发布AI论文审阅工具Agentic Reviewer，性能接近人类

发布一个新的"Agentic Reviewer"用于研究论文审阅。我开始这个项目时只是一个周末项目，后来 @jyx_su 让它变得更好。

我的灵感来自一位学生，他的论文在3年内被拒了6次。他的反馈循环——每次等待约6个月的反馈——非常缓慢。我们想看看agent工作流能否帮助研究人员更快迭代。

当我们在ICLR 2025的审稿上训练系统，并在测试集上测量Spearman相关性（越高越好）时：
- 两位人类审稿人之间的相关性：0.41
- AI与人类审稿人之间的相关性：0.42

这表明agent审阅正在接近人类水平的表现。

该agent通过搜索arXiv来提供反馈，因此在AI等研究免费发布的领域效果最佳。这是一个实验性工具，但我希望它对你的研究有所帮助。

在这里查看：
http://paperreview.ai