WestlakeNLP 投稿量子位 | 公众号 QbitAI
审稿不用再等了,高质量的AI审稿平台来了!
如今,AI生成的论文数量激增,如何从海量的AI “水文”中筛选出真正高质量的研究成果,已经成为学术界必须直面的难题。
为此,西湖大学自然语言处理实验室推出了首个AI生成学术成果的开放预印本平台AiraXiv,以及首个模拟人类专家思考链的AI审稿人系统DeepReview
AiraXiv平台地址:https://airaxiv.com
DeepReview论文地址:https://arxiv.org/abs/2503.08569
AiraXiv用于集中管理和展示AI生成的论文,从而减少其对传统人工审稿流程的干扰。
DeepReview则能在短短数分钟内给出比肩人类专家思考链的审稿意见,对大量AI生成论文进行初步筛选,为后续的人类专家评审提供参考。
基于数据集DeepReview-13K,研究人员训练了DeepReviewer-14B模型,其在使用更少tokens的情况下,性能优于CycleReviewer-70B。
不仅如此,在最佳模式下,DeepReviewer-14B在评测中还分别以88.21%和80.20%的胜率超越了GPT-o1和DeepSeek-R1。
AiraXiv:AI生成的学术成果的开放舞台
作为首个致力于AI生成的学术成果归档、展现与评审的开放预印本平台,AiraXiv旨在为AI创造的研究成果提供独立且专业的展示渠道,让优秀的AI作品脱颖而出,同时减轻传统学术社区的负担。
在AiraXiv上,研究人员可以:
快速上传:研究者可以一键提交由AI生成的研究工作,无需繁复流程。即时审稿:每篇论文都可送入DeepReview,几分钟内即可得到详细反馈。高效浏览:系统为每篇论文生成关键词与洞见总结,帮助研究者快速抓住要点。Spotlight推荐:得到AI审稿人认可的优秀论文将被突出展示。
AiraXiv的目标是对AI生成的论文进行单独归档和管理,以减轻低质量内容对传统审稿流程的影响。
同时,它也为高质量的AI生成科研成果提供了独立的存储和检索渠道,使研究者能够更高效地获取有价值的工作。
除此之外,AiraXiv还支持与arXiv的无缝对接:用户可以直接输入arXiv ID,便可直接查看原文以及获得AI审稿意见。
同时,平台还会自动同步最新的cs.AI论文并生成AI审稿意见参考,帮助研究者高效追踪前沿进展。
DeepReview:比肩人类专家的AI审稿人系统
DeepReview是首个模拟人类专家思考链的多阶段AI审稿系统,目标是让AI能够像人类专家一样,进行系统化、可解释的论文评审。其审稿过程分为三个核心环节:
创新性验证:检索并对比相关文献,判断论文的新颖性与引用的准确性。
多维度评估:从合理性、表达、贡献等维度,综合模拟多名审稿专家的意见。
可靠性验证:检查论文逻辑一致性与结论可靠性,避免出现“幻觉式”评价。
在这一框架下,DeepReview能够像真实学者一样,输出循证且全面的审稿意见。
首先,它可以模拟专家审稿,并参照人类审稿标准,明确列出 “Strengths & Weaknesses”。
其次是无论论文优劣,它都会给出完整且有建设性的意见,而非“一句带过”。
最后,它可以将人类专家往往需要数周甚至数月的审稿周期压缩至数分钟,并获得完整且结构化的评审意见。
这种方式不仅可以自动过滤低质量“水文”,让真正有价值的研究脱颖而出,同时还能帮助人类专家将有限的时间与精力集中在最值得关注的突破性成果上。
未来展望
目前,AiraXiv与DeepReview只是冰山一角,更广阔的探索才刚刚启程。
未来,平台将逐步拓展覆盖范围,不仅面向计算机科学领域,还会延伸至更多学科与应用场景。
同时,平台还会持续改进论文关键信息的提取与展示方式,从而提升优质成果的可见性与传播效率。
从更长远的角度来看,这类平台和系统也折射出科研生态的潜在变化:AI或许能够在选题、实验、论文写作与初步审稿等环节发挥越来越大的作用,而人类研究者则将更多地聚焦在具有创造性和突破性的研究问题上。
AiraXiv与DeepReview的实践可以视作这一方向上的早期尝试,未来仍需更多研究者共同参与,才能推动形成更高效、透明的学术交流生态。
西湖大学自然语言处理实验室(WestlakeNLP)成立于2018年9月,由张岳教授领导。
张岳教授毕业于牛津大学,获博士学位,现任西湖大学工学院副院长。他著有剑桥大学出版社出版的《自然语言处理》一书,并担任过EMNLP 2022等多个顶级NLP会议的程序委员会主席。
该实验室目前专注于语言模型推理、泛化和通用人工智能以及自然语言处理的基础与应用研究,探索通用人工智能的实现路径,推动 AI Scientist(AI科学家)的发展,使其能够真正参与并加速科学发现,促进人类科学的持续进步。
实验室主页:https://westlakenlp.com/