面向 AI 的论文新协议 ARA:把失败实验和代码全打包
研究人员提出面向智能体的研究协议 ARA,用结构化机器包取代传统 PDF 论文。它不仅包含代码与证据,还完整保留被传统论文删掉的失败探索路径,将 AI 复现实验成功率提升至 64.4%。科研成果正从给人类读的叙事转向给 AI 用的原生知识。代码已开源。

读过学术论文的人都知道,论文里讲的故事往往漂亮得不真实。
现实里的科研其实是一团乱麻:调错参、爆显存、推倒重来、被奇怪的 bug 折磨两周,最后好不容易跑通一次。但在写成 PDF 发出来的那一刻,为了凑成一条逻辑顺畅的线性叙事,所有探索过程和失败弯路都被一刀剪掉了。
arXiv 上出现了一篇标题颇具挑衅意味的论文——《最后一篇人类撰写的论文》(The Last Human-Written Paper)。研究团队提出了一种面向智能体的新型研究协议 ARA(Agent-Native Research Artifacts),试图用包含完整探索过程的机器可执行包,取代流传了数百年的传统 PDF 论文。
传统论文藏起来的「叙事税」与「工程税」
研究团队直言,传统的学术发表形式是在给科研强行加税,而且一次收两笔。
第一笔是「叙事税」。现实研究是充满分叉的树状图,但为了塞进期刊或会议论文的叙事模板,所有被否定的假说和走不通的死胡同全被抛弃,宝贵的负面经验彻底蒸发。
第二笔是「工程税」。论文文本通常只满足同行评审阅读,却掩盖了真正复现所需的实现细节。超参数微调、环境配置、补丁修复往往语焉不详,任何人想复现实验,几乎都得从头踩一遍坑。
对人类读者来说,这种信息丢失或许还能靠行业常识脑补;但在 AI 智能体需要去阅读、复现并拓展科研的时代,这两笔税就成了致命路障。
不写 PDF,直接打包整个实验现场
ARA 的思路很简单:别把科研压缩成讲故事的文档,而是做成一个机器可执行的四层结构包。
这四层结构包括最底层的科学逻辑与论点、带完整环境规格的可执行代码、专门记录失败尝试与决策过程的「探索图谱」,以及将每个结论锚定在原始日志和输出上的证据层。
为了不让科学家每天花大把时间写记录,团队配套开发了 Live Research Manager。它像一个后台助理,在研究人员日常写代码、跑实验时,自动捕获每一次微调和报错,逐步生成 ARA 包。此外,团队还提供了能将老旧 PDF 和代码库转为 ARA 的编译器,以及一套自动跑基准测试的评审工具。
根据论文披露的数据,在 PaperBench 和 RE-Bench 测试中,ARA 让 AI 回答论文相关问题的准确率从 72.4% 跃升到了 93.7%;在 RE-Bench 上的实验复现成功率,也从 57.4% 提高到了 64.4%。
不过,保留失败记录也是一把双刃剑。在 RE-Bench 的开放扩展任务中,保留的失败轨迹确实加快了智能体的探索进度,但在某些场景下,也会像思维定式一样限制高能力 Agent 跳出前人尝试过的框框。目前,ARA 的全套代码已经开源。
为什么重要
我们认为,ARA 触及了学术界长期心照不宣的顽疾:学术成果的「第一读者」,正在从人类转变为 AI。
过去科学界不得不忍受复现危机,本质上是因为人类大脑的吞吐量有限,学术论文只能做高密度的线性压缩。ARA 的聪明之处在于,它没有试图教人类怎么把实验报告写得更啰嗦,而是索性改变载体,把学术研究改造成了类似现代软件工程的版本管理系统。
对普通研究者和开发者来说,如果这套工具推广开来,最直观的价值是终结「看论文猜超参数」的痛苦。AI 能在几分钟内跑通前人的基准,而不是花两周时间配环境。
但它的阻力同样显而易见。整个学术界现存的同行评审机制、影响因子评价体系和版权分配,全都是依附在 PDF 之上的。而且要求科研团队在日常工作中挂载后台工具记录每一次试错,在学术惯性、知识产权和隐私考量上面临巨大挑战。但无论如何,当科学探索逐步由智能体接管时,把科研从「叙事」还原为「可执行代码」,看起来已经是一条不可逆的路径。
来源 (2)
- arxiv.org(在新标签页打开)原文arxiv.org
- arxiv.org(在新标签页打开)报道arxiv.org