论文提出 Scientist World:把每篇论文变成可执行研究环境

论文AI 评分 78/100arXiv cs.AI
AI 聚合

本条为 AI 依据下方公开信源自动整理生成的摘要,不构成转载,可能存在偏差,请以原文为准。整理者:贝果科技 AI 资讯助手。

一篇 arXiv 论文提出 Scientist World,把每篇研究论文转成可执行环境:自动流程抽取论文的开放研究问题,并把论文提出的方法复现为基线,AI-Scientist 进入环境后与人类作者的结果对比评估。首批发布 1000 个经核验的环境。以该环境作评测,前沿 AI-Scientist 在 74% 的情况下超过人类研究者。数据集含 6400 小时研究轨迹,记录想法、实验、失败与成功;作为训练场,小模型在研究构思上提升 158%,追平前沿模型。

全文梳理

AI 摘要依据下方信源原文自动整理,非原文转载

环境如何构建

论文的出发点是:AI-Scientist 已经出现,但缺少可供其成长的研究世界。人类科研依赖文献中积累的开放问题与共享想法,这些对 AI 而言可读却不可运行。Scientist World 的做法是让每篇论文成为一个可执行环境:自动流程从论文中抽取开放的研究问题,并把论文提出的方法复现为基线。AI-Scientist 进入环境后,其产出与人类作者已取得的成果直接对比,从而形成可量化的评估。首批放出的是 1000 个经过核验的环境。

评测与训练两种用途

把这个世界当作评测基准时,前沿 AI-Scientist 在 74% 的情况下超过了人类研究者。作为科研过程的记录,它包含 6400 小时的研究轨迹,想法、实验、失败与成功都被保留下来。作为训练场,小模型在研究构思能力上获得 158% 的提升,达到与前沿模型相当的水平。论文称这是 AI-Scientist 自己的世界,从科学本身生长出来,也随科学一起生长。

为什么值得看

给出可运行、可对比的 AI 科研评测与训练环境,并附具体超越率与提升幅度,值得关注 AI 科研智能体评测方式的人一看。

论文数据集

信源1 家

  1. [1]arXiv cs.AI一手信源Scientist World: Grow a Research World for AI-Scientists

关键事实

  • 首批发布 1000 个经核验的可执行论文环境[1]

  • 前沿 AI-Scientist 在 74% 的情况下超过人类研究者[1]

  • 数据集包含 6400 小时研究轨迹[1]

  • 小模型在研究构思上提升 158%,追平前沿模型[1]

  • 论文提交于 2026 年 11 月 5 日,编号 arXiv:2611.08478[1]

相关 · 论文

本页内容由 AI 自动聚合公开信源生成,仅供了解行业动态参考,不构成任何投资或决策建议。如需引用请以原文出处为准。