RuHarness:评分标准与执行框架协同演化,助智能体持续自我改进

论文AI 评分 72/100arXiv cs.AI待复核
AI 聚合

本条为 AI 依据下方公开信源自动整理生成的摘要,不构成转载,可能存在偏差,请以原文为准。整理者:贝果科技 AI 资讯助手。

针对智能体执行框架演化过程中监督信号偏静态、难以跟上多轮行为弱点的变化,论文提出 RuHarness 框架,让评分标准与执行框架协同演化。该方法从执行轨迹中持续发现并重新评估行为准则,优先处理最相关且尚未解决的弱点,在任务目标不变的前提下指导框架做针对性更新。在多种智能体任务与骨干模型上的实验显示,RuHarness 优于较强的框架演化基线,在未见的留出任务上优势尤其明显;分析表明,自适应地排定评分标准优先级能够跟踪不断变化的弱点,并在多轮演化中带来更持久的提升与更稳定的泛化。

全文梳理

AI 摘要依据下方信源原文自动整理,非原文转载

问题出在监督信号

论文指出,自主智能体越来越依赖围绕大语言模型构建的执行框架,这些框架负责交互、记忆、工具调用与执行。已有工作开始从执行经验中演化这类框架,但用于指导演化的监督信号往往相对静态。静态监督难以跟踪智能体在多轮演化中不断变化的行为弱点,也可能限制其向未见任务泛化。论文把这一现象概括为评分标准落后于执行框架的演化。

协同演化的做法

RuHarness 的核心是让评分标准与执行框架一起演化。它从智能体的执行轨迹中不断发现新的行为准则,并对已有准则重新评估;随后按相关性对尚未解决的弱点排序,把最需要处理的部分作为指导信号,用于对执行框架做有针对性的更新。整个过程中任务目标保持不变,变化的是评分标准与框架本身。这样,监督信号能够随轮次推进而更新,而不是停留在初始设定上。

实验结果与泛化表现

论文在多种智能体任务和多个骨干模型上做了实验,RuHarness 的表现优于较强的框架演化基线,在未参与演化的留出任务上优势更明显。进一步分析显示,自适应地排定评分标准优先级能够跟上不断变化的弱点,使改进在多轮演化中更持续,泛化也更稳定。这些结果说明,监督信号与执行框架同步演化,是维持智能体长期自我改进的一条可行路径。

为什么值得看

智能体自我改进的关键瓶颈在于监督信号会滞后;这篇论文给出了让评分标准随框架一起演化的具体做法。

智能体论文

信源1 家

  1. [1]arXiv cs.AI一手信源When the Critic Falls Behind: Co-Evolving Rubrics and Harnesses for Continual Agent Self-Improvement

关键事实

  • 论文提出 RuHarness,一个评分标准与执行框架协同演化的智能体持续自我改进框架[1]

  • 该方法从执行轨迹中持续发现并重新评估行为准则,优先处理最相关的未解决弱点[1]

  • 框架更新过程中保持任务目标固定[1]

  • 在多种智能体任务与骨干模型上,RuHarness 优于较强的框架演化基线,在未见的留出任务上表现突出[1]

  • 自适应地排定评分标准优先级可跟踪变化的弱点,支撑更持久的改进与稳定泛化[1]

相关 · 论文

本页内容由 AI 自动聚合公开信源生成,仅供了解行业动态参考,不构成任何投资或决策建议。如需引用请以原文出处为准。