VeriCUA 提出以智能体探索做计算机使用智能体验证

论文AI 评分 68/100arXiv cs.AI待复核
AI 聚合

本条为 AI 依据下方公开信源自动整理生成的摘要,不构成转载,可能存在偏差,请以原文为准。整理者:贝果科技 AI 资讯助手。

arXiv 上一项投稿提出 VeriCUA,把任务完成验证当作智能体在环境中动态收集证据并作出判断的过程,而非只让视觉语言模型看给定观测、或只靠生成程序检查应用状态。验证器先查看可用上下文构建任务评分标准,再针对未满足的要求选择 GUI 检查或代码检查,并按明确的证据规则合并结论。该框架不绑定平台,在线与离线、不同平台与观测模态共用同一流程。实验显示其与参考标签的一致程度高于对比基线,离线场景在困难样本上提升最大,在线场景对虚假完成声明的拒绝更强。

全文梳理

AI 摘要依据下方信源原文自动整理,非原文转载

要解决的问题

在桌面、移动端与网页环境里构建和扩展计算机使用智能体,需要可靠判断任务是否真正完成,这一判断服务于数据整理、评测和强化学习三个环节。常见的自动化做法有两类:让视觉语言模型直接评判轨迹,或生成程序去检查应用状态。论文指出两类做法都只看到复杂数字环境的一部分——视觉语言模型受限于提供给它的观测,生成程序则依赖可访问的状态。这些局部视角可能漏掉决定性证据,使完成判断缺乏支撑;而为不同平台和访问条件分别定制验证器,还会带来额外工程成本。

方法:把验证当作探索

VeriCUA 是一个不绑定平台的框架,核心是把验证视为在环境中动态收集证据并作出评估,而不是一次性读取某个快照。在线与离线两种设置、不同平台与不同观测模态共用同一套流程。具体执行上,验证器先检查当前可用上下文,据此构建针对该任务的评分标准;随后针对尚未满足的要求,选择 GUI 检查或代码检查去补证据;最后在明确的证据规则下把各类检查的发现合并成结论。这样,GUI 与代码两类检查互为补充,而不是各自独立给出判断。

实验结果与状态

论文报告,在上述多种设置下,VeriCUA 与参考标签的一致程度高于所对比的基线。其中离线场景的增益在困难样本上最为明显,在线场景则表现出对虚假完成声明更强的拒绝能力。作者进一步分析认为,这些收益与两类证据的互补性以及测试时的探索有关。该工作标注为进行中的研究,属于 cs.AI,同时归入 cs.CL 与 cs.CV 分类。

为什么值得看

计算机使用智能体的数据筛选、评测与强化学习都依赖可靠的完成判定,该工作给出跨平台统一验证思路。

智能体论文

信源1 家

  1. [1]arXiv cs.AI一手信源VeriCUA: Verification as Agentic Exploration for Computer-Using Agents

关键事实

  • 论文提交于 2026 年 10 月 29 日,编号 arXiv:2610.40578[1]

  • VeriCUA 把验证定义为在共享流程内动态收集证据并评估,覆盖在线与离线、多平台与多观测模态[1]

  • 验证器先构建任务评分标准,再对未解决要求选择 GUI 或代码检查,并按显式证据规则合并结果[1]

  • 实验称与参考标签的一致度优于对比基线,离线困难样本增益最大,在线对虚假完成声明拒绝更强[1]

相关 · 论文

本页内容由 AI 自动聚合公开信源生成,仅供了解行业动态参考,不构成任何投资或决策建议。如需引用请以原文出处为准。