AI 圈大事记

研究发布KOPA-Bench基准与EDGE数据合成方案

论文AI 评分 65/100arXiv cs.AI
AI 聚合

本条为 AI 依据下方公开信源自动整理生成的摘要,不构成转载,可能存在偏差,请以原文为准。整理者:贝果科技 AI 资讯助手

针对开源模型在多步工具调用上的不足,研究团队发布了包含145个真实任务的KOPA-Bench基准。同时提出了EDGE数据合成方案,通过构建动态图并验证真实API调用链接来生成训练轨迹。使用该数据集微调的9B模型在KOPA-Bench和BFCL基准上表现接近未微调的27B模型。

为什么值得看

提供了评估多步API调用能力的新基准,并展示了通过数据合成提升小模型性能的有效路径。

微调开源模型API数据集

信源1

  1. [1]arXiv cs.AI一手信源Multi-Step Tool-Calling over Korean Open Public APIs: A Benchmark and a Data-Synthesis Recipe

关键事实

  • 发布包含145个真实任务的KOPA-Bench基准。[1]

  • 提出EDGE方案,通过真实API执行验证合成多步轨迹数据。[1]

  • 9B模型经微调后表现接近同家族未微调的27B模型。[1]

相关 · 论文

本页内容由 AI 自动聚合公开信源生成,仅供了解行业动态参考,不构成任何投资或决策建议。如需引用请以原文出处为准。