PrefPI框架引导机器人策略突破初始分布限制

论文AI 评分 68/100arXiv cs.AI
AI 聚合

本条为 AI 依据下方公开信源自动整理生成的摘要,不构成转载,可能存在偏差,请以原文为准。整理者:贝果科技 AI 资讯助手。

PrefPI框架通过偏好条件化生成建模与无分类器引导(CFG),迭代调整预训练机器人策略,使其执行初始策略下罕见或从未观测到的行为。在扩散策略及PI0.5流匹配VLA的仿真与真机测试中,该框架用极少反馈实现显著行为偏移:真机上仅用150条偏好标注轨迹,即将物体运送高度从10.7cm提升至19.8cm。

为什么值得看

用极少量偏好反馈引导机器人突破原有行为模式,解决分布外动作生成难题,对真机微调极具实用价值。

信源1 家

  1. [1]arXiv cs.AI一手信源PrefPI: Preference-Guided Steering into Out-of-Distribution Behaviors

关键事实

  • PrefPI将偏好学习构建为偏好条件化生成建模,利用无分类器引导放大隐式偏好信号[1]

  • 该框架在真机实验中仅用150条偏好标注轨迹,将物体运送高度从10.7cm提升至19.8cm[1]

  • 实验覆盖扩散策略与PI0.5流匹配VLA,验证了仿真与真实世界场景的有效性[1]

相关 · 论文

本页内容由 AI 自动聚合公开信源生成,仅供了解行业动态参考,不构成任何投资或决策建议。如需引用请以原文出处为准。