7.3
深览指数
科技量子位·思邈··AI 生成

教机器人干活,光“刷课时”可不够!灵初这次较真数据质量

本文介绍了灵初智能在机器人数据质量上的核心观点:仅仅积累操作时长(“刷课时”)不足以让机器从人类经验中有效学习,关键在于人机动作数据的精确对齐。文章提出了“强配对数据”概念,创新性地从机器人动作反向生成对应的人手操作以提升对齐质量,并展示了利用此转换能力实现无需重新训练的“上下文学习”方法。适合关注具身智能、机器人数据工程和行业落地进展的读者。原文 ↗

核心观点
  • ▍让机器人从人类经验中学习,光有海量数据(“刷课时”)不够,关键在于数据质量,特别是人和机器人动作之间的“强配对”对齐程度。
  • ▍灵初智能采用逆向思维,从真实的机器人操作数据出发,利用世界模型Psi-W0反向生成匹配的人手操作,从而高效获取高质量的人机动作配对数据。
  1. 01灵初将人和机器人只在任务含义上对应的数据称为“弱配对数据”;而场景一致、动作时序逐帧对应、且机器人动作能在真机上回放成功的数据称为“强配对数据”。
  2. 02灵初逆向使用Psi-W0,从真实机器人数据生成对应的人手操作视频,再用这些高质量配对数据训练一个“带动作输出的视频编辑模型”(转换器),该模型能将人手操作视频直接转为机器人可执行的图像和动作数据。
  3. 03灵初探索了In-Context Learning(ICL),利用强配对数据模型,将人类示范视频转换为机器人可理解的“提示”,使机器人能在不更新模型参数的情况下,根据当前上下文执行新任务。
  4. 04在手机盒装配的具体任务中,通过预训练模型加少量任务数据,并结合人工参与与强化学习进行后训练,经过几轮迭代,任务成功率达到约99%,耗时1-2个工作日。
  5. 05灵初认为,预训练的意义不在于让后训练消失,而是使后训练需要的定制化数据更少,从而降低机器人进入新客户现场的适配与部署成本。
反方 / 局限
  • — 逆向数据生成方法验证有效,但部分特别复杂的任务仍未直接完成,说明数据转换和任务适配仍有高度复杂的边界情况有待解决。
  • — 文章展示了特定任务中的ICL能力,但强调这不意味着随手拍一段视频就能让机器人完成任何工作,更多实现细节尚待公布,该技术目前应用场景有限。
8 分钟 · 5 卡片 · 15 资料
读原文 →

概念锚点

前置背景

平行视角

未来推演

延伸追问