7.9
深览指数
科技微博·机器之心Pro··AI 生成

今天,具身智能大模型迈入「具身原生」的新阶段!

蚂蚁灵波发布 LingBot-VA 2.0,声称是行业首个「具身原生」预训练模型。该模型从数据构成、训练目标到架构设计,完全面向真实物理世界中的机器人任务设计,而非复用数字世界中的视频生成模型。文章详细介绍了其核心技术创新:因果建模、语义与动作对齐的 VAE、多块预测(MCP)训练策略、异步推理的 Foresight Reasoning 以及稀疏 MoE 架构,并提供 RoboTwin 基准测试 93.6% 的成功率。适合关注具身智能技术路线与前沿 AI 研究的工程师和产品经理阅读。原文 ↗

核心观点
  • LingBot-VA 2.0 是行业首个「具身原生」预训练模型,其核心是「边推演、边行动」:让模型在预测世界下一步的同时生成动作,而非复用为内容创作设计的视频生成模型。
  1. 01LingBot-VA 2.0 将因果建模置于预训练核心,采用单向预测,而非双向建模,使模型从第一步起就遵循机器人真实的执行逻辑,理解动作如何影响环境。
  2. 02新一代 VAE 通过「语义视觉 - 动作 tokenizer」,在压缩视觉信息时让「语义」与「动作」对齐,并使用冻结的感知编码器作为「老师」进行语义对齐,以及通过逆动力学模型(IDM)和前向动力学模型(FDM)从无标签视频中提取「隐动作」。
  3. 03多块预测(MCP)训练策略让模型预测未来多个片段,强制模型学习「轨迹级的动力学」,而非短期的视觉连贯。在 RoboTwin 上,开启 MCP 的版本在 50fps 下训练 5k 步即比基线高出 29.7 个百分点,并实现 2.3 倍训练加速,且 MCP 在推理时可不增加开销。
  4. 04Foresight Reasoning 推理策略将模型拆为「预测流」和「执行流」异步推进,机器人执行动作时模型已提前预测下一步动作,并通过「预测-校正」机制用真实观测重新锚定上下文,避免幻想轨迹偏离现实。
  5. 05LingBot-VA 2.0 采用稀疏 MoE 架构,视频流和动作流由各自专家网络处理,共享因果注意力,并通过「无辅助损失」负载均衡解决专家闲置问题,在相同训练时间下 MoE-13B-A1.9B 模型损失曲线与 Dense-5B 基线几乎重合。
  6. 06在 RoboTwin 2.0 双臂操作基准上,LingBot-VA 2.0 平均成功率达到 93.6%,且从干净环境切换到域随机环境,成功率仅下降 0.4 个百分点。
  7. 07通过蒸馏、FP8 精度、TensorRT 编译、分页 KV-cache 和 FlashInfer 等优化,端到端推理时间从 927ms 降至 142ms,异步控制频率从 35Hz 提升至 225Hz。
反方 / 局限
  • 文章承认「具身原生」路径周期更长、更艰难,且仍需更多、更长时间尺度的检验,LingBot-VA 2.0 只是这条漫长道路的一个新起点。
15 分钟 · 5 卡片 · 12 资料
读原文 →

概念锚点

前置背景

平行视角

未来推演

延伸追问