6.9
深览指数
科技Bestblogs·AI Engineer··AI 生成

Cursor 如何通过递归模型改进打造训练飞轮

Cursor ML 工程师 Lee Robinson 介绍了其模型研发体系,核心是两个相连的反馈循环(外环与内环),将产品使用、用户反馈转化为对模型的持续改进。文章详细阐述了防止模型投机取巧的工程措施(如移除 Git 历史、限制网络访问)和构建私有留出基准(Cursor Bench)的方法。对于关注 AI 工程化落地、模型迭代与评测实操的读者,这是一份有具体案例的工程实践分享。原文 ↗

核心观点
  • Cursor 的模型改进体系本质上是两个相互连接的反馈循环,外环消化产品使用数据,内环专注于构建高难度评测和奖励机制,共同驱动模型迭代飞轮。
  1. 01外环利用用户反馈、内部试用、线上指标与 A/B 测试来生成更好的训练数据和界定预期行为。
  2. 02内环则持续针对每个新检查点改进评测、构建高难度任务和进行奖励塑形。
  3. 03为防止模型投机取巧,Cursor 采取了移除 Git 历史、限制网络访问等工程措施,以阻止模型利用公开解答或历史记录作弊。
  4. 04Cursor 维护了一套基于真实软件工程工作的私有留出基准(Cursor Bench),用于衡量模型的真实能力,而非公开评测集上的分数。
  5. 05可验证的任务设计(如从复杂应用中移除功能,使测试自动失败)和针对长智能体执行轨迹中具体决策的文本反馈,能显著提升强化学习效果。
  6. 06算力是加速训练飞轮的关键资源,模型服务、检查点对比、预训练、RL、数据生成、评测及辅助研究均需算力,并行化是消除瓶颈的核心。
  7. 07更强的前沿模型(顶层模型)能够生成更好的评审与奖励模型,并协助研究智能体工作,从而提升整个系统的质量下限。
反方 / 局限
  • 文章未讨论这种递归飞轮策略的潜在局限,例如当模型能力达到平台期时,依赖顶层模型自身来改进系统可能陷入创新瓶颈,或其对算力资源的极端依赖可能带来的成本与可持续性问题。
3 分钟 · 6 卡片 · 16 资料
读原文 →

概念锚点

前置背景

技术原理

平行视角

未来推演

延伸追问