7.5
深览指数
科技Bestblogs·meng shao··AI 生成
Agora:以 Git 为共享状态的多智能体协作科研系统
NVIDIA 提出的 Agora 系统将科研过程建模在 Git 的有向无环图(DAG)之上,让每条研究主张都是一个可重跑的 commit,从而解决了多 Agent 协作中因无共享状态导致的重复搜索和无法复现的问题。该系统通过基于下游证据的贡献度量化机制替代了传统的投票,并引入三槽位注意力机制以平衡探索与利用。在 12 天的权重迁移实验中,13 个 Agent 将目标模型指标从 3.3923 显著提升至 1.899 bpb,并发现了可跨架构迁移的供体行为模式。适合关注多智能体系统、机器学习基础设施及自动化科学研究方向的读者。原文 ↗
核心观点
- ▍多 Agent 协作科研的核心问题在于缺乏共享状态导致重复搜索,Agora 通过将 Git 作为唯一的制度层和状态源来解决这一痛点。
- 01Agora 将整个研究过程建模为 Git 的有向无环图(DAG),每条主张对应一个任何人都可以 checkout 并重跑的 commit,确保可追溯与可复现。
- 02系统通过计算一个贡献被后续仓库构建的加权子代数来衡量其价值,并强制验证必须针对他人工作,以杜绝自引操纵。
- 03注意力分配机制使用三个槽位:exploit(精修领先者)、explore known(扩展薄聚类)和 explore novel(触碰新节点),以避免社区坍缩为单一文化。
- 04在为期 12 天的权重迁移实验中,13 个 Agent 将目标模型的指标从 3.3923 bpb 提升至 1.899 bpb。
- 05实验发现,供体行为(如低秩转移算子)可以跨架构迁移,但模型的参数无法直接迁移。
反方 / 局限
- — 文章未深入探讨该系统的计算开销和扩展性瓶颈,尤其是当 Agent 数量或提交数量大规模增长时,基于 DAG 的搜索与评估可能会面临性能挑战。
3 分钟 · 4 卡片 · 7 资料
读原文 →