8.0
深览指数
科技虎嗅·韦韦_wiwi··AI 生成
别问AI像不像人了,先问它在灾难里能不能逃命
文章梳理了AI智能体(LLM Agent)从虚拟社交实验(AI小镇)迈向应急疏散仿真的最新进展,介绍了CMU、天大、清华、斯坦福HAI四组研究团队在毕业典礼预案、地铁火灾、城市级模拟、数字分身可信度验证四个方向的具体成果。同时引入阿姆斯特丹大学Törnberg的批评,指出LLM的“黑箱性、偏差、幻觉”从根本上恶化了仿真验证难题。适合想了解LLM在严肃决策场景中能否被信任的从业者与研究者,可借此对照技术进展与方法论争议的张力。原文 ↗
核心观点
- ▍LLM驱动的智能体仿真正从虚拟社交实验(AI小镇)进入应急疏散等高风险决策场景,但其方法论根基——能否被科学验证——存在严重争议,远未到可被信任用于真实决策的程度。
- ▍验证问题是这项技术的核心瓶颈:LLM的“黑箱性”使因果机制难以解析,“偏差与刻板印象”导致个体极端行为失真,“分布外场景幻觉”使模型在无历史先例的灾难现场可能失控。
- 01CMU团队与学校应急管理团队经过16个月五轮迭代,构建了13000个智能体的毕业典礼疏散仿真,最终有三条建议被写入学校真实SOP。
- 02天津大学李坤团队开发的RESCUE系统为LLM驱动的虚拟人群增加了物理可信的身体(24个部位碰撞受力计算),已被计算机视觉顶会ICCV 2025接收。
- 03清华大学李勇团队的AgentSociety实现了一万个智能体在整座城市中的互动,累计产生500万次互动,模拟了飓风冲击、极端信息传播等社会实验。
- 04斯坦福Joon Sung Park团队对1052名全美代表性受试者进行“数字分身”验证:结合深度访谈与量表后,AI复现真人两周后回答的准确率达0.86。
- 05Törnberg与Larooij在批评性综述中明确写道:“有理由相信LLM会恶化而非解决ABM的长期挑战”,“验证仍然是核心挑战”。
反方 / 局限
- — 斯坦福数字分身研究论文承认方法存在局限;另一项疫苗犹豫政策模拟论文也发现不同大模型之间表现差异巨大,部分模型偏差超过20%。
- — Törnberg指出,目前很多研究依赖“表面效度或松散关联底层机制的结果指标”,使这类模型占据“模糊不清的方法论位置”。
- — 文章作者自评了三个风险:模型基于统计平均易抹平极端个体行为、微观个体精度无法自动保证宏观涌现可信、安全对齐可能使模型低估灾难现场的混乱与恐慌烈度。
Joon Sung ParkPetter Törnberg李坤李勇CMU斯坦福HAI天津大学清华大学阿姆斯特丹大学Generative AgentsRESCUEAgentSocietySmallvilleICC 2025
18 分钟 · 4 卡片 · 9 资料
读原文 →