来源:探索AGI

上个周A➗的开发者大会,视频陆陆续续出炉了。  这一次可以说是一场Agent大会,基本都在围绕,如何做好Agent,如何发挥模型极限价值。

Anthropic虽然现在搞得自己名声不咋地,但是分享的实战经验是实打实的。

图片

今天分享一个很有意思的主题,关于多智能体的。我把几场分享相关的内容都结合到一起来看,发现Agent也在经历人的组织管理的一些事情。

故事先从Omni CTO的分享开始。  Omni是一家做AI分析的公司,25个工程师做了一个叫Blobby的Agent,用户问问题,Blbby找到合适的结果返回给用户。 18个月,进化了好几个版本,现在可以自己拆任务、自己纠错、自己选工具,像真正的数据分析师一样。

图片

直到有一个,CEO问了Blobby一个问题,Blobby给了一个离谱的答案。

CEO立马找到团队说:go fix it.    开发团队回复:LLM有不可预测性,有时候就是会犯错。CEO说了一句话:Not good enough. Go fix it.

这个故事太有共鸣了,在我的工作里边,真的每天都在现实上演,但真正有意思的是这个故事的后续。

当CEO反复要求 go fix it,团队认真去读模型的推理traces。

去研究模型每一步决策的思考过程,理解它为什么做这些决策,然后他们发现了问题的根源。

Blobby的架构是这样设计的:一个外层Agent负责理解用户问题、拆解任务列表;一个内层Sub-Agent专门负责生成数据查询。典型的多Agent,各司其职的架构。

问题出在:外层Agent不知道内层Agent能做什么。

外层Agent可能说:把GitHub PR数据和客户支持数据合并起来分析一下。  但是内层Agent回答:我单次查询做不到这件事,需要跑多次。

然后整个对话就开始跑偏,Agent都没有问题,外层Agent根据用户问题做了合理的拆解,内层Agent也如实报告了自己的限制。问题在于:它们对彼此能力边界的认知是断裂的

他们把这个现象取了个名字叫: Split Brain。精神分裂。   修复策略叫 Blobotomy——Blobby + Lobotomy(脑叶切除术)。

很黑色幽默。。。

图片

修复方案特简单:把内层Agent的工具直接上提到外层Agent中,消除中间层。一个Agent同时拥有“理解问题”和“生成查询”的全部能力。

结果是,大量看似随机、不可预测的错误消失了。复杂场景的评测分数大幅提升。

图片

将这些东西的时候,虽然Chris的语气很平静,但你能感觉到他在说一个教训:Agent的不可预测,很多时候不是模型的问题,是架构的问题。而架构问题,用读traces的方式,是可以找到的。

图片

同样的问题,不同的解法

另一个分会场,Anthropic Applied AI团队的Ash讲了另外一个故事,症状是一致的,原因不同。

图片

他们在尝试让Claude连续跑好几个小时,构建完整的应用,架构里有三个角色:Planner(做高层规划)、Generator(写代码和构建)、Evaluator(打分和测试)。

图片

问题来了,如何做好打分,以及打分之后的迭代闭环?

图片

如果你让同一个Agent自己写代码又自己评价自己的代码,会怎样?

Out of the box, Claude is a really, really bad general QA agent.

因为LLM天然有sycophancy bias,讨好倾向。让它评价自己的产出,就像让一个员工自己给自己评价绩效,什么都是超预期的。

但如果用2个角色,一件有趣的事就发生了:调教一个独立的critic让它变严格,其实非常容易。调教一个builder让它自我批评,几乎不可能。

举个例子:我们自己去评价一道菜好不好吃、评价一个短视频好不好看,很容易。 但是你让我去把菜做出来,把视频拍出来,那就是另外一回事了。

评价能力和创造能力之间有一个天然的gap。

角色分开只是第一步,新问题是: Generator和Evaluator对“做完”的定义不一样怎么办?

这就是Ash团队提出的解法,在动手之前,先协商签订协议。

Generator开工写代码之前,它和Evaluator要先谈判。Evaluator可能会说: 你范围定大了,你的测试标准太松了,你漏掉了某个边缘场景。

两个Agent通过文件系统来回交换意见,一个写markdown,另一个读、批注、回复,直到双方达成一致。

图片

然后Generator开始建造,而Evaluator根据前面讨论的协议来打分。

If you have vague criteria, you have vague critiques, the generator just shrugs and does things.

如果标准模糊,反馈就模糊,builder就耸耸肩继续做。

图片

写在最后

到这里,我开始觉得这件事真正有意思的地方,不在技术。

我看了这2场之后,脑子只在想: 如果我把“Agent”这个词换成员工,把Planner换成产品经理,把Generator换成开发工程师,把Evaluator换成测试工程师,几乎分不出这是在讲AI架构设计还是在讲公司管理。

管理的人不了解下属能力边界 → 指令与执行脱节。  这是很多企业都有的问题。

让员工自己评价自己 → 永远是超预期。这也是绩效管理的经典问题。

开工前先对齐DoD(Definition of Done)→ 产出质量可控。 这是敏捷开发社区喊了20年的事情。

甚至解决方案都类似。Omni说的 Consolidating the Brain,把工具上提,减少层级,这不就是组织扁平化吗?

Anthropic的先商讨协议,这不就是sprint planning里对齐验收标准吗?

所以,Agent似乎在重演人的组织形式。

Anthropic给过一个说法,翻译是:仔细看,PM,IC,QA的组织架构,我们没发明什么新东西,只是给每个角色分配了适合自己的Context。

If you squint at this, this is just a very simple PM, IC, and QA org structure. We didn't invent this, we just gave each role its own context window.

这句话背后其实有个判断,Agent系统的协作难题,不是AI特有的问题。它是任何分布式系统,无论节点是人还是AI,都必须面对的基本问题:

  • 信息不对称:谁知道什么?谁不知道什么?

  • 能力边界:每个角色能做什么、不能做什么?

  • 标准共识:什么叫“做完了”?

  • 协调成本:层级越多、角色越多,对齐成本越高。

人类社会花了几千年来发展组织理论和管理学,本质上就是在回答这些问题。Agent系统花了18个月,跑到了同样的路口。

随着模型变强,有些问题会消失,新的问题会出现。 这跟人类组织的演进一模一样,公司从10人到100人到1000人,管理的挑战不会消失,它只是换了形态。10人时的问题是“谁干什么”,100人时变成“部门怎么协调”,1000人时变成“信息怎么流通”。

Agent架构也是如此。今天是split brain,明天模型更强了,可能不需要拆成outer agent和sub-agent了。但新的协调问题一定会出现——可能是跨Agent的记忆一致性,可能是多Agent同时修改同一份文件时的冲突。

管理问题不会被AI消灭。AI会让管理问题以新的方式复活。

参考地址:

Anthropic Applied AI分享:https://www.youtube.com/watch?v=mR-WAvEPRwE

Omni CTO分享: https://www.youtube.com/watch?v=K4-flzsPraE

阅读最新前沿科技趋势报告,请访问21世纪关键技术研究院的“未来知识库”

未来知识库是“21世纪关键技术研究院”建立的在线知识库平台,收藏的资料范围包括人工智能、脑科学、互联网、超级智能,数智大脑、能源、军事、经济、人类风险等等领域的前沿进展与未来趋势。目前拥有超过8000篇重要资料。每周更新不少于100篇世界范围最新研究资料。欢迎扫描二维码或访问https://wx.zsxq.com/group/454854145828 进入。

截止到2月28日 ”未来知识库”精选的百部前沿科技趋势报告

(加入未来知识库,全部资料免费阅读和下载)

  1. 牛津未来研究院 《将人工智能安全视为全球公共产品的影响、挑战与研究重点》

  2. 麦肯锡:超级智能机构:赋能人们释放人工智能的全部潜力

  3. AAAI 2025 关于人工智能研究未来研究报告

  4. 斯坦福:2025 斯坦福新兴技术评论:十项关键技术及其政策影响分析报告(191 页)

  5. 壳牌:2025 能源安全远景报告:能源与人工智能(57 页)

  6. 盖洛普 & 牛津幸福研究中心:2025 年世界幸福报告(260 页)

  7. Schwab :2025 未来共生:以集体社会创新破解重大社会挑战研究报告(36 页)

  8. IMD:2024 年全球数字竞争力排名报告:跨越数字鸿沟人才培养与数字法治是关键(214 页)

  9. DS 系列专题:DeepSeek 技术溯源及前沿探索,50 页 ppt

  10. 联合国人居署:2024 全球城市负责任人工智能评估报告:利用 AI 构建以人为本的智慧城市(86 页)

  11. TechUK:2025 全球复杂多变背景下的英国科技产业:战略韧性与增长路径研究报告(52 页)

  12. NAVEX Global:2024 年十大风险与合规趋势报告(42 页)

  13. 《具身物理交互在机器人 - 机器人及机器人 - 人协作中的应用》122 页

  14. 2025 - 2035 年人形机器人发展趋势报告 53 页

  15. Evaluate Pharma:2024 年全球生物制药行业展望报告:增长驱动力分析(29 页)

  16. 【AAAI2025 教程】基础模型与具身智能体的交汇,350 页 ppt

  17. Tracxn:2025 全球飞行汽车行业市场研究报告(45 页)

  18. 谷歌:2024 人工智能短跑选手(AI Sprinters):捕捉新兴市场 AI 经济机遇报告(39 页)

  19. 【斯坦福博士论文】构建类人化具身智能体:从人类行为中学习

  20. 《基于传感器的机器学习车辆分类》最新 170 页

  21. 美国安全与新兴技术中心:2025 CSET 对美国人工智能行动计划的建议(18 页)

  22. 罗兰贝格:2024 人形机器人的崛起:从科幻到现实:如何参与潜在变革研究报告(11 页)

  23. 兰德公司:2025 从研究到现实:NHS 的研究和创新是实现十年计划的关键报告(209 页)

  24. 康桥汇世(Cambridge Associates):2025 年全球经济展望报告(44 页)

  25. 国际能源署:2025 迈向核能新时代

  26. 麦肯锡:人工智能现状,组织如何重塑自身以获取价值

  27. 威立(Wiley):2025 全球科研人员人工智能研究报告(38 页)

  28. 牛津经济研究院:2025 TikTok 对美国就业的量化影响研究报告:470 万岗位(14 页)

  29. 国际能源署(IEA):能效 2024 研究报告(127 页)

  30. Workday :2025 发挥人类潜能:人工智能(AI)技能革命研究报告(20 页)

  31. CertiK:Hack3D:2024 年 Web3.0 安全报告(28 页)

  32. 世界经济论坛:工业制造中的前沿技术:人工智能代理的崛起》报告

  33. 迈向推理时代:大型语言模型的长链推理研究综述

  34. 波士顿咨询:2025 亚太地区生成式 AI 的崛起研究报告:从技术追赶者到全球领导者的跨越(15 页)

  35. 安联(Allianz):2025 新势力崛起:全球芯片战争与半导体产业格局重构研究报告(33 页)

  36. IMT:2025 具身智能(Embodied AI)概念、核心要素及未来进展:趋势与挑战研究报告(25 页)

  37. IEEE:2025 具身智能(Embodied AI)综述:从模拟器到研究任务的调查分析报告(15 页)

  38. CCAV:2025 当 AI 接管方向盘:自动驾驶场景下的人机交互认知重构、变革及对策研究报告(124 页)

  39. 《强化学习自我博弈方法在兵棋推演分析与开发中的应用》最新 132 页

  40. 《面向科学发现的智能体人工智能:进展、挑战与未来方向综述》

  41. 全国机器人标准化技术委员会:人形机器人标准化白皮书(2024 版)(96 页)

  42. 美国国家科学委员会(NSB):2024 年研究与发展 - 美国趋势及国际比较(51 页)

  43. 艾昆纬(IQVIA):2025 骨科手术机器人技术的崛起白皮书:创新及未来方向(17 页)

  44. NPL&Beauhurst:2025 英国量子产业洞察报告:私人和公共投资的作用(25 页)

  45. IEA PVPS:2024 光伏系统经济与技术关键绩效指标(KPI)使用最佳实践指南(65 页)

  46. AGI 智能时代:2025 让 DeepSeek 更有趣更有深度的思考研究分析报告(24 页)

  47. 2025 军事领域人工智能应用场景、国内外军事人工智能发展现状及未来趋势分析报告(37 页)

  48. 华为:2025 鸿蒙生态应用开发白皮书(133 页

  49. 《超级智能战略研究报告》

  50. 中美技术差距分析报告 2025

  51. 欧洲量子产业联盟(QuIC):2024 年全球量子技术专利态势分析白皮书(34 页)

  52. 美国能源部:2021 超级高铁技术(Hyperloop)对电网和交通能源的影响研究报告(60 页)

  53. 罗马大学:2025 超级高铁(Hyperloop):第五种新型交通方式 - 技术研发进展、优势及局限性研究报告(72 页)

  54. 兰德公司:2025 灾难性网络风险保险研究报告:市场趋势与政策选择(93 页)

  55. GTI:2024 先进感知技术白皮书(36 页)

  56. AAAI:2025 人工智能研究的未来报告:17 大关键议题(88 页)

  57. 安联 Allianz2025 新势力崛起全球芯片战争与半导体产业格局重构研究报告

  58. 威达信:2025 全球洪水风险研究报告:现状、趋势及应对措施(22 页)

  59. 兰德公司:迈向人工智能治理研究报告:2024EqualAI 峰会洞察及建议(19 页)

  60. 哈佛商业评论:2025 人工智能时代下的现代软件开发实践报告(12 页)

  61. 德安华:全球航空航天、国防及政府服务研究报告:2024 年回顾及 2025 年展望(27 页)

  62. 奥雅纳:2024 塑造超级高铁(Hyperloop)的未来:监管如何推动发展与创新研究报告(28 页)

  63. HSOAC:2025 美国新兴技术与风险评估报告:太空领域和关键基础设施(24 页)

  64. Dealroom:2025 欧洲经济与科技创新发展态势、挑战及策略研究报告(76 页)

  65. 《无人机辅助的天空地一体化网络:学习算法技术综述》

  66. 谷歌云(Google Cloud):2025 年 AI 商业趋势白皮书(49 页)

  67. 《新兴技术与风险分析:太空领域与关键基础设施》最新报告

  68. 150 页!《DeepSeek 大模型生态报告》

  69. 军事人工智能行业研究报告:技术奇点驱动应用加速智能化重塑现代战争形态 - 250309(40 页)

  70. 真格基金:2024 美国独角兽观察报告(56 页)

  71. 璞跃(Plug and Play):2025 未来商业研究报告:六大趋势分析(67 页)

  72. 国际电工委员会(IEC):2025 智能水电技术与市场展望报告(90 页)

  73. RWS:2025 智驭 AI 冲击波:人机协作的未来研究报告(39 页)

  74. 国际电工委员会(IEC):2025 智能水电技术与市场展望报告(90 页)

  75. RWS:2025 智驭 AI 冲击波:人机协作的未来研究报告(39 页)

  76. 未来今日研究所 2025 年科技趋势报告第 18 版 1000 页

  77. 模拟真实世界:多模态生成模型的统一综述

  78. 中国信息协会低空经济分会:低空经济发展报告(2024 - 2025)(117 页)

  79. 浙江大学:2025 语言解码双生花:人类经验与 AI 算法的镜像之旅(42 页)

  80. 人形机器人行业:由 “外” 到 “内” 智能革命 - 250306(51 页)

  81. 大成:2025 年全球人工智能趋势报告:关键法律问题(28 页)

  82. 北京大学:2025 年 DeepSeek 原理和落地应用报告(57 页)

  83. 欧盟委员会 人工智能与未来工作研究报告

  84. 加州大学伯克利分校:面向科学发现的多模态基础模型:在化学、材料和生物学中的应用

  85. 电子行业:从柔性传感到人形机器人触觉革命 - 250226(35 页)

  86. RT 轨道交通:2024 年中国城市轨道交通市场数据报告(188 页)

  87. FastMoss:2024 年度 TikTok 生态发展白皮书(122 页)

  88. Check Point:2025 年网络安全报告 - 主要威胁、新兴趋势和 CISO 建议(57 页)

  89. 【AAAI2025 教程】评估大型语言模型:挑战与方法,199 页 ppt

  90. 《21 世纪美国的主导地位:核聚变》最新报告

  91. 沃尔特基金会(Volta Foundation):2024 年全球电池行业年度报告(518 页)

  92. 斯坦福:2025 斯坦福新兴技术评论:十项关键技术及其政策影响分析报告(191 页)

  93. 国际科学理事会:2025 为人工智能做好国家研究生态系统的准备 - 2025 年战略与进展报告(英文版)(118 页)

  94. 光子盒:2025 全球量子计算产业发展展望报告(184 页)

  95. 奥纬论坛:2025 塑造未来的城市研究报告:全球 1500 个城市的商业吸引力指数排名(124 页)

  96. Future Matters:2024 新兴技术与经济韧性:日本未来发展路径前瞻报告(17 页)

  97. 《人类与人工智能协作的科学与艺术》284 页博士论文

  98. 《论多智能体决策的复杂性:从博弈学习到部分监控》115 页

  99. 《2025 年技术展望》56 页 slides

  100. 大语言模型在多智能体自动驾驶系统中的应用:近期进展综述

  101. 【牛津大学博士论文】不确定性量化与因果考量在非策略决策制定中的应用

  102. 皮尤研究中心:2024 美国民众对气候变化及应对政策的态度调研报告:气候政策对美国经济影响的多元观点审视(28 页)

  103. 空间计算行业深度:发展趋势、关键技术、行业应用及相关公司深度梳理 - 250224(33 页)

  104. Gartner:2025 网络安全中的 AI:明确战略方向研究报告(16 页)

  105. 北京大学:2025 年 DeepSeek 系列报告 - 提示词工程和落地场景(86 页)

  106. 北京大学:2025 年 DeepSeek 系列报告 - DeepSeek 与 AIGC 应用(99 页)

  107. CIC 工信安全:2024 全球人工智能立法的主要模式、各国实践及发展趋势研究报告(42 页)

  108. 中科闻歌:2025 年人工智能技术发展与应用探索报告(61 页)

  109. AGI 智能时代:2025 年 Grok - 3 大模型:技术突破与未来展望报告(28 页)

上下滑动查看更多

Logo

Agent 垂直技术社区,欢迎活跃、内容共建。

更多推荐