跳转到内容

Matthias Bastian

2026 年 10 月 11 日

Image description

研究发现,AI 智能体团队交付的结果几乎不比单个智能体更好。

评估公司 Vals AI 在“Vibe Code Bench”上测试了 GPT-6 Sol 和 Claude Opus 5.5,既有单独运行也有团队协作,并设置了两个推理级别:中等推理和最大推理投入。团队的成本比单个智能体高出 1.8 倍到 5.1 倍。

在四次比较中,团队与单个智能体之间只有一次显示出统计上显著的提升:GPT-6 Sol 在中等推理下,团队得分高出 7.3 分。在最大推理下,团队设置既没有给 Sol 也没有给 Opus 5.5 带来任何真正的优势。结果表明,在大多数情况下,智能体团队的额外成本并不值得,尤其是当模型已经在满算力运行时。

Vals AI 的基准测试展示了每个应用的成本与 Vibe Code Bench 得分的关系。箭头从每个模型的单个智能体指向其在相同推理投入下的团队。团队成本高得多,但得分几乎没有提升。| 图片:Vals AI[

Anthropic 发现,随着其增加更多智能体,质量提升在其自身两项使用 Opus 5.5 的测试中缩小了。更大的团队更快达到给定性能水平,但从 10 个智能体增加到 100 个智能体,24 小时后得分仅略有提升。在单独的 ProgramBench 测试中,速度提升伴随着更高的 token 用量。

使用 Opus 5.5 的任务 1 个智能体 10 个智能体 30 个智能体 100 个智能体
知识库 0.53 0.70 0.71 0.74
Lean 定理证明 0.39 0.66 0.66 0.68

Fable 5.1 在超过十个智能体的 Lean 定理证明任务上显示出更强的质量提升,但在所有测试中得分仍低于 Opus 5.5。在知识库任务上,Fable 的得分从 30 个智能体扩展到 100 个智能体时实际上略有下降。

更多智能体换来的是速度,而不是更好的输出

OpenAI 研究员 Noam Brown 在 Dwarkesh Podcast 中确认,多智能体系统主要换来的是速度,而不是更好的质量。四个智能体解决任务的速度快了一倍,但成本也高了一倍。在 16 个智能体时,这一模式依然成立,但效率略有下降。

效果在很大程度上取决于任务。他说,网络研究和数学可以很好地并行化,但写小说不行。把 10,000 个智能体扔给一部小说,就像把 10,000 个人扔给它一样毫无意义。Brown 承认,扩展到极大量智能体在很大程度上仍未被探索,因为成本实在太高了。

OpenAI 开发者 Eric Provencher 最近警告不要使用智能体集群正是出于这个原因。他主张,它们很可能是在浪费钱,因为智能体之间的协调会崩溃。他称之为协调税。

没有炒作的 AI 新闻——由人类精选

订阅 THE DECODER,享受无广告阅读、每周 AI 新闻简报、我们每年六次的独家“AI Radar”前沿报告、完整档案访问权限,以及评论区访问权限。

立即订阅

  • 完整访问 THE DECODER 上的每一篇文章
  • 无广告
  • 加入评论和社区讨论
  • 每周通过邮件获取 AI 新闻回顾
  • 每年 6 次:“AI Radar”——深入探讨最重要的 AI 话题
  • 每日 AI 新闻,始终紧跟最新动态
  • 我们完整的十年档案
  • 由拥有 10 年以上 AI 经验的团队报道

订阅 The Decoder