Anthropic 发布了 Claude Sonnet 5.5,这是其 Claude 5.5 家族中的第二个模型。它的输出生成速度提升了 30% 以上,每项任务的成本最多降低 30%,在多项基准测试中几乎与 Opus 5.5 持平。

Opus 5.5 专为需要审慎判断的复杂任务而打造。Sonnet 5.5 则面向定义明确的日常工作,比如修复 bug、撰写文档、制作演示文稿和创建电子表格。Anthropic 还宣布 Claude Haiku 5.5 将在未来几周内推出。该模型将聚焦于高吞吐量、低成本的使用场景。

凭借 Fable、Opus 和 Sonnet,Anthropic 已经拥有了与 OpenAI 的 GPT-6 Astra、Sol 和 Luna 相对应的产品,而正是这些产品掀起了最新的价格战。大致来说,Opus 略高于 Sol,Sonnet 高于 Luna,Fable 高于 Astra,不过 Anthropic 的整体收费更高。同档产品之间的性能差异小到成本可能最终成为决定性因素。Haiku 或许能帮助 Anthropic 缩小这一差距。

编程性能大幅跃升

据 Anthropic 称,Sonnet 5.5 与其前代之间的性能差距在编程方面最为显著。在针对智能体编程的测试 Terminal-Bench 4.0 上,Sonnet 5.5 达到 70.6%,而 Sonnet 5 为 10.3%。在重现 Cursor 编辑器真实编程会话的 CursorBench 4.0 上,Sonnet 5.5 得分为 55.5%,而前代为 34.1%,仅比 Opus 5.5(57.8%)低两个百分点。

Anthropic 表示,在 "High" 设置下的 FrontierCode 1.1 上,Sonnet 5.5 的得分比 Sonnet 5 高出十分,而每项任务的成本约为其十五分之一。早期测试者称赞该模型理解代码库的速度之快。Sonnet 5.5 还比其前代更频繁地批量调用工具,从而减少了所需的步骤数。

推理强度方面有一个奇怪的小问题。在最高努力级别 "Max" 下,Sonnet 5.5 在 FrontierCode 上的得分实际上比在 "Xhigh" 下更差。Anthropic 表示,在最大努力下,该模型会更频繁地触发一个代码审查功能,将工作拆分给多个子智能体。在某些情况下,这会导致超时或超出任务范围的改动,而这两者都会被 FrontierCode 扣分。

知识工作几乎与 Opus 5.5 持平

在 GDPval-AA 上——这是 OpenAI 开发的一个知识工作基准测试,覆盖 44 个职业和 9 个行业的任务——Sonnet 5.5 得分 1,844 分。这几乎追平了 Opus 5.5(1,846),并比 Sonnet 5(1,449)高出约 400 分。按 Anthropic 的数据,OpenAI 的 GPT-6 Sol 为 1,487 分。在 Chartography 这一视觉图表识别测试中,Sonnet 5.5 从 15.6% 跃升至 61.6%。

类别 基准测试 Sonnet 5.5 Sonnet 5 Opus 5.5 GPT-6 Sol
基于智能体的编程 Terminal-Bench 4.0 70.6% 10.3% 66.4%¹ —
基于智能体的编程 FrontierCode 1.1(Main) 46.2%(Max);52.1%(Xhigh)² 42.4% 54.4% 49.3%
基于智能体的编程 CursorBench 4.0 55.5% 34.1% 57.8% —
知识工作 GDPval-AA v2.1³ 1,844 1,449 1,846 1,487
知识工作 AA Briefcase v1.1³ 1,811 1,359 1,822 1,483
跨学科思维 Humanity's Last Exam(带工具) 64.5% 54.9% 67.7% —
计算机技能 OSWorld 2.1(部分评估) 80.1% 57.0% 81.8% —
可视化图表识别 Chartography(不带工具) 61.6% 15.6% 64.4% 53.6%

¹ 对于 Opus 5.5,Terminal-Bench 4.0 在“Xhigh”设置下显示最高分。² Sonnet 5.5 在 FrontierCode 上“Max”设置的得分低于“Xhigh”。³ Sonnet 5.5 的数值来自一个预发布版本,其中一个此后已修复的 bug 可能影响了结构化输出。

早期测试者将 Sonnet 5.5 描述为一个更自然的对话伙伴,对设计有感觉。Anthropic 声称,该模型能够重做用户界面并执行幻灯片模板,效果之好几乎无需再修饰。

Anthropic 还表示,Sonnet 5.5 是首个仅使用截图就能通关《宝可梦 红》的 Sonnet 模型。OpenAI 的 Astra 最近在游戏基准测试上也展现了类似的进展。就在几年前,这类任务还被视为困难,且往往需要定制算法。如今,即便是产品系列中的中端模型也能处理它们。

相同的 token 价格,每项任务更少的 token

Sonnet 5.5 每百万 token 的价格与 Sonnet 5 相同:输入 token 2 美元,输出 token 10 美元,缓存读取 0.20 美元。Anthropic 表示,由于该模型每项任务使用的 token 更少,实际成本最多可降低 30%。输出生成速度也提升了 30% 以上。这些说法仍需独立测试来证实。

每百万 token 价格 Claude Opus 5.5 GPT-6 Sol Claude Sonnet 5.5 GPT-6 Luna
输入 token 4 $ 2 $ $2 $0.10
输出 token $20 $10 $10 $0.50
缓存读取访问 $0.20 $0.20 $0.20 $0.01
缓存写入访问 $5 $2.50 $2.50 $0.125

与 Anthropic 的其他模型以及 OpenAI 的同类产品一样,Sonnet 5.5 提供了一个可调节的 effort 设置,让用户可以在成本与速度同输出质量之间进行权衡。Anthropic 表示,在低或中等设置下,Sonnet 5.5 在多项基准测试中已经击败了 Sonnet 5 的最佳成绩,而每任务成本仅约为其十分之一。不过,为每个任务找到合适的 effort 级别,仍然更像是艺术而非科学。

为更强大的模型提供新的网络安全保障措施

Claude Sonnet 5.5 现已在所有主流云平台上可用,包括 Amazon Web Services、Google Cloud 和 Microsoft Azure。与 Opus 5.5 和 Sonnet 5 一样,Anthropic 以零数据保留的方式提供该模型。开发者可以通过 Claude Platform 使用模型 ID "claude-sonnet-5-5" 访问它。

由于 Sonnet 5.5 在网络安全方面的能力远超其前代,Anthropic 首次为 Sonnet 模型添加了保障措施。涉及高风险网络安全任务的请求会被明显地重新路由到 Sonnet 5。通过扩展的Cyber Verification Program,合格的专业人员可以申请分级访问权限。

Anthropic 还添加了针对蒸馏攻击的安全分类器,与其最强大的模型中使用的同类分类器相同。这些措施是否真正有效,应该会在未来几个月内见分晓。如果中国实验室一直在从此类攻击中获益,那么堵住这一途径可能会再次拉大与西方实验室之间的差距。

没有炒作的 AI 新闻——由人类精选

订阅 THE DECODER,享受无广告阅读、每周 AI 新闻通讯、我们每年六期的独家 "AI Radar" 前沿报告、完整档案访问权限,以及评论区访问权限。

立即订阅