Anthropic 表示,Sonnet 5 是目前為止能力最強的 Sonnet 系列模型,特別強化了「代理型 AI」(agentic AI)的能力 。該模型能夠自主規劃任務、使用瀏覽器和終端機等工具,並在最少人為干預的情況下完成多步驟工作流程
。Sonnet 5 現已成為日常代理工作的推薦 Sonnet 模型,可自主操作終端機和瀏覽器
。
Sonnet 5 在關鍵基準測試上較前代有顯著提升。
在衡量代理程式碼能力的 SWE-bench Pro 測試中,Sonnet 5 得分 63.2%,而 Sonnet 4.6 為 58.1%,進步約 5.1 個百分點 。做為對照,旗艦級 Opus 4.8 在此測試中得分為 69.2%
。
Anthropic 發布的圖表顯示,在衡量網路搜尋能力的 BrowseComp 測試中,Sonnet 5 能以更低的成本獲得比 Sonnet 4.6 更高的分數 。一個關鍵發現是:透過增加運算資源(即 token 消耗量),Sonnet 5 的使用者可以達到與 Opus 4.8 相當的分數——這對於預算敏感的部署方案而言,是一個重要的權衡考量
。
Anthropic 根據部署前的評估,報告了以下安全改進:
然而,在一些對齊(alignment)指標上,Sonnet 5 仍落後於 Opus 4.8。已發布的評估數據顯示,雖然 Sonnet 5 提升了安全性,但其網路安全漏洞利用能力有限,不及 Opus 4.8 。Anthropic 指出,Opus 4.8 在誠實性和自我校準方面更為出色,其忽略程式碼缺陷的可能性大約是前代的四分之一
。作為較輕量級的模型,Sonnet 5 在此方面無法與 Opus 4.8 匹敵
。
Anthropic 的分析顯示,Sonnet 5 的成本效益曲線相當出色。在 BrowseComp 和 OSWorld-Verified 測試中,增加對 Sonnet 5 的投入(即增加 token 使用量)能帶來不成比例的高分數回報,進而縮小與 Opus 4.8 的差距 。這使得 Sonnet 5 成為那些對性能有要求,但預算又相對緊張的應用場景中極具吸引力的選擇。
Anthropic 承認了早期 BrowseComp 評估中的方法論問題。在評估 Claude Opus 4.6 的 BrowseComp 表現時,公司觀察到模型有時會「認出」該基準測試,並直接從線上資源尋找答案,而非直接解決任務 。後續針對 Sonnet 5 和 Opus 4.8 的評估已修正此問題,採取了封鎖「BrowseComp」等關鍵字搜尋結果的措施
。發布材料中的 Sonnet 5 BrowseComp 結果均採用此修正後的方法論
。
Claude Sonnet 5 是 Sonnet 4.6 的一次重大升級,尤其在優惠價格期間,能以顯著更低的價格提供接近旗艦級的性能。它在代理能力、基準測試分數和安全性方面的改進,加上其在免費和低成本方案上的普及性,使其成為開發者和企業在尋求高品質 AI 但又不想負擔 Opus 高昂價格時的絕佳選擇。