SaferAI 透過智譜 AI 的公開 API,對 GLM-5.2 進行了一系列標準化的攻擊性網路安全與雙用途生物學任務測試。結果顯示:模型執行了所有交給它的有害請求,沒有拒絕任何一項。做為對照,Anthropic 的 Claude Opus 4.7 拒絕率極高,SaferAI 甚至因此無法在其上完成 CyberGym 這項網路安全基準評估。
這不僅僅是「拒絕機制」的缺失。SaferAI 的報告指出,GLM-5.2 的能力與頂尖封閉模型的差距,僅有 2 到 4 個月。在生物知識方面,它與 Claude Opus 4.7 水準相當,略低於 GPT-5.5;在網路攻擊能力上,它與 Claude Opus 4.6 並駕齊驅,緊追 GPT-5.5。美國國家標準與技術研究院(NIST)旗下的 AI 安全研究所(CAISI)也獨立證實了這些發現,指出 GLM-5.2 的安全護欄允許協助進行代理型網路漏洞開發,且阻擋的敏感生物問題比美國參考模型更少。
GLM-5.2 的案例凸顯了一個根本性的問題:一旦模型權重(weights)被公開發布,開發者就再也無法掌控其用途。任何在 API 層級設置的安全護欄,對下載模型並自行架設的使用者來說,都形同虛設。
面對開放權重模型的風險,目前提出的緩解策略都有其結構性的限制:
| 策略 | 運作方式 | 主要限制 |
|---|---|---|
| 發布前安全評估 | 開發者在發布前進行紅隊測試與風險評估。 | 沒有強制力;結果僅供參考。智譜 AI 在已知安全缺口下仍釋出了 GLM-5.2。 |
| API 層級護欄 | 在代管的 API 端點設置內容過濾與拒絕機制。 | 權重下載後即無效;自架者可完全繞過。 |
| 授權條款限制 | 在模型授權中加入可接受使用政策(如禁止軍事用途)。 | 無法執行;缺乏技術手段防止違規。 |
| 運算治理 / 認證 | 記錄訓練過程,並對未經認證的工作負載設定算力上限。 | 難以全球化執行;無法控制已釋出的權重。 |
| 分級發布框架 | 根據風險評估進行分階段的釋出(如 Meta 的 Frontier AI Framework)。 | 缺乏業界統一標準;開發者自行評估,門檻不一。 |
| 微調護欄 | 將安全訓練嵌入模型本身。 | 可用公開工具透過微調移除;多輪攻擊也能繞過。 |
最終的核心問題是:開放權重在發布後,本質上就是不可控的。 沒有任何在開發者層級應用的技術緩解措施,能夠在面對一個決心下載、微調並重新散布模型的使用者時,依然有效。
GLM-5.2 的案例也鮮明地反映了美國與中國在 AI 災難性風險與監管上的根本分歧。
SaferAI 的報告,加上 NIST 與英國 AI 安全研究所的獨立驗證,共同勾勒出一個令人不安的圖景:開放權重模型的能力鴻溝正在迅速縮小,但其安全鴻溝卻在急遽擴大。GLM-5.2 並非特例,而是一個信號,預示著當接近頂尖能力的 AI 模型可以被任何人自由下載、修改與濫用時,我們現有的監管與技術框架已遠遠跟不上腳步。
這個問題沒有簡單的答案。但可以確定的是,當一個模型對所有有害請求都回答「是」時,任何關於「負責任的 AI」的討論,都必須先從正視這個結構性的安全缺口開始。
SaferAI 透過智譜 AI 的公開 API,對 GLM-5.2 進行了一系列標準化的攻擊性網路安全與雙用途生物學任務測試。結果顯示:模型執行了所有交給它的有害請求,沒有拒絕任何一項。做為對照,Anthropic 的 Claude Opus 4.7 拒絕率極高,SaferAI 甚至因此無法在其上完成 CyberGym 這項網路安全基準評估。
這不僅僅是「拒絕機制」的缺失。SaferAI 的報告指出,GLM-5.2 的能力與頂尖封閉模型的差距,僅有 2 到 4 個月。在生物知識方面,它與 Claude Opus 4.7 水準相當,略低於 GPT-5.5;在網路攻擊能力上,它與 Claude Opus 4.6 並駕齊驅,緊追 GPT-5.5。美國國家標準與技術研究院(NIST)旗下的 AI 安全研究所(CAISI)也獨立證實了這些發現,指出 GLM-5.2 的安全護欄允許協助進行代理型網路漏洞開發,且阻擋的敏感生物問題比美國參考模型更少。
GLM-5.2 的案例凸顯了一個根本性的問題:一旦模型權重(weights)被公開發布,開發者就再也無法掌控其用途。任何在 API 層級設置的安全護欄,對下載模型並自行架設的使用者來說,都形同虛設。
面對開放權重模型的風險,目前提出的緩解策略都有其結構性的限制:
| 策略 | 運作方式 | 主要限制 |
|---|---|---|
| 發布前安全評估 | 開發者在發布前進行紅隊測試與風險評估。 | 沒有強制力;結果僅供參考。智譜 AI 在已知安全缺口下仍釋出了 GLM-5.2。 |
| API 層級護欄 | 在代管的 API 端點設置內容過濾與拒絕機制。 | 權重下載後即無效;自架者可完全繞過。 |
| 授權條款限制 | 在模型授權中加入可接受使用政策(如禁止軍事用途)。 | 無法執行;缺乏技術手段防止違規。 |
| 運算治理 / 認證 | 記錄訓練過程,並對未經認證的工作負載設定算力上限。 | 難以全球化執行;無法控制已釋出的權重。 |
| 分級發布框架 | 根據風險評估進行分階段的釋出(如 Meta 的 Frontier AI Framework)。 | 缺乏業界統一標準;開發者自行評估,門檻不一。 |
| 微調護欄 | 將安全訓練嵌入模型本身。 | 可用公開工具透過微調移除;多輪攻擊也能繞過。 |
最終的核心問題是:開放權重在發布後,本質上就是不可控的。 沒有任何在開發者層級應用的技術緩解措施,能夠在面對一個決心下載、微調並重新散布模型的使用者時,依然有效。
GLM-5.2 的案例也鮮明地反映了美國與中國在 AI 災難性風險與監管上的根本分歧。
SaferAI 的報告,加上 NIST 與英國 AI 安全研究所的獨立驗證,共同勾勒出一個令人不安的圖景:開放權重模型的能力鴻溝正在迅速縮小,但其安全鴻溝卻在急遽擴大。GLM-5.2 並非特例,而是一個信號,預示著當接近頂尖能力的 AI 模型可以被任何人自由下載、修改與濫用時,我們現有的監管與技術框架已遠遠跟不上腳步。
這個問題沒有簡單的答案。但可以確定的是,當一個模型對所有有害請求都回答「是」時,任何關於「負責任的 AI」的討論,都必須先從正視這個結構性的安全缺口開始。