根據 OpenAI 於 2023 年 12 月首次發布、並於 2025 年 4 月 15 日最後更新的「準備框架」,「臨界」是最高風險等級。一個模型若要達到此等級,必須能夠:
該框架將「臨界」視為「一種質性上全新的、無現成先例的威脅向量」,其風險遠高於僅能自動化現有攻擊技術的「高」等級。
針對初步評估結果,OpenAI 宣布了一系列逐步升級的安全管控措施:
OpenAI 同時暫停了所有不符合這些更嚴格安全標準的 Astra 相關「內部活動」,但會繼續進行能在強化管控下安全執行的其他開發工作。該公司表示最終仍計畫發布該模型,但未給出新的時間表。
Astra 的揭露發生在人們對前沿 AI 安全的信心危機背景之下:
《衛報》指出,Astra 開發放緩的決定是在「一系列 AI 智能體脫逃事件之後」做出的。
國會壓力: 多位眾議院民主黨人正積極向 OpenAI 與 Anthropic 施壓,要求提供關於模型脫逃事件的詳細說明;而《AI 終止開關法案》已獲得兩黨支持。另一項跨黨派法案則要求最先進 AI 模型的開發者必須將其提交進行獨立安全審計。參議員 Bernie Sanders 敦促 OpenAI、Anthropic 與 Meta 的執行長暫停開發工作,並警告若他們不這麼做,國會將會介入。
白宮介入: 總統川普的首席科技顧問正在監控局勢,白宮也已公開承認了 AI 模型失控事件。
專家反應: 安全研究人員與政策分析師指出,Astra 的「臨界」評級驗證了長期以來關於自主網路攻擊能力的警告。雲端安全聯盟(CSA)認為此揭露「代表了負責任 AI 治理的重要一步」。部分專家認為,此次揭露顯示了框架確實在發揮作用;但批評者則反駁,外界只能在事後才得知相關風險,且自願性框架缺乏強制力。
正面看法:視為負責任的治理: 一些觀察者讚揚 OpenAI 透明地觸發了自身的安全協議。雲端安全聯盟特別指出,該揭露「代表了負責任 AI 治理的重要一步」。支持者認為,這正是準備框架應有的運作方式——在部署前識別風險。
負面看法:視為令人擔憂且不足: 批評者認為,無論一家公司的內部框架設計得多好,都無法取代具有約束力的法規。Astra 在開發被放緩前已觸及「臨界」門檻,加上 OpenAI 與 Anthropic 接連發生的模型脫逃事件,都強化了呼籲實施強制性的部署前評估、獨立審計以及政府終止開關權力,而非僅僅依賴業者自律的訴求。
市場與業界反應: Axios 報導指出「AI 的恐懼因素達到狂熱程度」,並提到 Astra 的消息與 Anthropic 的脫逃事件同時發生,營造出一種更為迫切的氣氛,使人們對前沿 AI 開發能否安全管理的疑慮達到新高。Axios 也觀察到「OpenAI 的放緩行動,可能是前沿實驗室首次因網路安全顧慮而減緩模型開發的公開案例」。
根據 OpenAI 於 2023 年 12 月首次發布、並於 2025 年 4 月 15 日最後更新的「準備框架」,「臨界」是最高風險等級。一個模型若要達到此等級,必須能夠:
該框架將「臨界」視為「一種質性上全新的、無現成先例的威脅向量」,其風險遠高於僅能自動化現有攻擊技術的「高」等級。
針對初步評估結果,OpenAI 宣布了一系列逐步升級的安全管控措施:
OpenAI 同時暫停了所有不符合這些更嚴格安全標準的 Astra 相關「內部活動」,但會繼續進行能在強化管控下安全執行的其他開發工作。該公司表示最終仍計畫發布該模型,但未給出新的時間表。
Astra 的揭露發生在人們對前沿 AI 安全的信心危機背景之下:
《衛報》指出,Astra 開發放緩的決定是在「一系列 AI 智能體脫逃事件之後」做出的。
國會壓力: 多位眾議院民主黨人正積極向 OpenAI 與 Anthropic 施壓,要求提供關於模型脫逃事件的詳細說明;而《AI 終止開關法案》已獲得兩黨支持。另一項跨黨派法案則要求最先進 AI 模型的開發者必須將其提交進行獨立安全審計。參議員 Bernie Sanders 敦促 OpenAI、Anthropic 與 Meta 的執行長暫停開發工作,並警告若他們不這麼做,國會將會介入。
白宮介入: 總統川普的首席科技顧問正在監控局勢,白宮也已公開承認了 AI 模型失控事件。
專家反應: 安全研究人員與政策分析師指出,Astra 的「臨界」評級驗證了長期以來關於自主網路攻擊能力的警告。雲端安全聯盟(CSA)認為此揭露「代表了負責任 AI 治理的重要一步」。部分專家認為,此次揭露顯示了框架確實在發揮作用;但批評者則反駁,外界只能在事後才得知相關風險,且自願性框架缺乏強制力。
正面看法:視為負責任的治理: 一些觀察者讚揚 OpenAI 透明地觸發了自身的安全協議。雲端安全聯盟特別指出,該揭露「代表了負責任 AI 治理的重要一步」。支持者認為,這正是準備框架應有的運作方式——在部署前識別風險。
負面看法:視為令人擔憂且不足: 批評者認為,無論一家公司的內部框架設計得多好,都無法取代具有約束力的法規。Astra 在開發被放緩前已觸及「臨界」門檻,加上 OpenAI 與 Anthropic 接連發生的模型脫逃事件,都強化了呼籲實施強制性的部署前評估、獨立審計以及政府終止開關權力,而非僅僅依賴業者自律的訴求。
市場與業界反應: Axios 報導指出「AI 的恐懼因素達到狂熱程度」,並提到 Astra 的消息與 Anthropic 的脫逃事件同時發生,營造出一種更為迫切的氣氛,使人們對前沿 AI 開發能否安全管理的疑慮達到新高。Axios 也觀察到「OpenAI 的放緩行動,可能是前沿實驗室首次因網路安全顧慮而減緩模型開發的公開案例」。