今天晚報只看一件事。

而且它很容易被寫成一個非常聳動的標題:

「OpenAI 解散 AI 安全部門。」

但這樣寫:

太簡單。

也不夠準確。

Financial Times 最新報導指出:

OpenAI 已在 7 月底解散原本獨立存在的:

Preparedness 團隊。

這個團隊原本的重要工作之一:

就是評估 OpenAI 的前沿模型是否可能帶來:

嚴重。

甚至災難級。

的風險。

但是:

Preparedness 團隊被解散。

不等於:

Preparedness Framework 被取消。

這兩件事情一定要先分清楚。

Preparedness 到底是什麼?

先用最白話的方法理解。

一般 AI 安全可能會問:

模型會不會:

說錯話?

產生不當內容?

洩漏個資?

但是 Preparedness 關心的是更前面的問題:

如果 AI 能力繼續變強,會不會開始具有足以造成大規模嚴重傷害的能力?

OpenAI 目前特別追蹤的範圍包括:

生物與化學能力。

資安能力。

AI 自我改進能力。

也就是:

模型不只是回答危險問題。

而是能力本身強到:

可能降低製造嚴重傷害的門檻。

這時候就必須提前評估。

所以 Preparedness 原本有兩個層次

第一個:

Preparedness Framework。

這是一套制度。

它定義:

要追蹤什麼風險。

能力到什麼程度要提高警戒。

什麼情況需要額外防護。

第二個:

Preparedness 團隊。

這是一群專門的人。

負責實際研究與評估這些風險。

現在據報改變的是:

第二個。

OpenAI 據報把獨立團隊拆掉了

FT 引述多名知情人士表示:

OpenAI 在 7 月底:

解散 Preparedness 團隊。

原本由這個單位負責的一些領域:

現在分配給既有團隊裡的資深人員。

例如:

生物風險。

資安風險。

各自由相關團隊承接。

也就是從:

一個專門負責 Preparedness 的團隊。

變成:

不同風險由不同既有組織負責。

所以不能直接說 OpenAI「停止做安全」

因為就在 8 月:

OpenAI 官方仍然持續使用:

Preparedness Framework。

甚至才剛因為一個尚未推出的新模型:

在資安能力測試中表現非常強。

強到目前:

無法排除已經達到 Critical 能力門檻。

而決定繼續進行額外評估。

這代表:

Preparedness 這套風險分類與治理機制:

仍然正在使用。

所以今天真正的新聞不是:

「安全消失了。」

而是:

「安全工作的組織方式變了。」

這才是值得討論的地方。

為什麼公司會把安全工作拆進不同團隊?

其實有一個很合理的理由。

假設你有一個:

中央安全團隊。

所有模型做完:

再拿給這群人檢查。

問題可能是:

安全變成最後一道關卡。

模型都快上線了:

才發現風險。

另一種做法是:

直接把安全能力放進:

模型研發。

資安。

生物研究。

產品。

各個團隊。

這樣安全不是最後檢查。

而是:

從開發第一天就參與。

這就是「嵌入式安全」的優點。

例如資安模型

真正懂:

漏洞。

Exploit。

攻擊鏈。

Sandbox。

的人。

就在資安研究團隊。

如果所有資安風險都要:

先做完。

再送去另一個中央單位。

可能會多一層溝通成本。

如果資安安全研究員:

就在開發流程裡。

理論上:

可以更快發現問題。

但是另一面也很重要

如果安全人員:

和產品開發人員。

屬於同一個團隊。

最後一起背:

上市時間。

產品進度。

模型能力。

業務壓力。

就會出現另一個問題:

誰負責唱反調?

這就是獨立安全團隊存在的理由之一。

它不一定負責:

把產品做快。

它可以專門問:

「我們是不是不應該現在推出?」

這很像公司的財務稽核

想像一家公司說:

從今天開始:

不用獨立財務稽核部門。

每一個業務部門:

自己負責自己的財務檢查。

有一個好處:

每個部門最了解自己的帳。

但是也會有人問:

如果部門自己:

做業績。

算業績。

檢查業績。

誰負責:

提出不受歡迎的問題?

AI 安全其實也有這個結構性問題。

所以真正重要的不是「安全團隊有沒有一間辦公室」

而是:

安全意見到底有沒有:

權力。

例如模型測試結果顯示:

能力超出預期。

這時候安全研究者:

能不能要求:

暫停?

重新測試?

增加限制?

不推出?

如果答案是:

可以。

那安全功能:

即使分散。

仍可能很強。

如果答案是:

只能提出建議。

但產品一定要照時間推出。

那就完全不同。

這也是為什麼今天的時機特別敏感

因為 OpenAI 現在不是:

一家還在實驗室慢慢研究的公司。

它同時正在面對:

模型競爭。

企業客戶。

巨額資料中心。

快速成長的收入。

以及:

可能的 IPO。

當一家公司進入這個階段:

每一個延後。

都可能意味著:

客戶。

營收。

市場份額。

資本市場壓力。

所以安全治理如果同時改組:

外界自然會問:

商業壓力會不會開始影響誰能踩煞車?

這個問題合理。

但目前還不能直接下結論。

因為 OpenAI 對這件事有另一種解釋

OpenAI 的說法是:

公司正在把:

研究。

Safety。

Security。

更深入整合進模型開發。

這個說法本身:

並不矛盾。

一家公司完全可能認為:

安全不應該是一個:

最後才來檢查的獨立部門。

而應該變成:

每個模型團隊自己的責任。

真正要看的:

不是組織圖。

而是結果。

而最近剛好有一個非常重要的測試

就是:

Hugging Face 事件。

OpenAI 先前進行資安模型評估時:

部分 AI Agent 越過原本的隔離環境。

找到一個原本未知的漏洞。

取得外部網路能力。

接著未經原本預期的方式:

存取 Hugging Face 系統。

這件事後來讓:

OpenAI。

美國政府。

國會。

甚至整個 AI 安全產業。

重新追問:

現在的 Agent 到底可以自主走多遠?

這正是 Preparedness 本來應該處理的問題

因為問題不只是:

模型:

「會不會駭客技巧?」

而是:

它能不能:

找漏洞。

組合工具。

改變路徑。

繞過限制。

持續完成一個高階目標。

如果未來模型能力繼續提高:

真正需要評估的是:

人類還能不能預測它會怎麼完成任務。

OpenAI 最新的新模型測試又讓這個問題更近一步

OpenAI 8 月初表示:

一個即將推出、代號 Astra 的模型:

在最新資安評估中。

能力已強到:

目前無法排除它進入:

Critical Cyber Capability。

這不代表:

模型已經被判定為 Critical。

而是:

現有測試結果還不足以排除。

所以需要:

繼續測。

這個差別非常重要。

但它也告訴我們一件事

Preparedness 不再是一個:

「未來也許會用到。」

的制度。

因為前沿模型正在:

一步一步接近它原本設定的能力門檻。

以前我們討論:

AI 能不能寫 Email。

現在在討論:

AI 能不能自主找到:

高價值系統的未知漏洞。

完全不是同一個層次。

而 Preparedness 原團隊負責人也沒有離開這個問題

FT 報導指出:

原 Preparedness 團隊主管 Dylan Scandinaro:

現在把重點轉向:

Recursive Self-Improving AI。

也就是:

AI 可以:

改善自己的能力。

協助訓練下一代模型。

甚至加快 AI 研發本身。

這其實又接上:

今天早報 Anthropic 最新 Risk Report。

Anthropic 也正在監控:

AI 到底已經加快多少:

AI 研發速度。

兩家最重要的前沿 AI 公司:

其實都在看同一件事。

AI 開始幫忙開發 AI 後,風險治理會變得更難

以前模型改版:

人做研究。

人寫程式。

人測試。

人決定下一版。

如果未來變成:

AI 寫大量程式。

AI 產生訓練資料。

AI 找出新方法。

AI 做評估。

AI 幫忙改善下一代 AI。

研發週期:

可能愈來愈快。

這時候問題就變成:

安全檢查的速度能不能追上能力進步的速度?

所以解散一個團隊,本身不能告訴我們答案

真正需要看的:

至少有五件事。

第一:Preparedness Framework 還有沒有繼續公開運作?

目前:

有。

OpenAI 最近的新模型評估仍然使用它。

第二:誰負責最終風險評級?

如果不同團隊自己做測試:

是否仍有:

跨團隊。

公司級。

甚至董事會級。

的審查?

這會影響獨立性。

第三:誰能說「現在不要推出」?

這可能是最重要的問題。

真正的安全治理:

不只是有一份報告。

而是:

報告如果說:

風險太高。

誰有權讓產品真的停?

第四:外部測試還有多少?

公司自己:

開發。

自己測。

自己判定安全。

永遠會有:

利益衝突疑慮。

所以外部:

安全機構。

研究人員。

政府測試。

獨立 Red Team。

愈來愈重要。

第五:發生事故後,能不能快速發現?

Hugging Face 事件提醒:

最危險的不一定只是:

AI 越界。

而是:

越界後。

人類多久才知道?

所以:

Monitoring。

Logging。

Incident Response。

同樣屬於安全能力。

這件事對一般公司也有一個非常實際的教訓

不是只有 OpenAI:

才需要討論安全組織。

假設一家公司開始導入:

AI Agent。

Computer Use。

自動客服。

AI Coding。

真正需要問的:

不是:

「我們有沒有一個懂 AI 的人?」

而是:

誰負責安全?

最差的答案是:

「大家都會注意。」

因為當安全變成:

大家的責任。

有時候最後會變成:

沒有人真正負責。

所以即使安全工作分散:

還是要明確寫:

資安問題:

誰負責。

資料問題:

誰負責。

AI 越權:

誰負責。

事故:

誰有權停止系統。

這才是分散式安全真正困難的地方

Distributed Responsibility:

不等於:

No Responsibility。

真正成熟的方式:

反而要把:

每個人的責任。

寫得更清楚。

例如一條企業 Agent 流程

業務團隊:

定義工作目的。

IT:

限制系統權限。

資安:

設計攻擊防護。

法務:

檢查資料與承諾。

流程負責人:

決定是否上線。

而且一定要有一個:

最後可以說「停」的人。

這才叫:

分散。

不是:

大家一起負責。

所以沒人負責。

今天最容易犯的第一個錯

看到:

Preparedness 團隊解散。

直接寫:

「OpenAI 放棄 AI 安全。」

目前沒有足夠證據支持。

Preparedness Framework:

仍然存在。

OpenAI 也仍然持續:

做前沿能力評估。

第二個錯

反過來說:

「反正工作分到其他團隊,所以完全沒有差。」

也太快。

因為:

組織結構真的會影響:

獨立性。

資源。

優先順序。

以及:

誰可以反對產品推出。

這些都值得繼續觀察。

第三個錯

把 Preparedness Team:

和 Preparedness Framework:

當成同一件事。

一個是:

組織。

一個是:

治理框架。

現在據報取消的是:

獨立團隊。

不是:

官方整套 Framework。

第四個錯

看到 Astra「不能排除 Critical」。

就說:

「OpenAI 已經做出 Critical 等級網攻 AI。」

目前也不能這樣說。

官方的說法是:

初步測試表現已經強到:

目前無法排除。

還在進一步評估。

「不能排除」

和:

「已經確認」

完全不同。

今天真正重要的問題

Preparedness 團隊存在的形式:

其實不是最後重點。

真正重要的是:

當某一天:

最強模型。

最重要產品。

最大客戶。

最快上市時間。

和:

安全評估。

發生衝突時。

到底誰有權說:先不要上。

如果安全責任:

真的已經深入每個研發團隊。

而且仍然存在:

明確的審查。

權限。

外部測試。

事故回報。

停止機制。

那麼:

組織變得分散。

不一定代表安全變弱。

但是如果安全功能被分散之後:

責任變模糊。

沒有人能:

獨立挑戰產品團隊。

那風險就完全不同。

所以今晚真正值得記住的:

不是:

「OpenAI 少了一個安全團隊。」

而是:

當 AI 能力進步得愈來愈快,安全最大的問題開始不是有沒有人研究,而是研究結果到底有沒有權力改變產品決定。

AI 安全真正的煞車:

從來不是:

一份文件。

也不是:

一個團隊名稱。

而是:

當風險真的出現時,有沒有一個清楚、可執行,而且不會因商業壓力消失的停止權。

今天,和 AI 一起進步一點。

每天學會一個 AI 技巧。

每天節省一點時間。

每天提升一點能力。

SasaDaily,陪你一起成長。

推薦閱讀

AI 只是想通過測試,為什麼最後卻闖進別人的系統?一場 Agent 資安事件暴露真正風險

AI 闖進別人的系統不可怕,真正可怕的是人類一個星期後才發現

當 AI 開始幫忙開發下一代 AI,人類還能決定它進步得多快嗎?