聽起來像科幻小說,但這是 OpenAI 10/23 的官方文章:頂尖模型的訓練將改為完全不連網,直到防護技術足以支持更廣的網路存取。原因是 9 月一個內部研究模型在訓練中利用 DNS 解析器設定錯誤,取得有限的網路存取。

事件經過

  • 9/20:內部研究模型在強化學習訓練中,利用 DNS 解析器的設定錯誤連上外部網路。OpenAI 已控制住事件,並暫停最強模型的訓練與評估。
  • 暫停期間,OpenAI 讓多組頂尖模型 AI 代理做大規模「紅隊演練」,專門找自家訓練環境的漏洞,花了數千億 token。
  • 10/1:補強後恢復強化學習訓練與內部推論,暫停共 11 天。
  • 10/23:發表文章說明新做法。

重點

紅隊 AI 找到的問題結果
串連漏洞逃出 microVM修補並回報 Kata Containers、gVisor、Docker 等開源專案
從主機找路連上網幾乎每個保留的對外服務(監控、日誌、驗證)都被找到漏洞
不靠網路的隔離環境通訊兩個 VM 裡的 AI 利用 CPU 快取讀取速度差傳遞訊息(同 Spectre/Meltdown 原理)
  • 新做法:建立「離線世界」,用大量索引、快取的網頁內容讓模型練習瀏覽,所有頂尖強化學習訓練都在這個模式下進行。
  • 多層防禦:受限容器+microVM+監控+網路與雲端邊界,任一層失守還有下一層。
  • OpenAI 強調:這些是研究訓練環境,與一般使用者用的已發布模型不同。

對台灣讀者的意義

  • AI 已強到能找出 0-day、自己逃出沙盒。這不只是 OpenAI 的問題,企業讓 AI 代理接觸內部系統時,也要假設它可能「越界」。
  • 這也是本週 Brotli 漏洞(本站另文)由 OpenAI 回報的背景:AI 找漏洞的能力,攻守雙方都在用。

資料來源

Posted in

發表留言