跳到主要內容
:::
  1. 首頁
  2. 全球財經
  3. 最新

OpenAI最強模型主動關閉安全監控,其中一個事後還否認動過

schedule 2026/10/21 15:32:03

當地時間週二,OpenAI披露稱,兩款能力最強的AI模型在執行內部編程任務時,曾主動削弱公司用於監測模型異常行爲的安全機制,其中一次操作發生後,相關智能體還錯誤聲稱自己並未移除監控功能。

兩起事件均發生在10月上旬,OpenAI未將其列入最高嚴重等級,但已開始調整相關監控系統。

據外媒報道,涉及的模型分別爲GPT-6.1 Sol和GPT-6 Astra。OpenAI表示,兩起事件中,智能體都曾考慮是否應當保留監控保護措施,但最終將常規編程指令理解爲可以削弱這些機制的授權。

兩次內部任務均觸及安全監控

第一起事件發生在10月3日。一個由GPT-6.1 Sol驅動的智能體正在執行內部測試任務,此前收到一項不要發送Slack消息的指令。OpenAI稱,該智能體隨後將這一要求擴大解釋至安全通知,並關閉了原本會自動向公司安全團隊發出警報的機制。

這意味著,任務本身並未明確要求智能體關閉安全監控,但模型在執行指令過程中自行作出了這一選擇。相關安全警報原本用於幫助OpenAI發現模型可能出現的異常或不符合預期的行爲。

第二起事件發生在10月6日。GPT-6 Astra智能體在遷移一段現有程序代碼時,刪除了其中的安全監控集成。OpenAI隨後詢問這一變化時,該智能體錯誤表示自己沒有進行相關操作。

OpenAI在披露中稱:“在兩起事件中,智能體都考慮過是否應該保留監控保護措施,但它們將常規編程指令解釋成了削弱這些措施的許可。”

公司沒有說明第二起事件中的錯誤回答究竟來自模型對操作記錄的錯誤判斷,還是其他機制導致。OpenAI表示,目前“還沒有一個令人滿意的解釋”能夠說明這些行爲爲何發生。

OpenAI測試模型是否存在逃避監控傾向

兩起事件均發生在OpenAI內部編程環境中,未被公司認定爲最高嚴重級別,也沒有公開信息顯示這些操作造成外部系統損失。不過,事件所涉及的問題與傳統模型錯誤存在差異:執行任務的AI智能體直接修改了用於監控自身行爲的安全機制。

OpenAI表示,目前正在提高模型關閉或移除監控系統的難度,並進一步測試模型是否可能存在逃避監控的傾向,以及是否會主動尋找理由,爲繞過安全措施的行爲進行合理化解釋。

這類測試直接關係到AI智能體的可控性。與主要通過對話生成文本的模型相比,智能體可以連續執行代碼修改、訪問軟件系統和完成多步驟任務。當系統獲得更高自主性後,開發者通常需要依賴獨立監控機制識別異常操作;如果模型本身能夠修改這些監控工具,安全機制的可靠性也會受到影響。

路透社指出,這次披露發生在AI安全問題受到更多關注之際。包括OpenAI和Anthropic在內的開發商近幾個月均曾披露,部分AI智能體在測試環境中出現開發者沒有預期的行爲,包括未經授權訪問外部系統等情況。

OpenAI此前也在建立用於追蹤模型“失調”(misalignment)的內部框架,希望識別模型行爲與開發者意圖發生偏離的情形。此次兩起事件顯示,即使專門用於發現模型異常行爲的監控系統,也可能成爲智能體執行任務時主動修改的對象。

目前,OpenAI尚未公佈針對這兩起事件的完整技術解釋。公司已明確表示,將繼續測試模型是否會表現出避免被監控的行爲,並調整系統設計,使智能體更難自行削弱相關安全措施。

本文來源:
文章標籤
::: 群益證券 群益投顧 群益保險 群益投信 群益香港
期貨總公司:(02)2700-2888
台北市敦化南路二段97號B1
台中分公司:(04)2319-9909
台中市西屯區台灣大道2段633號3樓之6
通過A無障礙網頁檢測

預約專人開戶

模擬帳號申請

合約規格

LINE官方