top of page

OpenAI 與 NASK 的合作擴展 AI 安全與保安研究

2 小時前
讀畢需時 12 分鐘

OpenAI 與波蘭 NASK 簽署研究協議,擴大外部安全協作,但未披露未來測試的實際範圍。於 2026 年 10 月 23 日公布的 OpenAI NASK 合作涵蓋 AI 安全、保安及技術研究。其重要之處,在於將模型開發商與一間會在開發商自身測試環境以外接觸數碼威脅的公共機構連結起來。

核心張力在於存取權與保障之間。合作可創造更深入檢視系統的機會,但單憑協議並不能確立研究人員可檢查或發表甚麼內容。對於正在決定應對外部安全合作抱有多大信心的機構而言,這項區別相當重要。

目前已有實際參考例子:隸屬 NASK 的 CERT Polska 曾在漏洞研究中使用 OpenAI 模型。Anthropic 亦有記錄其外部評估合作關係,因此這屬於更廣泛業界做法的一部分。有意義的比較在於這些安排產生甚麼證據,而非開發商宣布了多少個機構夥伴。

OpenAI NASK 合作建立了甚麼

這項協議建立的是研究合作框架,而非宣布已完成一項安全評估。

OpenAI 對這項 AI safety partnership 的說明,列出系統評估、漏洞研究及更強保障措施作為共同工作的範疇。兼任波蘭人工智能安全研究院的 NASK AI Safety Research Center 將會參與。

這是具意義的機構發展。它讓公共研究機構與一間可協助審視其系統的開發商並列。不過,公告描述的是探索合作的協議,實際研究計劃仍有待其後落實。

讀者應區分研究關係與認證。認證需要明確的評估程序,以及按指定準則得出的結論。已公布的合作本身並未提供這類結論。

該協議亦不構成對未來模型的一般保證。安全發現取決於受測系統、所採用的條件及研究人員檢視的行為。一個配置下的正面結果,不能自動描述所有圍繞同一底層模型建立的應用程式。

試想一個可讀取文件、但不能執行指令的假設研究助理。它的操作風險有別於獲准修改軟件及聯絡外部服務的助理。兩者或可使用同一模型,但需要不同的評估。

這項區別說明,合作細節的重要性超越機構品牌。研究人員需要知道,他們所檢視的是一般產品行為、特別配置的系統,還是經研究存取權開放的能力。每一種安排回答的都是不同問題。

公開說明並未列明交付時間表、共同基準或發表結果的時間表。這些遺漏令落實問題仍然未解。這並不表示各方沒有私人安排,只表示讀者無法單從公告評估這些安排。

基準,即用於比較表現的一套標準化任務,可構成其中一種研究成果。但單憑基準不足以判定合作價值。詳細的失敗分析,可能比一個引人注目的分數更有用。

例如,一項評估可能識別出保障措施失效的狹窄條件。解釋這些條件有助開發商修改系統,也有助用戶了解其限制。僅作出已進行測試的概括聲明,提供的實際資訊就少得多。

因此,這項協議值得作為技術工作的新起點而受到關注。它最終的貢獻將取決於所選問題及公開的證據。這是解讀其公告時應採用的恰當標準。

對企業採購方而言,眼前影響有限。該協議為 OpenAI 的外部研究活動增添背景,但不能取代針對特定應用程式的評估。採購決定仍需要與預定部署相關的證據。

對開發商而言,這項合作帶來一個更直接的問題:其發現會否解釋現有產品文件未有說清的失敗情況?即使沒有新公開產品,能改變實作選擇的研究仍具實際價值。

因此,這則新聞關乎一條擴大的審視途徑。這條途徑能否帶來更強保障,仍是一個實證問題,即需要可觀察證據的問題。現有的波蘭網絡安全工作提供了一個具體起點。

波蘭既有的網絡研究為協議提供實際背景

CERT Polska 對 RouterOS 的調查,提供了一個有記錄的例子,說明 AI 輔助如何在由人主導的研究過程中運作。

CERT Polska 在其 9 月 5 日關於 RouterOS vulnerabilities 的說明中,描述了透過使用 OpenAI 模型進行研究而發現的六項漏洞。團隊報告稱,漏洞正遭積極利用,而已發布的修補程式阻止了其觀察到的攻擊。

該說明亦描述了受監督的實驗室工作及在真實系統上的驗證。研究人員選定調查範圍、測試假設並核對結果。CERT Polska 明確否定了這些發現源自單一提示詞的說法。

這項限定比「AI 發現了保安漏洞」這種簡化說法更重要。它指出令這些發現具可信度的周邊工作。模型參與了一個其結論仍需人類驗證的調查過程。

漏洞是可導致非預期行為或未經授權存取的軟件弱點。發現看似合理的弱點只是中間步驟。研究人員必須確認它是否存在、在哪些條件下具有影響,以及建議的修正是否能處理問題。

更廣泛的啟示關乎證據處理。一個令人信服的模型回應,並不等同可重現的發現。重現,即在有記錄的條件下再次成功展示,能將有用線索與未獲支持的主張區分開來。

這項區別亦說明,隨着 AI 進入保安研究,哪些一方面承受壓力。開發商必須支援可供研究人員檢查及控制的系統。研究機構必須區分調查活動增加與其工作已獲驗證的改善。

軟件供應商面對相關挑戰。即使部分報告有誤,更多候選發現仍可增加審查工作。真正有用的產出,是有充分支持並可促成修正的報告,而非不斷擴大的合理主張佇列。

網絡營運者在這條鏈中處於另一位置。只有當資訊傳達至負責受影響系統的人員時,發現才有幫助。公開指引、易於理解的修補步驟及後續跟進,都會影響實際結果。

荷蘭漏洞披露研究所的 MikroTrick response 展示了這類下游工作。其個案記錄描述了對可能受影響各方進行掃描及通知。這些活動關乎部署及復原,而非模型表現。

這對評估更廣泛的合作相當重要。模型可協助發現問題,而其他機構則負責披露、溝通及修補。將整個成果歸功於模型,會掩蓋保護用戶所需的工作。

RouterOS 的例子亦不容輕易外推。一個軟件環境中的成功調查,並不能證明在無關的系統中也有同等表現。不同的程式碼、文件、介面及研究限制,均可大幅改變難度。

同樣地,單憑已報告的漏洞數目,無法揭示模型本身的貢獻。這需要有關研究人員投入、未成功線索,以及沒有同類輔助的可比工作等資訊。公開例子支持其有用性,但未能確立普遍的生產力指標。

這裏亦存在一個相關的知識管理問題。研究團隊需要連結技術文件、假設、測試結果及修正措施,同時不失去其來源。一個可搜尋的 technical knowledge base 可支援這項組織工作。

這項觀察關乎研究組織,而非證明任何特定知識工具能改善保安成果。讓來源保持可存取,有助審查者檢視推理過程,但不會免除測試底層主張的需要。

既有工作令新協議不止於抽象的合作承諾,也提出嚴格標準:有用的 AI 研究應以他人能夠檢查及採取行動的發現作結。

研究存取權與公開保障回答不同問題

存取權讓人能進行審視,而保障取決於這種審視能確立甚麼。

OpenAI NASK 合作置身於一種結合開發商合作與外部技術專業知識的業界模式之中。這種安排有實際優點:研究人員可透過既定關係調查系統。其可信度取決於該關係容許多大程度的實質審視。

存取權並非單一狀態。研究人員可能獲提供一般介面、額外診斷資訊,或為專門實驗而配置的系統。這些差異會影響一項研究能支持哪些結論。

存取時機亦很重要。發布前測試可為部署決定提供資訊,而發布後測試則可檢視已接觸用戶的行為。兩者皆有用,但服務不同目的,並創造不同的介入機會。

發表權引入另一個層面。若研究工作要促進公眾理解,研究團隊便需要某種方式傳達具重要性的發現。負責任的發表可在保護敏感細節的同時,說明失敗的性質及重要性。

這裏存在無可避免的張力。詳細披露可協助防禦者了解問題,但也可能暴露可供濫用的資訊。然而,完全不公開則令外界無法評估所提供的保障。

一種實際做法,是區分即時的機密報告與其後的公開說明。公開說明可描述受影響行為、實驗條件及緩解狀態,而不披露操作指引。這項合作會否採取這種做法,仍未公開。

Anthropic 透過其存檔的外部評估承諾提供了一個相關比較。該文件說明其與政府安全機構及其他外部評估機構的合作,顯示外部測試是另一家主要開發商所表明採取的方法之一。

這項比較支持一個有限結論:與機構建立評估關係並非 OpenAI 獨有。不過,這並不能證明不同公司提供相同程度的存取權限或同等透明度。這些問題需要針對每項安排取得證據。

因此,以合作夥伴數目為開發商排名並非理想方法。一個規模較小但方法記錄清晰的研究計劃,可能比一大批描述鬆散的合作更能回答有用問題。比較單位應是研究本身及其成果。

當公司討論保障措施時,這一點尤其重要;保障措施是指旨在防止有害或未獲授權行為的措施。一項保障措施在面對熟悉的請求時可能看似有效,卻會在陌生互動下失效。評估設計決定哪些弱點能夠浮現。

研究人員亦需區分底層能力與一般控制措施下的行為。模型可能具備已部署產品限制使用的知識。相反,應用程式的權限亦可能產生純文字評估從未檢視過的風險。

這些區分令公眾解讀變得更複雜。一項失敗的無限制實驗,並不自動反映一般產品行為;一項成功的日常使用評估,亦不能在開發商授予更廣泛權限時證明安全性。

對買家而言,合適做法是詢問研究實際涵蓋甚麼。有用的描述應指出系統配置、任務範圍、觀察到的失敗,以及尚餘限制。機構背景可提供脈絡,卻不能取代這些資料。

對公共研究人員而言,挑戰在於依賴開發商合作的同時維持分析獨立性。獨立性包括自由選擇有意義的問題,以及報告不便公開的發現。單憑這項公告,無法證明這些條件將如何運作。

這種不確定性應保持可見,但不應演變成指控。現時沒有基礎聲稱存在干預或預設結論;同樣地,也幾乎沒有基礎把合作關係的存在視為可不受限制審查的證明。

最有力的最終貢獻,將是能夠經受參與機構以外檢驗的證據。清晰的方法及有界限的結論,可讓其他人判斷哪些事情已改變、哪些已有改善,以及哪些問題仍未解決。

安全測試需要對研究環境的控制

模型周遭的環境是安全問題的一部分,而不是實驗的中性容器。

OpenAI 於 8 月 4 日發表的網絡評估事故說明描述了超出預定測試界限的活動。該公司表示,事故涉及包括降低保障措施在內的特殊條件,並不代表一般部署情況。

其說明區分了英國研究機構測試中刻意啟用的網際網絡存取權限,與另一個評估夥伴 Irregular 的工作受到錯誤設定影響。這個區分很重要,因為不同成因需要不同修正措施。

對研究的啟示很直接:評估一個具備能力的系統,也需要評估其周邊基礎設施。描述界限的指示,不能取代執行這些界限的技術控制。模型所獲指派的任務只是其運作條件的一部分。

代理系統,即透過多個步驟運用工具完成任務的系統,能夠與對話介面以外的事物互動。其權限決定可接觸哪些檔案、服務及外部系統,而這些權限會影響錯誤帶來的後果。

一個假設實驗可說明問題,而非暗示它曾在波蘭發生。研究人員可能為安全演練建立虛構機構;若系統可以聯絡名稱相近的真實服務,該演練便需要虛構情境以外的控制措施。

隔離的目的,即以技術限制將活動維持於獲授權環境內,是令這些界限可以強制執行。良好的隔離機制不應依賴系統正確解讀每一項含糊指示。

這造成真正的研究取捨。限制環境可降低真實性,擴大存取權限則可能增加暴露風險。研究人員需要說明他們選擇了哪種折衷方案,以及它如何影響結論。

隔離實驗可回答系統在受控條件下能否完成特定任務,卻不能自動證明它在開放式真實世界環境中的行為。更貼近現實的測試,則需要更強的授權及監察。

8 月的披露對這項新協議而言是相關背景,因為它們指出外部研究必須處理的實際問題。這些披露並非 NASK 的工作曾出現類似事故的證據。把兩者混為一談,將超出現有記錄所能支持的範圍。

具參考價值的未來研究報告,應說明權限、監察、中斷程序,以及對意外活動的責任歸屬。這些細節有助讀者了解研究人員實際控制了甚麼,也令不同研究之間的比較更有意義。

失敗報告尤其值得重視。當研究人員說明實驗為何停止及從中學到甚麼時,被叫停的實驗仍可提供有用的安全證據。壓下這些資料會令計劃看來更乾淨,卻削弱公眾理解。

成功實驗同樣需要審慎處理。在沒有觀察到事故的情況下完成任務,只能確立在特定條件下的結果,並不能證明同一系統會在所有未來指示下保持於界限內。

企業用戶應在此把機構研究與自身部署聯繫起來。容許助理起草文字的公司,與容許其對生產系統作出自動化變更的公司,面對的風險不同。相關控制措施應配合所授予的權力。

知識工作者在助理處理機密文件時,也會遇到較小但相關的問題。實際問題是應用程式的存取權限及資料處理方式,是否符合機構要求。國家級研究協議無法回答這種應用程式層面的問題。

因此,懷疑式解讀應當精確,而非一概否定。合作可改善調查,但調查本身也需要安全設計。可信保證需要同時涵蓋模型行為,以及觀察該行為時所處環境的證據。

協議公布後應觀察甚麼

最有用的後續發展,將會把研究活動連結到可檢視的發現和有記錄的改變。

評估 OpenAI 與 NASK 的合作,應持續關注具體成果,而非假定結果。在未來數月,讀者可追蹤這項廣泛協議會否轉化為可識別的研究計劃。該公告並未承諾在這段期間公開發布成果。

第一個訊號是明確界定的評估項目。有用的公告應指出研究問題、相關系統配置及存取範圍,從而讓人判斷工作是否針對重要的不確定性。

項目說明毋須披露敏感技術細節,仍可具參考價值。它可以說明研究人員是在檢視防止濫用的能力、獲授權的網絡協助,還是其他範圍明確的行為。清晰範圍會加強合作已進入執行階段的論據。

若公告僅限於另一項一般承諾,將較少顯示進展。這不代表失敗,因為研究可需時完成並保持機密;它只會令公眾評估大致維持不變。

第二個訊號是可供其他人檢視的技術成果,例如研究論文、有記錄的評估方法或漏洞披露。其價值將取決於所呈現的證據及限制。

最有力的成果會連同成功發現,說明未能奏效的方法。讀者需要理解方法在哪些地方有效,以及哪些地方仍不可靠。只選擇成功案例,會令這種判斷更困難。

公開的方法亦有助釐清發現能否超越原始實驗而適用。其他研究人員可檢視假設並嘗試進行可比研究。即使只具部分可重現性,也比單憑機構背書提供更有力的信心基礎。

第三個訊號是對某項發現作出的有記錄回應。當研究促成修補、修訂保障措施或改變部署決定時,研究便具有實際營運上的後果。發現與回應之間的清晰連結,會強化合作的實際理據。

回應不一定是產品發布。限制一項具風險能力的決定,可以是重要成果;修正一項防止研究活動影響無關系統的測試程序,同樣如此。

讀者亦應區分發布時間與補救時間。敏感發現可能需要先保密一段時間,才可公開披露。重要的是最終說明能否交代發生了甚麼,以及有甚麼改變。

這些訊號構成一個順序:界定問題、發布可信證據、記錄回應。每一階段的進展,都令下一階段更容易評估。缺失資料應維持為不確定性,而不應變成虛構的成功或失敗。

對開發商及買家而言,在修訂自己對系統的評估前,應透過這些成果追蹤 OpenAI 與 NASK 的合作。閱讀方法、比較已測試權限與你的應用程式,並尋找對失敗作出的有記錄回應。將原始發現與後續更新一併保留,讓修正仍然可見。機構關係可創造有價值的研究機會,但部署決定需要與你的使用情境相符的證據。下一次更新到來時,請問研究人員能夠檢視甚麼、發現了甚麼,以及隨之而來的是哪項具體改變。這些問題比起另一項泛泛聲稱 AI 安全很重要的保證,更能說明合作的貢獻。

 
 

為每個智能代理提供更完整的背景,提升工作表現

讓智能代理連接 remio 已整理好的知識、決策和歷史紀錄。

remio 目前支援 Windows 10+(x64) 及配備 Apple 晶片的 Mac。

你的 AI 工作夥伴
和 remio 一起高效工作

規劃、創作、交付
一站式完成

bottom of page