BTC $83,998.31 +1.28%
ETH $2,710.12 +2.53%
BNB $767.71 +0.88%
XRP $1.50 +2.13%
SOL $119.51 +1.04%
TRX $0.3356 +0.72%
DOGE $0.0949 +2.41%
ADA $0.2505 +3.08%
BCH $310.33 +1.09%
LINK $15.18 +10.93%
HYPE $88.25 -0.88%
AAVE $160.27 +8.53%
SUI $1.13 -3.02%
XLM $0.2284 +9.80%
ZEC $1,419.89 -7.93%
AAPL $337.70 -0.87%
AMZN $246.48 -0.84%
GOOGL $342.65 +0.31%
MSFT $507.66 -1.69%
META $718.22 -2.00%
NVDA $230.44 +3.24%
TSLA $358.90 -2.71%
SNDK $1,734.84 +0.87%
INTC $116.41 -2.18%
SPCX $146.69 -1.50%
MU $1,074.06 +1.39%
AMD $612.10 -0.32%
BTC $83,998.31 +1.28%
ETH $2,710.12 +2.53%
BNB $767.71 +0.88%
XRP $1.50 +2.13%
SOL $119.51 +1.04%
TRX $0.3356 +0.72%
DOGE $0.0949 +2.41%
ADA $0.2505 +3.08%
BCH $310.33 +1.09%
LINK $15.18 +10.93%
HYPE $88.25 -0.88%
AAVE $160.27 +8.53%
SUI $1.13 -3.02%
XLM $0.2284 +9.80%
ZEC $1,419.89 -7.93%
AAPL $337.70 -0.87%
AMZN $246.48 -0.84%
GOOGL $342.65 +0.31%
MSFT $507.66 -1.69%
META $718.22 -2.00%
NVDA $230.44 +3.24%
TSLA $358.90 -2.71%
SNDK $1,734.84 +0.87%
INTC $116.41 -2.18%
SPCX $146.69 -1.50%
MU $1,074.06 +1.39%
AMD $612.10 -0.32%
first_img

OpenAI:前沿強化學習訓練前應提交安全論證

2026-09-29 15:00:27

ChainCatcher 消息,OpenAI 於 2026 年 9 月 28 日發布安全類文章,認為在繼續任何前沿強化學習訓練之前,應要求提供結構化安全文檔。理想情況下,這類文檔應達到航空、核電等安全關鍵行業所用的基於證據的結構化風險論證水平。OpenAI 將其視為努力方向,同時承認因 AI 能力湧現的複雜性,難以做到同等嚴格。

文章聚焦前沿強化學習訓練,不覆蓋內部與外部部署所需的更廣泛對齊屬性。文中建議屬於當前做法,預計會繼續演變,並正在 OpenAI 內部實施。技術防護應覆蓋模型對齊、隔離與監控,包括避免正向強化獎勵投機、離線對齊評估與壓力測試、不讓自動評分器看到思維鏈,以及多層基礎設施安全、沙箱紅隊、限制高帶寬跨樣本通信和不可變保存智能體記錄。

運營準則包括跨團隊事前異議、高級領導可否決的審批、訓練負責人對安全論證與事件響應負責,以及失效暫停、內部監督、審計訪問和按嚴重程度升級。針對嚴重錯位事件,OpenAI 提出受控訪問原始記錄、根因分析、運營與文化復盤,並將事件衍生評估作為回歸測試;調查結束後公開結果、復盤與運營變更,並儘快通知受影響第三方。

app_icon
ChainCatcher 與創新者共建Web3世界