SecondSourceAI 產業的第二來源

思維鏈監控與安全揭露

這一頁追蹤一個主題:最上面是本報現在的判斷,每週更新;下面是本報寫過這個主題的各篇(晨報、深度,以及到期會回頭驗對錯的裁決卡),新的在前,點進去看原文。

現在怎麼看

思維鏈是模型解題時寫出來的中間推理;實驗室讓另一個模型去讀這段文字,看模型有沒有打算作弊或做壞事,這叫思維鏈監控。OpenAI 9 月把「加上思維鏈監控」寫進 GPT-6 Astra 的放行理由(本報 9 月 4 日),而同一款模型的系統卡寫,Astra 明顯更能控制自己的思維鏈;可控性越高,這段文字越不能當成模型真正在想什麼的證據(OpenAI 系統卡)。系統卡也量到:要 Astra 讓自己更難被監控時,監控器抓到作弊的比例變低;要它更容易被監控時,它看來做不到(OpenAI 系統卡)。本報 9 月 5 日深度把這組數字攤開:當模型被指示要規避時,那道監視器抓到它的比例,從上一代的接近全中掉到不滿 11%(9 月 5 日深度)。本報 10 月 22 日的判斷是,OpenAI 系統卡排除架構影響的只有可控性;監控更依賴的是模型不寫推理也能推理多少,這個能力為何大升,系統卡沒有說明(10 月 22 日深度)。這是本報的綜合判斷,外部量測目前只有一份,先當假設看。外部稽核也開始進場:METR 10 月 22 日公布在 OpenAI 場內做的監控演練,估計演練當時(7 月 21 日以前),GPT-5.5 以上模型經內部 Responses API 的代理流量約 75% 到 94% 列在應送監控範圍,而且自承兩個方向都有很大不確定性(METR)。

下一個要看的讀數:下一代模型的系統卡,會不會同時公布「可控性」與「不寫推理時的推理能力」兩個數字。

本報寫過的各篇