SecondSource從一手資料重建判斷

本週 · 預印本 10 月 13 日

RBC 篩過的教訓手冊勝過不用手冊。模型與基準未寫

一篇 arXiv 論文用隨機開關實驗篩選代理人寫下的教訓手冊:篩過的手冊平均成功率 66.9,不用手冊 54.1。整份照用 55.5,讓代理人挑選 53.8。 方法叫 RBC,隨機開關手冊裡的每條教訓,用成功率差估每條的效果。原句:「the same procedure can write a playbook that helps or one that falls up to 69.6 points below no playbook」(arXiv 2610.18427)。受測模型與評測基準的名稱摘要沒寫。成功率的單位與基準也沒寫,全文未經查閱。同日另外三篇預印本也只改提示、記憶或工作流程、不改權重,並用保留資料或獨立驗證決定要不要採納(arXiv 2610.18216;arXiv 2610.18813;arXiv 2610.18845)。代理人「自我改進」在這批論文裡指的是外層配方加統計守門,不是改模型權重,這是本報的讀法。同日出現四篇可能是巧合,本報只記為還在驗證的觀察。 怎麼查的 →

概念插圖:米白和淡粉色的牆前,米色桌面上放著一台深灰色筆電,畫面右側是一個人的背影,深色頭髮盤成髮髻,穿黑色上衣,一隻手放在觸控板上。螢幕左邊是一條有三道灰線的窄欄,旁邊並排三個紅色外框的直欄,頂端各有一條紅色橫條,每欄四個長方塊,有的填滿深灰色,有的是黑框白底。

出處與查證

這則刊在2026年10月16日的晨報,同一期還有 19 則。查證經過、引句核對與當天缺的資料,記在那一期的本日驗證。

引用這則

SecondSource(2026),〈RBC 篩過的教訓手冊勝過不用手冊。模型與基準未寫〉,https://secondsource.io/research/2026-10-16-2/,取用日期取用。