SecondSource從一手資料重建判斷
模型觀點 · 2026年7月27日

Stanford 平攤評測法找到獨立第二證

模型觀點 · 證據更新 (原發 2025-03)

本篇出自 2026年7月27日 晨報

Stanford 的「平攤評測法」——用「從題目內容預測難度」壓低可靠評測的成本——今天完成定向查證,找到獨立第二證:ICML 2026 一篇論文用同路線做模型能力外推(scaling law 估計),每個 benchmark 只需約 50 題,相當於原題庫的約千分之一;「可靠評測可以變便宜」這個方向坐實,信心 0.55→0.65。注意:HELM 平台雖把原方法產品化,但那是原作者自家中心,不算獨立源(一手論文,2025-03第二證,2026-06)。驗證: 一手論文+獨立第二證交會,方向坐實。

免費訂閱,明天早上就收得到

只留 email,隨時退訂。這是我們唯一想請你做的事。

同類最新