今日 · 10 月 12 日の投稿

Fable 5.1、枠組み次第で解決率に差——再実行はない

投資家の Chamath Palihapitiya 氏が 8090 に依頼したテストによれば、同じ Claude Fable 5.1 でも、OpenAI の Codex に載せると解決率は 61%、Claude Code に載せると 41% だった。 Claude Code と Codex は、どちらもモデルの外側を包むプログラムの枠組み（ハーネス）で、モデルに代わってツールを呼び出し、手順を管理する。同じモデルでも枠組みを替えると解ける問題が変わる。点数の一部は、枠組みの差を測っている。テストはプログラムのバグを直す 113 個のタスクを使い、7 つのモデルをそれぞれ 5 種類の枠組みと組み合わせた。別のモデル GLM 5.3 Flash にも似た開きがあり、最も成績の良い枠組みでは 59%、最も悪い枠組みでは 24% だった（Chamath Palihapitiya、2026-10-12；8090、2026-10-12）。8090 の記事によれば、組み合わせごとに二回しか走らせておらず、9 ポイント以内の差は誤差かもしれない。Fable 5.1 の開きは 20 ポイントで、この範囲より大きい。依頼した側が自ら公表した単一のテストで、第三者による再実行はない。Chamath 氏と 8090 には商業上の関係がある。⚠️ 利害の開示：本紙の分析は Anthropic のモデルの支援を受けており、Claude Code と Fable 5.1 はどちらも Anthropic の製品である。どう確かめたか →

コンセプトイラスト：ベージュの卓上に開いたノートパソコンが2台並び、背後には大きな淡いピンクの円がある。どちらも画面上部の枠に「FABLE 5.1」と書かれ、画面中央には白い横線3本が入ったレンガ色の吹き出し、右側の列には灰色の横線が並ぶ。左のパソコンのウィンドウは暗い色の枠で、左上に小さな点が3つあり左側に暗いサイドバーがあって、本体下部に「CODEX」と書かれている。右のパソコンのウィンドウは上部の灰色のバーにタブが3つあり、本体下部に「CLAUDE CODE」と書かれている。

出典と検証

この記事は2026年10月13日の夕刊に掲載されました(同じ号にほか 13 本)。確認の経緯、引用の照合、その日に確認できなかった資料は、その号の本日の検証にあります。

この記事を引用

SecondSource(2026)「Fable 5.1、枠組み次第で解決率に差——再実行はない」https://secondsource.io/ja/research/2026-10-13-1/ (閲覧日閲覧)