SecondSource一次情報から判断を組み立てる

11 人の著者のプレプリントによると、AI エージェントが書いた推論の文の 41% から 46% は削っても課題の成績がほぼ変わらない。削れる量はモデルそのものより、課題とモデルの外側のハーネスによって大きく変わる。

(論文の日付は 11-04)

コンセプトイラスト:四隅をテープで留めたポスターで、上部の黒い帯に白い文字で PREPRINT と書かれている。その下の線の上に開いたノートパソコンが2台並び、どちらの画面にも灰色の線が3本入った吹き出しがある。左のパソコンの後ろには、灰色の線の間に赤い線の帯がいくつも入った背の高い紙が立っている。右のパソコンの後ろには灰色の線だけの短い紙が立ち、右のパソコンの右側には交差して重なった赤い紙片の山と開いたはさみが置かれている。 画像内の文字:41%–46% 削っても成績ほぼ不変な推論の文、著者申告。

本紙の推論:ハーネスを替えたり推論の文を短くしたりすれば、エージェントのトークン費用を削れるかもしれない。ただし著者の自己申告が示すのは、事後に削っても成績がほぼ変わらないことまでだ。論文の要旨によると、著者はエージェントの実行記録を丸ごと残し、別のモデルに削れる部分を印付けさせた。実際にその部分を削ってからエージェントに作業を続けさせ、結果とその後の動きが変わるかを見た(arXiv 2611.07238、2026-11-04)。2026 年のある論文は、コンテキスト、ツール、権限、エラーからの回復を受け持つこの層も、ワークフローの実際の性能を左右するとみる(arXiv 2605.27922)。著者の自己申告では、同じモデルと同じ課題でもハーネスを替えると、削れる量も、削れる部分が出る工程も変わる。「成績がほぼ変わらない」がどこまでの差を許すか、どのベンチマークで試したかは、要旨に書かれていない。 どう確かめたか →

出典と検証

この記事は2026年11月8日の夕刊に掲載されました(同じ号にほか 10 本)。確認の経緯、引用の照合、その日に確認できなかった資料は、その号の本日の検証にあります。

この記事を引用

SecondSource(2026)「11 人の著者のプレプリントによると、AI エージェントが書いた推論の文の 41% から 46% は削っても課題の成績がほぼ変わらない。削れる量はモデルそのものより、課題とモデルの外側のハーネスによって大きく変わる。」https://secondsource.io/ja/research/2026-11-08-1/ (閲覧日閲覧)