AIコーディング:難題は純正の組み合わせ、簡単な仕事は差し替え可能——期日 2027-07-16
AIコーディング:難題は純正の組み合わせ、簡単な仕事は差し替え可能——期日 2027-07-16
確認予定日 2027-07-16
背景
何が争点か:AIコーディングツールは土台のモデルと、ファイルを読みテストを走らせコードを書き換える外枠のプログラム(ハーネス)からなり、両者を切り離して別々に差し替えられるかが争われている。
なぜ重要か:切り離せるなら価値は外枠とルーティングに流れ、企業は一つのモデル企業に縛られずに済むが、切り離せないなら純正の組み合わせが高値を取れる。
誰が何に賭けているか:商品化派は外枠はすでに交換可能な部品だと言い、統合派(製品がまだ十分でない段階では統合が寄せ集めに勝つというBen Thompsonの理論など)はモデルと外枠を一体にしてこそ最も使えると言う。
判断
本紙の見立て:両派とも半分ずつ正しく、境界線は作業の難易度にある。モデルは訓練の段階で自社の外枠と一緒に調整されているため、高難度の作業では純正の組み合わせに今も確かな上乗せ価値がある。
導入の段階では、中低難度の仕事はすでに部品に分けて差し替えられ、その「分けられる」線は難易度に沿って上へと動いている。勝者が一人に決まる終局ではなく、動き続ける前線である。
初の対照測定は公開論文Harness-Benchによるもので、同じ一群のモデルで外枠だけを替えると、得点が23.8点違った。
判断時の出典
arXiv (Jimenez/Yang/Wettig/Shunyu Yao/Pei/Ofir Press/Narasimhan — Princeton/UChicago)
「2,294 software engineering problems drawn from…」
arXiv (John Yang, Jimenez, Wettig, Lieret, Shunyu Yao, Narasimhan, Ofir Press)
「SWE-agent's custom agent-computer interface…」
検証のしかた
12カ月で判定する。高難度の作業を純正でないモデルに切り替えても品質が落ちない企業事例が出れば「切り離せない」陣営は崩れる。Microsoftの低価格帯へのルーティング比率とOmnigentを軸とした標準化は、商品化陣営が上っていく速度の計器となる。Anthropicの売上集中度がルーティングによって平準化されれば、「切り離せない」陣営の利益率の論拠が折れる。
何が起きれば覆るか
ハーネスの商品化対統合をめぐる以前の判断の両方向がそのまま適用される(企業向けのモデル非依存ハーネスが性能を落とさなければ統合陣営が覆り、共通APIが1年以内に標準にならなければ商品化陣営が弱まる)。ここでの追加:高難度の側での移行事例が出れば統合陣営が覆り、低価格帯の投入後も高複雑度の作業が移らなければ商品化陣営が弱まる。