高機能ハーネスはコーディングAIを高くするだけ？

原題　Fancy harnesses make coding agents more expensive but not better, study finds

統制された実験で、Claude Code、OpenCode、mini-SWE-agentなどのコーディングエージェント用ハーネスを切り替えても、同じ設定を再実行した場合と比べて成功率はほぼ変わらなかった。一方でタスク当たりのコストは最大3倍になり、その差は主にシステム面の要因によるとされる。

論点

高級ハーネスに金を払う価値はあるか

みんなの立場0票

賛成0%0票

反対0%0票

どちらでもない0%0票

まだ投票はありません。あなたはどう思う？

議論のヒントを見る

賛成側の視点

成功率の差が小さくても、作り込まれた道具は手戻りと事故を減らす。見えない価値を数字だけで切るのは短見だ。

反対側の視点

成功率が同じでコストが3倍なら、高いハーネスは雑費だ。性能差を売る商売をまず疑うべきだ。