跳到正文
The Decoder· Jonathan Kemper·· 9 天前精选AI 评分65

研究:复杂 coding agent harness 提升成本但不提升成功率

Fancy harnesses make coding agents more expensive but not better, study finds

AI 导读

一项新研究对比 Claude Code、OpenCode 和 mini-SWE-agent 三个 coding agent harness,发现更换 harness 带来的任务结果波动与重复运行相近,Zhipu 宣称的 2.4 分优势处于噪音区间;唯一显著落后的是 OpenCode,主要因输出限制和搜索工具故障导致。

推荐理由

研究拆解了 harness 差异的来源,指出多数差距在噪音范围内,仅 OpenCode 表现显著落后,并揭示成本差异主要来自系统提示词。

来源:The Decoder · the-decoder.com