跳到正文
The Decoder· Jonathan Kemper·· 4 小时前AI 评分64

Liu 与 Han 研究称:复杂代理框架成本更高,但未必提升编码表现

Fancy harnesses make coding agents more expensive but not better, study finds

AI 导读

Liu 与 Han 的研究比较 Claude Code、OpenCode 和 mini-SWE-agent 在 5 个模型及 SWE-bench Verified 任务上的表现,发现切换框架带来的结果变化与重复运行相近。通过率整体差异有限,而三种框架的 token 消耗可相差两至三倍;研究建议每次框架比较同时公布重复运行结果。

来源:The Decoder · the-decoder.com