跳到正文
热点事件持续更新

三种编码代理框架效果差异有限,成本相差两三倍

1 篇报道1 个报道来源2 小时前更新

先了解这件事

AI 综述

Liu 与 Han 比较 Claude Code、OpenCode 和 mini-SWE-agent 在五个模型及 SWE-bench Verified 等任务上的表现,发现切换框架造成的通过率变化与重复运行的波动相近,复杂框架成本更高,却未必带来更好的编码效果。三种框架的 Token 消耗最多相差两至三倍,研究建议比较框架时同时公布重复运行结果。 测试包含 SWE-bench Verified 最难的45个任务及另外447个任务,全部离线运行;研究主要依赖一个基准,因此结论的适用范围仍有限。

AI 根据报道生成 · 2 小时前更新

报道时间线

沿着报道,了解事件的不同侧面。

10月24日
  1. The Decoder
    Liu 与 Han 研究称:复杂代理框架成本更高,但未必提升编码表现

    Liu 与 Han 的研究比较 Claude Code、OpenCode 和 mini-SWE-agent 在 5 个模型及 SWE-bench Verified 任务上的表现,发现切换框架带来的结果变化与重复运行相近。通过率整体差异有限,而三种框架的 token 消耗可相差两至三倍;研究建议每次框架比较同时公布重复运行结果。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。