The Decoder· Jonathan Kemper·· 5 小时前
研究发现复杂框架让编码智能体更贵而非更强
Fancy harnesses make coding agents more expensive but not better, study finds
AI 导读
Liu 和 Han 的研究用 Claude Code、OpenCode、mini-SWE-agent 三个框架跑 Qwen3.6、Qwen3.8、Deepseek-V4-Flash、GLM-5.3-Flash、HY4-Preview 等模型，发现换框架带来的成绩变化与同一配置重跑一次的波动相当，在 447 个任务上最重和最轻的框架差距不到 2 分。
入选记录
门槛 76媒体与个人第一次 58第二次 58
未入选两次之和 116 < 门槛的两倍 152
- 信源等级
- 媒体与个人，这一级的门槛是 76 分
- 预筛
- 通过：研究编码Agent框架对成本与效果的影响
评分由模型按同一份标准独立打两次，满分 100；两次之和达到门槛的两倍才入选。门槛按信源等级设定。
来源：The Decoder · the-decoder.com