Agent 外壳越复杂越贵:同一批题成本差 3 倍,准确率只差 2 个点

3次阅读
没有评论

说个反直觉的:Agent 外壳搞得越复杂,不一定越准,但一定越贵。

山东大学一篇论文,拿 Claude Code、OpenCode、mini-SWE-agent 跑同一批 SWE-bench 题。同样的模型、同样的题,成本最多差 3 倍。准确率呢?Claude Code 和最简单的 mini-SWE-agent 只差 2 个点以内。

钱花哪了?光是每轮都要重发的系统提示和工具说明,Claude Code 就有 1.6 万多 token。外壳越厚,每轮重复烧掉的 token 就越多,账单自然水涨船高。

做 Agent 先别急着堆外壳。简单外壳可能便宜得多,效果却差不多,省下的钱才是真金白银。

正文完
 0