註冊並分享邀請連結,可獲得影片播放與邀請獎勵。

Yanhua
@yanhua1010
AI、Agent前沿与实战,出海赚美金 Reddit 讨论中发现产品机会 📮:yhaiwang1027@gmail.com
加入 June 2025
865 正在關注    36.6K 粉絲
都是 Fable 5,放进 Claude Code,成本接近 Pi 的两倍。成功率只多了 1.1 个百分点。 看着有点难以置信。 Arena 发布的这项 HarnessTax 研究,把 7 个模型分别接进 Claude Code、Codex CLI 和 Pi,跑了两套编程测试。 其中,SWE-bench Lite 抽样测试上,Fable 5 的结果是: Claude Code:成功率 97.8%,平均每次尝试 $1.33。 Pi:成功率 96.7%,平均每次尝试 $0.67。 更有意思的是,两边平均都跑了 15 轮左右。Claude Code 并没有多干多少轮,但每轮花的钱不一样。 不过这里算的是 API 成本,跟订阅费是两回事。Claude 订阅里的额度,A➗也不让你随便拿去接第三方 harness。 其他模型的 harness,我一直推荐 Pi。就我自己的使用来说,目前还是它最均衡。 完整测评报告👇
顯示更多