DeepSeek V4 Pro 0813 与 GPT-5.6 Sol 在 DeepSWE 上的成本与编码对比
Together AI 在 DeepSWE 全部 113 个任务上各跑 4 次对比 DeepSeek V4 Pro 0813 与 GPT-5.6 Sol:Sol 单次通过率 72.7% 领先 Pro 的 62.8%,但 Pro 每次 rollout 仅 0.24 美元,约为 Sol 8.37 美元的 35 分之一,pass@4 上 Pro 以 88.5% 反超 Sol 的 85.8%。先用 Pro、测试失败再升级到 Sol 的级联方案可解决 83.0% 的任务,单任务成本 3.35 美元,高于 Sol 单独使用的 72.7%,也高于理想单次路由的 80.8%。Sol 更快更简洁(中位 53 步、17 分钟、59k 输出 token),但失败时 20% 会破坏仓库原有测试套件,Pro 这一比例为 11%。
匹配字段标题、摘要、正文
