PERSONAL REAL-WORK BENCHMARK

模型分析

这页把当前公开榜单的质量结果、2026-06-23 追加测试、性价比榜、缓存成本和调用耗时放在同一个口径里解释。它不是通用模型能力排名,而是葬AI Web4 复杂个人网站重构任务的一次可审计快照。

PUBLIC SITES

80

已评分 80 个,追加前快照另存为旧榜单。

MODELS

8

每个模型 10 轮独立产物,模型、provider、runner 分开记录。

EFFICIENCY

8

性价比榜覆盖质量、现金/等价成本、耗时、调用数和 token 负载。

SNAPSHOT

2026-06-15

页面生成:2026年7月8日 19:42

统一公式

复合评分 = loading 15 + adjusted graph/25*35 + articles/25*15 + visual 20 + interaction 15;adjusted graph 来自全量图谱稳定性复核

追加边界

Doubao 和 Step 是 2026-06-23 在同一冻结数据、同一任务 prompt、同一 graph-weighted 基础评分和同一图谱稳定性复核下追加进榜;旧榜单保留追加前状态。

公开边界

公开页面和 GitHub 只发布汇总 CSV、JSON、Markdown 与方法说明;原始账单 PDF、控制台截图和完整本地日志不公开。

质量总榜

排名模型均分区间图谱/25文章/25视觉交互A 档轮次低尾轮次
1GLM 5.2
10 轮有效结果
85.272.8-93.015.725.018.414.850
2Claude Opus 4.8
10 轮有效结果
84.957.8-98.018.424.616.013.451
3Qwen3.7 Max
10 轮有效结果
82.466.2-93.819.824.113.412.442
4Kimi K2.7 Code
10 轮有效结果
80.351.6-93.815.924.115.413.623
5Doubao Seed 2.1 Pro
10 轮有效结果
77.655.6-96.014.724.614.912.622
6MiniMax M3
10 轮有效结果
77.452.6-95.811.923.318.813.622
7Step 3.7 Flash
10 轮有效结果
68.353.0-87.811.525.011.410.806
8DeepSeek V4 Pro
10 轮有效结果
67.139.2-96.011.724.19.811.917

总榜仍然按产物质量排序。GLM 5.2 与 Claude Opus 4.8 的均分差距很窄;Doubao 追加后落在 Kimi 之后、MiniMax 之前;Step 的文章项稳定,但图谱和视觉弱轮次拉低了总分。

Doubao vs Step

Doubao Seed 2.1 Pro

均分 77.6,区间 55.6-96.0。它有满分和多个 A 档高分轮次,说明产物上限很高;但低尾、耗时和重跑成本也是真问题。

Step 3.7 Flash

均分 68.3,区间 53.0-87.8。它跑得快、现金成本极低,文章页基本稳定,但这次任务里图谱和视觉不够稳。

性价比榜

性价比排名模型质量排名均分成本调用耗时可见 tokenvalue index
1DeepSeek V4 Pro
user-supplied actual test spend
867.117.1 元22346.7 分钟10.08M38.37
2Qwen3.7 Max
user-supplied actual test spend
382.423.5 元21853.3 分钟8.30M33.62
3Step 3.7 Flash
Step 本轮现金支出为 0 元,平台赠送额度扣减 11.197 元。
768.30 元现金 / 11.2 元赠送44357.4 分钟23.32M21.02
4GLM 5.2
GLM 价格按国内 API 价折算,非平台实际现金账单。
185.2估算 40.1-41.6 元32169.7 分钟14.72M19.36
5Claude Opus 4.8
user-supplied actual test spend
284.9202.5 元30673.3 分钟14.57M15.44
6MiniMax M3
user-supplied actual test spend
677.423.2 元653153.9 分钟40.23M12.91
7Kimi K2.7 Code
user-supplied actual test spend
480.3164.6 元42390.0 分钟26.06M12.65
8Doubao Seed 2.1 Pro
Volcengine PDF bill + console screenshot
577.641.34 元449128.9 分钟18.76M12.32

性价比榜不是质量总榜的替代品。它把成本排名、耗时排名、调用数排名和可见 token 排名按 40% / 25% / 20% / 15% 合成工程消耗排名,再用质量均分除以该消耗排名得到 value index。这个口径适合解释“这次任务做完要付出多少工程消耗”,不适合单独判断哪个模型最好。

公开分析全文

豆包 / 阶跃追加测试日志简报

数据口径

  • 原始日志和账单截图只保留在本地归档,不随公开页面或 GitHub 发布;公开版只发布汇总表、交叉对比 CSV 和结论。
  • 抽取数据在 extracted/:平台账单、OpenCode 逐轮调用/耗时/得分、历史模型粗略参照、cross-model-comparison.csv 横向对比表。
  • 2026-06-24 后公开 /test 默认采用复合评分:graph-weighted 基础分 + 全量图谱稳定性复核。旧 graph-weighted 文件保留为归档证据。
  • “调用数”采用 OpenCode 本地数据库里的 assistant message 数,近似为 LLM API 往返次数。平台日志本身没有逐请求调用数。
  • Step 平台账单和 OpenCode token 口径不同;Doubao 新增了控制台截图口径,以下把平台侧统计与 OpenCode 运行统计分开看。
  • 追加前模型的现金花费来自用户补充账单口径:Claude Opus 4.8 202.5 元、Kimi 164.6 元、Qwen 23.5 元、MiniMax 23.2 元、DeepSeek 17.1 元。GLM 5.2 无本地现金账单,按国内 API 价格折算约 40.1-41.6 元。
  • 没有各平台逐项账单明细时,不能把总花费精确拆成官方 input/output/cache 单价;本文里的“每百万 cache read token 成本”是 总花费 / OpenCode cache read token 的有效摊销成本,用来比较缓存成本压力。

核心对比

模型平均分分数范围有效10轮调用数含失败/重跑调用数有效10轮耗时平均每轮耗时非最终 session
Doubao Seed 2.1 Pro77.6455.6-96382449114.18 分钟11.42 分钟8
Step 3.7 Flash68.3053-87.843344356.68 分钟5.67 分钟1

账单与 token

模型平台侧统计OpenCode 有效10轮输入OpenCode 有效10轮输出OpenCode cache read
Doubao控制台截图:总 tokens 18,978,799;输入/cache 18,625,858;输出 352,941;调用 477;火山账单应付 41.34 元1,596,069264,39615,162,024
Step平台导出输入 23,121,813、输出 291,716、缓存 20,722,560;赠送金额扣减 11.197 元,充值扣减 0 元2,247,058263,06020,563,200

横向位置

模型复合均分排名OpenCode调用数总耗时可见token负载cache read占比现金账单
GLM 5.285.18132169.74 分钟14.72M95.1%估算 40.1-41.6 元
Opus 4.884.92230673.34 分钟14.57M近 100%202.5 元
Qwen 3.7 Max82.38321853.29 分钟8.30M89.1%23.5 元
Kimi K2.7 Code80.32442390.00 分钟26.06M96.5%164.6 元
Doubao Seed 2.1 Pro77.645449(平台 477)128.91 分钟18.76M(平台 18.98M)89.8%41.34 元
MiniMax M377.446653153.90 分钟40.23M95.6%23.2 元
Step 3.7 Flash68.30744357.40 分钟23.32M89.9%赠送额度抵扣 11.197 元
DeepSeek V4 Pro67.14822346.73 分钟10.08M96.1%17.1 元

成本与缓存

模型现金/等价花费cache read tokencache read占比每百万cache read摊销每百万可见token摊销每次调用摊销
Opus 4.8202.5 元14.25M近 100%14.21 元13.90 元0.662 元
Kimi K2.7 Code164.6 元24.90M96.5%6.61 元6.32 元0.389 元
GLM 5.2估算 40.1-41.6 元13.71M95.1%约 3.03 元约 2.83 元约 0.130 元
Qwen 3.7 Max23.5 元7.27M89.1%3.23 元2.83 元0.108 元
Doubao Seed 2.1 Pro41.34 元16.55M89.8%2.50 元2.20 元0.092 元
DeepSeek V4 Pro17.1 元9.50M96.1%1.80 元1.70 元0.077 元
MiniMax M323.2 元38.08M95.6%0.61 元0.58 元0.036 元
Step 3.7 Flash赠送额度 11.197 元,现金 0 元20.72M89.9%0.54 元0.48 元0.025 元

GLM 5.2 的估算采用国内 API 价:输入 8 元/M tokens、输出 28 元/M tokens、缓存命中 2 元/M tokens、缓存存储限时免费。按本地记录的 708,364 输入、249,889 输出、53,939 reasoning、13,709,312 cache read 计算,如果 reasoning token 按输出价计费,总成本约 41.59 元;如果 reasoning 已经包含在输出口径里或不单独计费,总成本约 40.08 元。其中 cache read 本身约 27.42 元,约占总成本三分之二。若完全没有缓存折扣,同样 token 量约 123.85 元,缓存折扣大约省下 82.26 元。

缓存观察:Kimi 的缓存命中 token 很多,达到 24.90M,而且按实付总额摊到每百万 cache read token 是 6.61 元,显著高于 Qwen、Doubao、DeepSeek、MiniMax、Step。因此 Kimi 的实际推理/输出本身未必夸张,但缓存命中 token 体量大、摊销价格高,确实会吃掉大部分成本。MiniMax 则是相反案例:cache read token 最高,38.08M,但总花费只有 23.2 元,每百万 cache read 摊销只有 0.61 元,所以它虽然调用和缓存量最大,现金账单却低。

结论

  1. Doubao 的产出质量明显更好,但工程成本也更高。复合均分高 Step 9.34 分,且有 r4/r9 两个 96 分 A 档;但 r6 因知识图谱严重抖动从旧分 100 调整为 88.8。有效 10 轮耗时约为 Step 的 2 倍,含失败/重跑后总耗时 128.91 分钟。

  2. Step 不是“低调用一次性完成”的模型。它最终 10 轮调用数 433,高于 Doubao 的 382,只是执行速度很快,平均每轮 5.67 分钟。它的短板主要在图谱和视觉:文章页基本稳定满分,但图谱均分低,拉低总分。

  3. Doubao 的“慢”是有数据支撑的。它最终调用数并不夸张,但单轮耗时长,且有 8 个非最终 session,说明中断、重跑、重复尝试成本高。也就是说,它不是疯狂调用型,而是慢调用加重跑型。

  4. Doubao 平台截图的调用数是 477,高于 OpenCode benchmark 相关 session 的 449。这个差额不改变结论,反而说明平台账单口径更宽,可能把烟测、失败启动、非最终尝试或 provider 侧额外请求也算进去了;排行榜分析仍以 OpenCode session 口径做逐轮对比。

  5. 调用数和分数不是线性关系。Doubao 的高分轮次 r4/r6 都是 50 次左右调用,r9 只有 31 次也拿到 96;Step 的 r7 调用 79 次但只有 75.4,r6 调用 25 次反而拿到 87.8。真正决定分数的还是图谱是否做实。

  6. 和本机同目录历史 OpenCode 记录粗略对照:Qwen3.7 约 218 次调用、53 分钟;Kimi K2.7 Code 约 423 次调用、90 分钟;MiniMax M3 约 653 次调用、154 分钟。Step/Doubao 的总调用数都接近 Kimi,但 Step 明显快,Doubao 更慢且重跑更多。

  7. Doubao 的质量位置确实不是第一梯队:它排在 Kimi 之后、MiniMax 之前,领先 MiniMax 只有 0.20 分。它赢 MiniMax 主要靠图谱项更高(14.7 vs 11.9)和文章项略稳;视觉项反而明显不如 MiniMax(14.9 vs 18.8),所以肉眼看会觉得 MiniMax 更像“好站点”。

  8. Doubao 的价格压力不是来自“调用数特别高”。它的调用数低于 MiniMax,但高于 Kimi/GLM/Opus/Qwen/DeepSeek;可见 token 负载也低于 MiniMax 和 Kimi。Doubao 的实付 41.34 元高于 Qwen/MiniMax/DeepSeek,主要是因为 token 负载比 Qwen/DeepSeek 大,且不像 MiniMax/Step 那样有极低的缓存摊销成本。它不是最烧调用的,但性价比不如 Qwen、MiniMax、DeepSeek。

  9. Opus 和 Kimi 是现金成本最重的两档。Opus 只有 306 次 OpenCode 调用,但花费 202.5 元,说明贵在单价和缓存摊销,而不是调用次数。Kimi 调用数 423 次、cache read 24.90M,现金 164.6 元;它的缓存命中 token 很多,而且摊销成本高,是这次高账单的核心解释。

  10. GLM 5.2 如果按当前国内 API 价格折算,成本并不属于 DeepSeek/MiniMax 那种低价档,而是大约与 Doubao 持平。但因为它本轮复合均分第一,单位分数成本约 0.48 元,显著优于 Doubao、Kimi 和 Opus;它更像“中等偏高成本、高质量产出”的位置。

简短判断

Doubao 更像“质量略高于 MiniMax、低于 Kimi,但现金成本和耗时偏重”的模型;Step 更像“跑得很快,文章产物完整,现金成本极低,但图谱和视觉容易薄”。如果排行榜只看最终产物,Doubao 的复合分有价值,但 r6 的抖动不能再按满分理解;如果未来加一个工程效率维度,Doubao 会被耗时/实付成本扣分,Step 会在耗时和现金成本上加分,但不会在调用数上占优。缓存成本维度上,Kimi 和 Opus 最值得单独标注:它们不是简单“生成多”,而是大量 cache read token 以较高摊销价格进入账单。