Claude Opus 4.7以72.21分居首:2026-08-14 Smoke快测数据简报

2026-08-14 赢政指数 Smoke 快测覆盖 11 个模型,Claude Opus 4.7 以 72.21 分位居当日首位。Smoke 为每日 10 题快测,适合观察短期信号,不等同 Full 周榜结论。

本次 Smoke 评测只覆盖代码执行和材料约束两个主榜维度,主榜公式为 0.55 × 代码执行 + 0.45 × 材料约束。由于每日样本量较小,单日分数更适合作为监控信号,而不是对模型能力做长期定论。

当日排名

排名模型主榜代码执行材料约束诚信
#1Claude Opus 4.772.217074.9pass
#2Claude Sonnet 4.668.117065.8pass
#3Grok 457.424572.6pass
#4GPT-5.554.364565.8pass
#5Qwen3 Max53.334563.5pass
#6豆包 Pro52.361.740.8pass
#7DeepSeek V4 Pro49.836.765.8pass
#8GPT-o340.14534.1pass
#9Gemini 3.1 Pro38.5536.740.8pass
#10Gemini 2.5 Pro22.252025pass
#11GLM-4.622.252025pass

数据解读

今日Smoke快测中,头部模型在代码执行与材料约束的搭配上呈现差异。Claude Opus 4.7主榜72.21,代码执行70、材料约束74.9;Claude Sonnet 4.6主榜68.11,代码执行70、材料约束65.8,两者均维持较高代码执行水平。Grok 4主榜57.42,代码执行45、材料约束72.6,材料约束相对突出;GPT-5.5主榜54.36同样代码执行45、材料约束65.8,结构上偏向材料约束。

多模型出现大幅分数回落,GPT-o3主榜-57.2分、代码执行-50分、材料约束-65.9分,Gemini 2.5 Pro主榜-57.2分、代码执行-50分、材料约束-65.9分,GLM-4.6主榜-56.2分、代码执行-50分、材料约束-63.7分,Gemini 3.1 Pro主榜-45分、代码执行-33.3分、材料约束-59.2分,GPT-5.5主榜-42.9分、代码执行-50分、材料约束-34.2分。这些变化既可能是题目抽样波动所致,也可能是真实退化信号,需后续run复核确认。

Smoke作为小样本单日信号,仅反映当日代码执行与材料约束的即时搭配情况,措辞保持克制,不下长期结论。

主要变化

  • GPT-o3:主榜下降57.2分,代码执行-50分,材料约束-65.9分
  • Gemini 2.5 Pro:主榜下降57.2分,代码执行-50分,材料约束-65.9分
  • GLM-4.6:主榜下降56.2分,代码执行-50分,材料约束-63.7分
  • Gemini 3.1 Pro:主榜下降45分,代码执行-33.3分,材料约束-59.2分
  • GPT-5.5:主榜下降42.9分,代码执行-50分,材料约束-34.2分

需要关注的信号

  • 本次未保留可发布的异常信号。

读这类 Smoke 简报时,重点应放在两个问题上:第一,某个模型是否连续多日暴露同一类弱点;第二,诚信评级是否从 pass 进入 warn 或 fail。单日执行或约束分数的大幅变化,可能来自题目抽样,也可能是真实退化的早期信号,需要后续 run 复核。


数据来源:赢政指数 (YZ Index) | Run #278 | 查看原始数据