AI BENCHY 对比
Anthropic: Claude Opus 4.7 vs Google: Gemma 4 31B
基准结果生成自 AI BENCHY 测试套件,时间:: 2026-04-16
| 指标 | Claude Opus 4.7 Claude Opus 4.7 medium | Gemma 4 31B Gemma 4 31B none 免费可用 |
|---|---|---|
| 分数 | 9.2 | 6.9 |
| 排名 | #3 | #47 |
| 一致性 | 10.0 | 10.0 |
| 测试正确 | ||
| 尝试通过率 | 88.9% | 55.6% |
| 不稳定测试 | 0 | 0 |
| 总运行次数 | 54 | 54 |
| 每个结果成本 | 2.790 | 0.024 |
| 总成本 | $0.447 | $0.003 |
| ???? | $5.000 / 1M | $0.130 / 1M |
| ???? | $25.000 / 1M | $0.380 / 1M |
| 输出令牌 | 5,375 | 1,359 |
| 推理令牌 | 1,341 | 0 |
| 响应时间(平均) | 3.53s | 4.02s |
| 响应时间(最大) | 21.45s | 26.13s |
| 响应时间(总计) | 60.03s | 64.33s |
分数 vs 总成本
响应时间(平均)
分数 vs 响应时间(平均)
总输出令牌
分数 vs 总输出令牌
类别细分
| 反AI技巧 | 分数 | 一致性 | 尝试通过率 | 不稳定测试 | 测试正确 | 响应时间(平均) | 输出令牌 | 推理令牌 |
|---|---|---|---|---|---|---|---|---|
| Claude Opus 4.7 | 8.3 | 10.0 | 75.0% | 0 | 1.85s | 348 | 0 | |
| Gemma 4 31B | 6.5 | 10.0 | 50.0% | 0 | 1.85s | 45 | 0 |
| 编程 | 分数 | 一致性 | 尝试通过率 | 不稳定测试 | 测试正确 | 响应时间(平均) | 输出令牌 | 推理令牌 |
|---|---|---|---|---|---|---|---|---|
| Claude Opus 4.7 | 10.0 | 10.0 | 100.0% | 0 | 6.41s | 1,141 | 257 | |
| Gemma 4 31B | 10.0 | 10.0 | 100.0% | 0 | 26.13s | 699 | 0 |
| 综合 | 分数 | 一致性 | 尝试通过率 | 不稳定测试 | 测试正确 | 响应时间(平均) | 输出令牌 | 推理令牌 |
|---|---|---|---|---|---|---|---|---|
| Claude Opus 4.7 | 10.0 | 10.0 | 100.0% | 0 | 21.45s | 2,369 | 1,084 | |
| Gemma 4 31B | 3.0 | 10.0 | 0.0% | 0 | 0ms | 0 | 0 |
| 数据解析与提取 | 分数 | 一致性 | 尝试通过率 | 不稳定测试 | 测试正确 | 响应时间(平均) | 输出令牌 | 推理令牌 |
|---|---|---|---|---|---|---|---|---|
| Claude Opus 4.7 | 10.0 | 10.0 | 100.0% | 0 | 2.37s | 324 | 0 | |
| Gemma 4 31B | 10.0 | 10.0 | 100.0% | 0 | 2.25s | 285 | 0 |
| 领域专项 | 分数 | 一致性 | 尝试通过率 | 不稳定测试 | 测试正确 | 响应时间(平均) | 输出令牌 | 推理令牌 |
|---|---|---|---|---|---|---|---|---|
| Claude Opus 4.7 | 7.7 | 10.0 | 66.7% | 0 | 1.17s | 51 | 0 | |
| Gemma 4 31B | 7.7 | 10.0 | 66.7% | 0 | 3.22s | 27 | 0 |
| 通用智能 | 分数 | 一致性 | 尝试通过率 | 不稳定测试 | 测试正确 | 响应时间(平均) | 输出令牌 | 推理令牌 |
|---|---|---|---|---|---|---|---|---|
| Claude Opus 4.7 | 10.0 | 10.0 | 100.0% | 0 | 2.87s | 256 | 0 | |
| Gemma 4 31B | 10.0 | 10.0 | 100.0% | 0 | 2.09s | 117 | 0 |
| 指令遵循 | 分数 | 一致性 | 尝试通过率 | 不稳定测试 | 测试正确 | 响应时间(平均) | 输出令牌 | 推理令牌 |
|---|---|---|---|---|---|---|---|---|
| Claude Opus 4.7 | 10.0 | 10.0 | 100.0% | 0 | 1.57s | 114 | 0 | |
| Gemma 4 31B | 6.5 | 10.0 | 50.0% | 0 | 2.84s | 78 | 0 |
| 谜题求解 | 分数 | 一致性 | 尝试通过率 | 不稳定测试 | 测试正确 | 响应时间(平均) | 输出令牌 | 推理令牌 |
|---|---|---|---|---|---|---|---|---|
| Claude Opus 4.7 | 10.0 | 10.0 | 100.0% | 0 | 2.51s | 399 | 0 | |
| Gemma 4 31B | 5.5 | 10.0 | 33.3% | 0 | 2.95s | 108 | 0 |
| 工具调用 | 分数 | 一致性 | 尝试通过率 | 不稳定测试 | 测试正确 | 响应时间(平均) | 输出令牌 | 推理令牌 |
|---|---|---|---|---|---|---|---|---|
| Claude Opus 4.7 | 10.0 | 10.0 | 100.0% | 0 | 4.17s | 373 | 0 | |
| Gemma 4 31B | 3.0 | 10.0 | 0.0% | 0 | 0ms | 0 | 0 |
快速对比
切换对比组合
Gemma 4 31Bnone免费可用vsGrok 4.20mediumGemma 4 31Bnone免费可用vsKimi K2.5mediumGemma 4 31Bnone免费可用vsGPT-5 MinimediumGemma 4 31Bnone免费可用vsNemotron 3 Supermedium免费可用Gemma 4 31Bnone免费可用vsGrok 4.1 FastmediumGemma 4 31Bnone免费可用vsGPT-5.4 MinimediumGemma 4 31Bnone免费可用vsMercury 2mediumClaude Opus 4.7mediumvsGemini 3 Flash PreviewlowGemma 4 31Bnone免费可用vsQwen3.5-35B-A3BmediumGemma 4 31Bnone免费可用vsMiMo-V2-FlashmediumGemma 4 31Bnone免费可用vsGPT-5.2mediumSeed-2.0-MinimediumvsGemma 4 31Bnone免费可用