#87 Gemma 4 31B
medium- Cost
- $0.002
- Time
- 45.7s
- Tokens
- 2,696 tok
AI BENCHY 对比
摘要
Gemma 4 31B vs GPT-5.4 Mini benchmark 对比:Gemma 4 31B 平均分领先,为 6.3 vs 5.3。 Gemma 4 31B benchmark 成本更低,为 $0.033 vs $0.038。 GPT-5.4 Mini 更快,为 1.13s vs 56.55s,通过率为 69.8% vs 30.2%。
推荐模型: GPT-5.4 Mini - 它提供了最佳整体取舍:得分有竞争力(5.3),响应快于Gemma 4 31B,成本也较均衡。
基准结果生成自 AI BENCHY 测试套件,时间:: 2026-06-12
| 指标 | Gemma 4 31B Gemma 4 31B medium 免费可用 | GPT-5.4 Mini GPT-5.4 Mini none |
|---|---|---|
| 分数 | 6.3 | 5.3 |
| 排名 | #87 | #131 |
| 可靠性 | 10.0 | 10.0 |
| 一致性 | 9.4 | 8.8 |
| 测试正确 | ||
| 尝试通过率 | 69.8% | 30.2% |
| 不稳定测试 | 1 | 3 |
| 总运行次数 | 63 | 63 |
| 每个结果成本 | 0.257 | 0.743 |
| 总成本 | $0.033 | $0.038 |
| 输入价格 | $0.120 / 1M | $0.750 / 1M |
| 输出价格 | $0.350 / 1M | $4.500 / 1M |
| 总输入令牌 | 17,957 | 34,244 |
| 输出令牌 | 22,356 | 2,541 |
| 推理令牌 | 65,726 | 0 |
| 响应时间(平均) | 56.55s | 1.13s |
| 响应时间(最大) | 437.40s | 2.52s |
| 响应时间(总计) | 1074.41s | 23.82s |
Generation showcase
Prompt: Create a detailed SVG illustration of a hamster playing table tennis.
| 反AI技巧 | 分数 | 一致性 | 尝试通过率 | 不稳定测试 | 测试正确 | 响应时间(平均) | 输入令牌 | 输出令牌 | 推理令牌 |
|---|---|---|---|---|---|---|---|---|---|
| Gemma 4 31B | 10.0 | 10.0 | 100.0% | 0 | 12.89s | 816 | 962 | 2,046 | |
| GPT-5.4 Mini | 3.1 | 8.1 | 8.3% | 1 | 929ms | 606 | 654 | 0 |
| 编程 | 分数 | 一致性 | 尝试通过率 | 不稳定测试 | 测试正确 | 响应时间(平均) | 输入令牌 | 输出令牌 | 推理令牌 |
|---|---|---|---|---|---|---|---|---|---|
| Gemma 4 31B | 4.3 | 5.8 | 22.2% | 1 | 219.76s | 5,568 | 11,098 | 33,212 | |
| GPT-5.4 Mini | 5.5 | 10.0 | 33.3% | 0 | 913ms | 7,305 | 401 | 0 |
| 综合 | 分数 | 一致性 | 尝试通过率 | 不稳定测试 | 测试正确 | 响应时间(平均) | 输入令牌 | 输出令牌 | 推理令牌 |
|---|---|---|---|---|---|---|---|---|---|
| Gemma 4 31B | 3.0 | 10.0 | 0.0% | 0 | 0ms | 0 | 0 | 0 | |
| GPT-5.4 Mini | 3.0 | 10.0 | 0.0% | 0 | 2.52s | 11,019 | 298 | 0 |
| 数据解析与提取 | 分数 | 一致性 | 尝试通过率 | 不稳定测试 | 测试正确 | 响应时间(平均) | 输入令牌 | 输出令牌 | 推理令牌 |
|---|---|---|---|---|---|---|---|---|---|
| Gemma 4 31B | 10.0 | 10.0 | 100.0% | 0 | 21.11s | 8,334 | 1,822 | 2,951 | |
| GPT-5.4 Mini | 10.0 | 10.0 | 100.0% | 0 | 1.30s | 7,140 | 222 | 0 |
| 领域专项 | 分数 | 一致性 | 尝试通过率 | 不稳定测试 | 测试正确 | 响应时间(平均) | 输入令牌 | 输出令牌 | 推理令牌 |
|---|---|---|---|---|---|---|---|---|---|
| Gemma 4 31B | 7.7 | 10.0 | 66.7% | 0 | 38.48s | 876 | 4,349 | 8,985 | |
| GPT-5.4 Mini | 3.5 | 4.4 | 33.3% | 2 | 937ms | 723 | 88 | 0 |
| 通用智能 | 分数 | 一致性 | 尝试通过率 | 不稳定测试 | 测试正确 | 响应时间(平均) | 输入令牌 | 输出令牌 | 推理令牌 |
|---|---|---|---|---|---|---|---|---|---|
| Gemma 4 31B | 10.0 | 10.0 | 100.0% | 0 | 9.57s | 567 | 105 | 888 | |
| GPT-5.4 Mini | 4.8 | 10.0 | 0.0% | 0 | 1.82s | 477 | 174 | 0 |
| 指令遵循 | 分数 | 一致性 | 尝试通过率 | 不稳定测试 | 测试正确 | 响应时间(平均) | 输入令牌 | 输出令牌 | 推理令牌 |
|---|---|---|---|---|---|---|---|---|---|
| Gemma 4 31B | 10.0 | 10.0 | 100.0% | 0 | 12.76s | 777 | 533 | 2,035 | |
| GPT-5.4 Mini | 6.3 | 10.0 | 50.0% | 0 | 728ms | 660 | 101 | 0 |
| 谜题求解 | 分数 | 一致性 | 尝试通过率 | 不稳定测试 | 测试正确 | 响应时间(平均) | 输入令牌 | 输出令牌 | 推理令牌 |
|---|---|---|---|---|---|---|---|---|---|
| Gemma 4 31B | 9.9 | 10.0 | 100.0% | 0 | 26.91s | 801 | 1,795 | 5,595 | |
| GPT-5.4 Mini | 5.4 | 10.0 | 33.3% | 0 | 836ms | 642 | 305 | 0 |
| 工具调用 | 分数 | 一致性 | 尝试通过率 | 不稳定测试 | 测试正确 | 响应时间(平均) | 输入令牌 | 输出令牌 | 推理令牌 |
|---|---|---|---|---|---|---|---|---|---|
| Gemma 4 31B | 3.0 | 10.0 | 0.0% | 0 | 0ms | 0 | 0 | 0 | |
| GPT-5.4 Mini | 3.0 | 10.0 | 0.0% | 0 | 2.32s | 5,477 | 255 | 0 |
| 常识问答 | 分数 | 一致性 | 尝试通过率 | 不稳定测试 | 测试正确 | 响应时间(平均) | 输入令牌 | 输出令牌 | 推理令牌 |
|---|---|---|---|---|---|---|---|---|---|
| Gemma 4 31B | 3.0 | 10.0 | 0.0% | 0 | 90.14s | 218 | 1,692 | 10,014 | |
| GPT-5.4 Mini | 3.0 | 10.0 | 0.0% | 0 | 1.33s | 195 | 43 | 0 |
切换对比组合