导航
AI BENCHY
Advertise here

AI BENCHY 对比

Google: Gemma 4 26B A4B vs Inception: Mercury 2

摘要

Gemma 4 26B A4B vs Mercury 2 benchmark 对比:Gemma 4 26B A4B 平均分领先,为 5.5 vs 4.6Gemma 4 26B A4B benchmark 成本更低,为 $0.004 vs $0.011Mercury 2 更快,为 653ms vs 5.91s,通过率为 44.4% vs 23.8%

推荐模型: Gemma 4 26B A4B - 它在这里得分最高(5.5),同时成本比Mercury 2低约 3.4 倍。

基准结果生成自 AI BENCHY 测试套件,时间:: 2026-06-18

指标 Gemma 4 26B A4B Gemma 4 26B A4B none 发布日期: 2026-04-03 免费可用 Mercury 2 Mercury 2 none 发布日期: 2026-02-24
分数 5.5 4.6
排名 #121 #151
可靠性 10.0 10.0
一致性 9.2 9.2
测试正确
尝试通过率 44.4% 23.8%
不稳定测试 2 2
总运行次数 63 63
每个结果成本 0.068 0.259
总成本 $0.004 $0.011
输入价格 $0.060 / 1M $0.250 / 1M
输出价格 $0.330 / 1M $0.750 / 1M
总输入令牌 40,038 28,113
输出令牌 1,824 4,439
推理令牌 0 0
响应时间(平均) 5.91s 653ms
响应时间(最大) 57.10s 1.43s
响应时间(总计) 124.05s 13.72s

生成展示

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#121 Gemma 4 26B A4B

none
成本
$0.001
时间
39.5s
令牌
790 tok

#151 Mercury 2

none
成本
$0.002
时间
1.8s
令牌
1,514 tok

按分数排名的模型

分数 vs 总成本

响应时间(平均)

分数 vs 响应时间(平均)

总输出令牌

分数 vs 总输出令牌

类别细分

反AI技巧 分数 一致性 尝试通过率 不稳定测试 测试正确 响应时间(平均) 输入令牌 输出令牌 推理令牌
Gemma 4 26B A4B 8.3 10.0 75.0% 0 1.28s 852 230 0
Mercury 2 3.0 10.0 0.0% 0 483ms 631 286 0
编程 分数 一致性 尝试通过率 不稳定测试 测试正确 响应时间(平均) 输入令牌 输出令牌 推理令牌
Gemma 4 26B A4B 3.7 7.2 22.2% 1 4.16s 7,736 476 0
Mercury 2 3.4 9.6 0.0% 0 1.03s 7,229 3,088 0
综合 分数 一致性 尝试通过率 不稳定测试 测试正确 响应时间(平均) 输入令牌 输出令牌 推理令牌
Gemma 4 26B A4B 3.0 10.0 0.0% 0 30.53s 13,650 309 0
Mercury 2 3.0 10.0 0.0% 0 606ms 4,821 131 0
数据解析与提取 分数 一致性 尝试通过率 不稳定测试 测试正确 响应时间(平均) 输入令牌 输出令牌 推理令牌
Gemma 4 26B A4B 10.0 10.0 100.0% 0 1.70s 8,352 285 0
Mercury 2 7.3 5.9 83.3% 1 667ms 6,362 180 0
领域专项 分数 一致性 尝试通过率 不稳定测试 测试正确 响应时间(平均) 输入令牌 输出令牌 推理令牌
Gemma 4 26B A4B 3.6 7.2 22.2% 1 2.49s 903 27 0
Mercury 2 5.3 7.2 44.4% 1 534ms 784 46 0
通用智能 分数 一致性 尝试通过率 不稳定测试 测试正确 响应时间(平均) 输入令牌 输出令牌 推理令牌
Gemma 4 26B A4B 4.0 10.0 0.0% 0 3.54s 576 85 0
Mercury 2 4.8 10.0 0.0% 0 628ms 495 159 0
指令遵循 分数 一致性 尝试通过率 不稳定测试 测试正确 响应时间(平均) 输入令牌 输出令牌 推理令牌
Gemma 4 26B A4B 6.3 10.0 50.0% 0 690ms 795 75 0
Mercury 2 6.5 10.0 50.0% 0 551ms 691 82 0
谜题求解 分数 一致性 尝试通过率 不稳定测试 测试正确 响应时间(平均) 输入令牌 输出令牌 推理令牌
Gemma 4 26B A4B 6.2 10.0 33.3% 0 744ms 828 114 0
Mercury 2 3.1 10.0 0.0% 0 535ms 694 251 0
工具调用 分数 一致性 尝试通过率 不稳定测试 测试正确 响应时间(平均) 输入令牌 输出令牌 推理令牌
Gemma 4 26B A4B 10.0 10.0 100.0% 0 57.10s 6,123 210 0
Mercury 2 10.0 10.0 100.0% 0 1.27s 6,193 197 0
常识问答 分数 一致性 尝试通过率 不稳定测试 测试正确 响应时间(平均) 输入令牌 输出令牌 推理令牌
Gemma 4 26B A4B 3.0 10.0 0.0% 0 778ms 223 13 0
Mercury 2 3.0 10.0 0.0% 0 548ms 213 19 0

快速对比

切换对比组合