导航
AI BENCHY
Your ad here

AI BENCHY 对比

IBM: Granite 4.1 8B vs Inception: Mercury 2

基准结果生成自 AI BENCHY 测试套件,时间:: 2026-05-01

指标 Granite 4.1 8B Granite 4.1 8B none 发布日期: 2026-05-01 Mercury 2 Mercury 2 none 发布日期: 2026-02-24
分数 4.3 4.8
排名 #135 #125
可靠性 10.0 不适用
一致性 10.0 9.0
测试正确
尝试通过率 11.1% 27.8%
不稳定测试 0 2
总运行次数 54 54
每个结果成本 0.110 0.165
总成本 $0.003 $0.007
???? $0.050 / 1M $0.250 / 1M
???? $0.100 / 1M $0.750 / 1M
输出令牌 2,712 1,625
推理令牌 0 0
响应时间(平均) 767ms 613ms
响应时间(最大) 2.17s 1.27s
响应时间(总计) 13.81s 11.04s

按分数排名的模型

分数 vs 总成本

响应时间(平均)

分数 vs 响应时间(平均)

总输出令牌

分数 vs 总输出令牌

类别细分

反AI技巧 分数 一致性 尝试通过率 不稳定测试 测试正确 响应时间(平均) 输出令牌 推理令牌
Granite 4.1 8B 4.9 10.0 25.0% 0 844ms 903 0
Mercury 2 3.0 10.0 0.0% 0 483ms 286 0
编程 分数 一致性 尝试通过率 不稳定测试 测试正确 响应时间(平均) 输出令牌 推理令牌
Granite 4.1 8B 6.9 10.0 0.0% 0 1.07s 339 0
Mercury 2 3.6 8.9 0.0% 0 969ms 310 0
综合 分数 一致性 尝试通过率 不稳定测试 测试正确 响应时间(平均) 输出令牌 推理令牌
Granite 4.1 8B 3.0 10.0 0.0% 0 1.88s 396 0
Mercury 2 3.0 10.0 0.0% 0 606ms 131 0
数据解析与提取 分数 一致性 尝试通过率 不稳定测试 测试正确 响应时间(平均) 输出令牌 推理令牌
Granite 4.1 8B 3.0 10.0 0.0% 0 575ms 195 0
Mercury 2 7.3 5.9 83.3% 1 667ms 180 0
领域专项 分数 一致性 尝试通过率 不稳定测试 测试正确 响应时间(平均) 输出令牌 推理令牌
Granite 4.1 8B 3.0 10.0 0.0% 0 357ms 24 0
Mercury 2 5.3 7.2 44.4% 1 534ms 46 0
通用智能 分数 一致性 尝试通过率 不稳定测试 测试正确 响应时间(平均) 输出令牌 推理令牌
Granite 4.1 8B 4.0 10.0 0.0% 0 499ms 115 0
Mercury 2 4.8 10.0 0.0% 0 628ms 159 0
指令遵循 分数 一致性 尝试通过率 不稳定测试 测试正确 响应时间(平均) 输出令牌 推理令牌
Granite 4.1 8B 3.6 9.9 0.0% 0 344ms 66 0
Mercury 2 6.5 10.0 50.0% 0 551ms 82 0
谜题求解 分数 一致性 尝试通过率 不稳定测试 测试正确 响应时间(平均) 输出令牌 推理令牌
Granite 4.1 8B 3.7 10.0 0.0% 0 635ms 431 0
Mercury 2 3.1 10.0 0.0% 0 533ms 234 0
工具调用 分数 一致性 尝试通过率 不稳定测试 测试正确 响应时间(平均) 输出令牌 推理令牌
Granite 4.1 8B 10.0 10.0 100.0% 0 2.17s 243 0
Mercury 2 10.0 10.0 100.0% 0 1.27s 197 0

快速对比

切换对比组合