导航
AI BENCHY
AD
Track all your projects in one dashboard. Get 📊stats, 🔥heatmaps and 👀recordings in one self-hosted dashboard.
uxwizz.com

AI BENCHY 对比

Google: Gemini 3.5 Flash vs IBM: Granite 4.1 8B

摘要

Gemini 3.5 Flash vs Granite 4.1 8B benchmark 对比:Gemini 3.5 Flash 平均分领先,为 9.8 vs 4.0Granite 4.1 8B benchmark 成本更低,为 $0.003 vs $1.115Granite 4.1 8B 更快,为 728ms vs 8.84s,通过率为 96.8% vs 9.5%

推荐模型: Granite 4.1 8B - 它提供了最佳整体取舍:得分有竞争力(4.0),成本低于Gemini 3.5 Flash,响应时间也较均衡。

基准结果生成自 AI BENCHY 测试套件,时间:: 2026-06-12

指标 Gemini 3.5 Flash Gemini 3.5 Flash high 发布日期: 2026-05-19 Granite 4.1 8B Granite 4.1 8B none 发布日期: 2026-05-01
分数 9.8 4.0
排名 #1 #163
可靠性 10.0 10.0
一致性 9.6 10.0
测试正确
尝试通过率 96.8% 9.5%
不稳定测试 1 0
总运行次数 63 63
每个结果成本 5.575 0.131
总成本 $1.115 $0.003
输入价格 $1.500 / 1M $0.050 / 1M
输出价格 $9.000 / 1M $0.100 / 1M
总输入令牌 37,594 46,285
输出令牌 1,975 2,911
推理令牌 115,638 0
响应时间(平均) 8.84s 728ms
响应时间(最大) 34.82s 2.17s
响应时间(总计) 185.57s 15.29s

Generation showcase

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#1 Gemini 3.5 Flash

high
Cost
$0.208
Time
118.2s
Tokens
23,158 tok

#163 IBM: Granite 4.1 8B

none
Cost
$0.001
Time
3.2s
Tokens
491 tok

按分数排名的模型

分数 vs 总成本

响应时间(平均)

分数 vs 响应时间(平均)

总输出令牌

分数 vs 总输出令牌

类别细分

反AI技巧 分数 一致性 尝试通过率 不稳定测试 测试正确 响应时间(平均) 输入令牌 输出令牌 推理令牌
Gemini 3.5 Flash 10.0 10.0 100.0% 0 2.57s 492 174 4,997
Granite 4.1 8B 4.9 10.0 25.0% 0 844ms 645 903 0
编程 分数 一致性 尝试通过率 不稳定测试 测试正确 响应时间(平均) 输入令牌 输出令牌 推理令牌
Gemini 3.5 Flash 10.0 10.0 100.0% 0 22.96s 8,118 456 47,129
Granite 4.1 8B 4.5 10.0 0.0% 0 775ms 8,344 525 0
综合 分数 一致性 尝试通过率 不稳定测试 测试正确 响应时间(平均) 输入令牌 输出令牌 推理令牌
Gemini 3.5 Flash 10.0 10.0 100.0% 0 22.37s 12,873 351 16,323
Granite 4.1 8B 3.0 10.0 0.0% 0 1.88s 19,089 396 0
数据解析与提取 分数 一致性 尝试通过率 不稳定测试 测试正确 响应时间(平均) 输入令牌 输出令牌 推理令牌
Gemini 3.5 Flash 10.0 10.0 100.0% 0 6.43s 7,548 279 8,466
Granite 4.1 8B 3.0 10.0 0.0% 0 575ms 7,617 195 0
领域专项 分数 一致性 尝试通过率 不稳定测试 测试正确 响应时间(平均) 输入令牌 输出令牌 推理令牌
Gemini 3.5 Flash 7.6 7.2 77.8% 1 14.09s 633 12 24,721
Granite 4.1 8B 3.0 10.0 0.0% 0 357ms 768 24 0
通用智能 分数 一致性 尝试通过率 不稳定测试 测试正确 响应时间(平均) 输入令牌 输出令牌 推理令牌
Gemini 3.5 Flash 10.0 10.0 100.0% 0 3.63s 486 115 1,650
Granite 4.1 8B 4.0 10.0 0.0% 0 499ms 528 115 0
指令遵循 分数 一致性 尝试通过率 不稳定测试 测试正确 响应时间(平均) 输入令牌 输出令牌 推理令牌
Gemini 3.5 Flash 10.0 10.0 100.0% 0 3.35s 615 70 3,799
Granite 4.1 8B 3.6 9.9 0.0% 0 344ms 687 66 0
谜题求解 分数 一致性 尝试通过率 不稳定测试 测试正确 响应时间(平均) 输入令牌 输出令牌 推理令牌
Gemini 3.5 Flash 10.0 10.0 100.0% 0 3.23s 558 241 4,940
Granite 4.1 8B 3.2 10.0 0.0% 0 608ms 672 432 0
工具调用 分数 一致性 尝试通过率 不稳定测试 测试正确 响应时间(平均) 输入令牌 输出令牌 推理令牌
Gemini 3.5 Flash 9.8 10.0 100.0% 0 4.96s 6,115 265 1,608
Granite 4.1 8B 10.0 10.0 100.0% 0 2.17s 7,719 243 0
常识问答 分数 一致性 尝试通过率 不稳定测试 测试正确 响应时间(平均) 输入令牌 输出令牌 推理令牌
Gemini 3.5 Flash 10.0 10.0 100.0% 0 3.94s 156 12 2,005
Granite 4.1 8B 3.0 10.0 0.0% 0 306ms 216 12 0

快速对比

切换对比组合