ナビゲーション
AI BENCHY
Advertise here

Granite 4.1 8B vs Mercury 2

Mercury 2 が平均スコアでリードし、4.6 vs 4.0 です。 Granite 4.1 8B の benchmark コストが低く、$0.007 vs $0.030 です。 Mercury 2 の方が高速で、829ms vs 1.45s です、成功率は 9.1% vs 22.7% です。

ベンチマークは AI BENCHY テストスイートから次の日時に生成: 2026-07-28

順位
#224
合計出力トークン
5,996
応答時間(平均)
1.45s
合計コスト
$0.007
順位
#211
合計出力トークン
9,564
応答時間(平均)
829ms
合計コスト
$0.030
おすすめモデル Mercury 2

ここでは最高スコア(4.6)で、Granite 4.1 8B より約 1.8 倍速く応答します。

詳細比較

指標 Granite 4.1 8B Granite 4.1 8B none リリース: 2026-05-01 Mercury 2 Mercury 2 none リリース: 2026-02-24
スコア 4.0 4.6
順位 #224 #211
信頼性 10.0 10.0
一貫性 10.0 9.2
正解テスト
試行ごとの合格率 9.1% 22.7%
不安定なテスト 0 2
総実行回数 66 66
結果あたりのコスト 0.315 0.734
合計コスト $0.007 $0.030
入力価格 $0.050 / 1M $0.250 / 1M
出力価格 $0.100 / 1M $0.750 / 1M
合計入力トークン 113,827 88,704
出力トークン 5,996 9,564
推論トークン 0 0
応答時間(平均) 1.45s 829ms
応答時間(最大) 16.67s 4.52s
応答時間(合計) 31.96s 18.24s

モデル生成ショーケース

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#224 IBM: Granite 4.1 8B

none
コスト
$0.001
時間
3.2s
トークン
491 tok

#211 Mercury 2

none
コスト
$0.002
時間
1.8s
トークン
1,514 tok

スコア上位モデル

スコア vs 総コスト

応答時間(平均)

スコア vs 応答時間(平均)

合計出力トークン

スコア vs 合計出力トークン

カテゴリ内訳

コーディング スコア 一貫性 試行ごとの合格率 不安定なテスト 正解テスト 応答時間(平均) 入力トークン 出力トークン 推論トークン
Granite 4.1 8B 4.5 10.0 0.0% 0 775ms 8,344 525 0
Mercury 2 3.4 9.6 0.0% 0 1.03s 7,229 3,088 0

クイック比較

比較ペアを切り替え