AI BENCHY
Advertise here
#153

Granite 4.1 8B

IBM Granite リリース: 2026-05-01 テスト日時: 2026-05-22 00:30 ibm-granite/granite-4.1-8b::none

概要

Granite 4.1 8B は AI BENCHY で 4.1 を記録し、順位は #153 です。信頼性は 10.0、成功率は 10.0%、総コストは $0.003、平均応答時間は 723ms です。

Granite 4.1 8B の特徴: 最も目立つのは コーディング で、順位は #3 です。一方、最も弱い領域は 指示追従#13 です。 類似モデルと比べてかなり高速です。

スコア

4.1

一貫性

10.0

信頼性

10.0

合計出力トークン

2,742

合計入力トークン

0

入力価格

$0.050 / 1M

出力価格

$0.100 / 1M

正解テスト

誤答テスト数: 18

試行ごとの合格率: 10.0%

不安定なテスト

0

不安定なテストは、実行間で結果が混在しています(少なくとも1回合格かつ1回失敗)。

応答時間(平均)

723ms

応答時間(最大): 2.17s

応答時間(合計): 14.45s

Generation showcase

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#153 IBM: Granite 4.1 8B

none
Cost
$0.001
Time
3.2s
Tokens
491 tok

実行履歴

テスト日時 スコア 信頼性 正解テスト 合計コスト 比較する
2026-06-04 14:07 新しいテストを追加 4.0 10.0 $0.003 比較する
2026-05-22 00:30 スイート変更 4.1 10.0 $0.003 現在の実行
2026-05-01 00:31 初回実行 4.3 10.0 $0.003 比較する

この実行では別のベンチマークスイートが使われました。履歴の変化を読むときはスイート変更も考慮してください。

実行比較

実行スコア一貫性信頼性正解テスト不安定なテスト合計出力トークン合計入力トークン合計コスト応答時間(平均)
2026-05-22 00:30 · スイート変更4.110.010.02/2002,7420$0.003723ms
2026-05-01 00:31 · 初回実行4.310.010.02/1802,7120$0.003767ms
差分-0.20.00.000+300+$0.001-44ms

この 2 つの実行では異なるベンチマークスイートが使われているため、差分にはモデル変化とスイート変化の両方が含まれます。

チャート

最初のモデルを選択し、次に2つ目のモデルをクリックして並列比較ページを開きます。

合計出力トークン

スコア vs 合計出力トークン

クイック比較

カテゴリ内訳

カテゴリ スコア 一貫性 正解テスト
反AIトリック 4.9 10.0
コーディング 5.2 10.0
複合 3.0 10.0
データ解析と抽出 3.0 10.0
ドメイン特化 3.0 10.0
汎用知能 4.0 10.0
指示追従 3.6 9.9
パズル解決 3.2 10.0
ツール呼び出し 10.0 10.0
雑学 3.0 10.0

比較対象モデル