AI BENCHY
AD
Track all your projects in one dashboard. Get 📊stats, 🔥heatmaps and 👀recordings in one self-hosted dashboard.
uxwizz.com
#135

Granite 4.1 8B

IBM Granite リリース: 2026-05-01 テスト日時: 2026-05-01 00:31 ibm-granite/granite-4.1-8b::none

概要

Granite 4.1 8B は AI BENCHY で 4.3 を記録し、順位は #135 です。信頼性は 10.0、成功率は 11.1%、総コストは $0.003、平均応答時間は 767ms です。

Granite 4.1 8B の特徴: 最も目立つのは コーディング で、順位は #1 です。一方、最も弱い領域は データ解析と抽出#15 です。 このスコア帯としては benchmark 総コストがかなり低めです。 類似モデルと比べてかなり高速です。

スコア

4.3

一貫性

10.0

信頼性

10.0

合計出力トークン

2,712

合計入力トークン

0

入力価格

$0.050 / 1M

出力価格

$0.100 / 1M

正解テスト

誤答テスト数: 16

試行ごとの合格率: 11.1%

不安定なテスト

0

不安定なテストは、実行間で結果が混在しています(少なくとも1回合格かつ1回失敗)。

応答時間(平均)

767ms

応答時間(最大): 2.17s

応答時間(合計): 13.81s

Generation showcase

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#135 IBM: Granite 4.1 8B

none
Cost
$0.001
Time
3.2s
Tokens
491 tok

実行履歴

テスト日時 スコア 信頼性 正解テスト 合計コスト 比較する
2026-06-04 14:07 新しいテストを追加 4.0 10.0 $0.003 比較する
2026-05-22 00:30 スイート変更 4.1 10.0 $0.003 比較する
2026-05-01 00:31 初回実行 4.3 10.0 $0.003 現在の実行

実行比較

実行スコア一貫性信頼性正解テスト不安定なテスト合計出力トークン合計入力トークン合計コスト応答時間(平均)
2026-05-01 00:31 · 初回実行4.310.010.02/1802,7120$0.003767ms
2026-06-04 14:07 · 新しいテストを追加4.010.010.02/2102,91146,285$0.003728ms
差分+0.20.00.000-199-46285-$0.001+39ms

この 2 つの実行では異なるベンチマークスイートが使われているため、差分にはモデル変化とスイート変化の両方が含まれます。

チャート

最初のモデルを選択し、次に2つ目のモデルをクリックして並列比較ページを開きます。

合計出力トークン

スコア vs 合計出力トークン

クイック比較

カテゴリ内訳

カテゴリ スコア 一貫性 正解テスト
反AIトリック 4.9 10.0
コーディング 6.9 10.0
複合 3.0 10.0
データ解析と抽出 3.0 10.0
ドメイン特化 3.0 10.0
汎用知能 4.0 10.0
指示追従 3.6 9.9
パズル解決 3.7 10.0
ツール呼び出し 10.0 10.0

比較対象モデル