ナビゲーション
AI BENCHY
Advertise here

AI BENCHY Compare

比較対象モデル

ベンチマークは AI BENCHY テストスイートから次の日時に生成: 2026-05-29

指標 Gemma 4 31B Gemma 4 31B medium リリース: 2026-04-02 無料で利用可能 Gemma 4 26B A4B Gemma 4 26B A4B medium リリース: 2026-04-03 無料で利用可能 Gemini 3 PRO Preview Gemini 3 PRO Preview medium リリース: 2025-11-18
スコア 8.0 7.8 8.1
順位 #25 #34 #22
信頼性 10.0 10.0 該当なし
一貫性 9.2 9.2 10.0
正解テスト
試行ごとの合格率 75.0% 73.3% 73.7%
不安定なテスト 2 2 0
総実行回数 60 60 60
結果あたりのコスト 0.205 0.317 1.406
合計コスト $0.029 $0.045 $0.197
入力価格 $0.120 / 1M $0.060 / 1M $0.000 / 1M
出力価格 $0.370 / 1M $0.330 / 1M $0.000 / 1M
出力トークン 19,602 28,000 1,490
推論トークン 49,686 82,045 10,102
応答時間(平均) 35.39s 50.92s 9.05s
応答時間(最大) 150.90s 369.32s 26.24s
応答時間(合計) 637.01s 967.47s 90.53s

スコア上位モデル

スコア vs 総コスト

応答時間(平均)

スコア vs 応答時間(平均)

合計出力トークン

スコア vs 合計出力トークン

カテゴリ内訳

反AIトリック スコア 一貫性 試行ごとの合格率 不安定なテスト 正解テスト 応答時間(平均) 出力トークン 推論トークン
Gemma 4 31B 10.0 10.0 100.0% 0 12.89s 962 2,046
Gemma 4 26B A4B 10.0 10.0 100.0% 0 6.20s 1,142 3,045
Gemini 3 PRO Preview 10.0 10.0 100.0% 0 14.99s 149 1,485
コーディング スコア 一貫性 試行ごとの合格率 不安定なテスト 正解テスト 応答時間(平均) 出力トークン 推論トークン
Gemma 4 31B 3.8 1.6 50.0% 2 110.94s 8,344 17,172
Gemma 4 26B A4B 2.9 10.0 0.0% 0 258.40s 14,838 26,122
Gemini 3 PRO Preview 3.0 10.0 0.0% 0 0ms 0 0
複合 スコア 一貫性 試行ごとの合格率 不安定なテスト 正解テスト 応答時間(平均) 出力トークン 推論トークン
Gemma 4 31B 3.0 10.0 0.0% 0 0ms 0 0
Gemma 4 26B A4B 9.6 10.0 100.0% 0 73.55s 5,415 13,112
Gemini 3 PRO Preview 3.0 10.0 0.0% 0 10.37s 351 952
データ解析と抽出 スコア 一貫性 試行ごとの合格率 不安定なテスト 正解テスト 応答時間(平均) 出力トークン 推論トークン
Gemma 4 31B 10.0 10.0 100.0% 0 21.11s 1,822 2,951
Gemma 4 26B A4B 10.0 10.0 100.0% 0 16.51s 1,567 2,827
Gemini 3 PRO Preview 10.0 10.0 100.0% 0 10.84s 279 3,156
ドメイン特化 スコア 一貫性 試行ごとの合格率 不安定なテスト 正解テスト 応答時間(平均) 出力トークン 推論トークン
Gemma 4 31B 7.7 10.0 66.7% 0 38.48s 4,349 8,985
Gemma 4 26B A4B 2.9 4.4 22.2% 2 23.62s 2,469 7,105
Gemini 3 PRO Preview 5.3 10.0 33.3% 0 7.01s 15 1,195
汎用知能 スコア 一貫性 試行ごとの合格率 不安定なテスト 正解テスト 応答時間(平均) 出力トークン 推論トークン
Gemma 4 31B 10.0 10.0 100.0% 0 9.57s 105 888
Gemma 4 26B A4B 10.0 10.0 100.0% 0 29.76s 25 5,075
Gemini 3 PRO Preview 10.0 10.0 100.0% 0 9.34s 78 374
指示追従 スコア 一貫性 試行ごとの合格率 不安定なテスト 正解テスト 応答時間(平均) 出力トークン 推論トークン
Gemma 4 31B 10.0 10.0 100.0% 0 12.76s 533 2,035
Gemma 4 26B A4B 10.0 10.0 100.0% 0 17.54s 887 4,470
Gemini 3 PRO Preview 9.8 10.0 100.0% 0 3.26s 69 754
パズル解決 スコア 一貫性 試行ごとの合格率 不安定なテスト 正解テスト 応答時間(平均) 出力トークン 推論トークン
Gemma 4 31B 9.9 10.0 100.0% 0 26.91s 1,795 5,595
Gemma 4 26B A4B 10.0 10.0 100.0% 0 5.79s 410 2,128
Gemini 3 PRO Preview 10.0 10.0 100.0% 0 3.88s 225 1,215
ツール呼び出し スコア 一貫性 試行ごとの合格率 不安定なテスト 正解テスト 応答時間(平均) 出力トークン 推論トークン
Gemma 4 31B 3.0 10.0 0.0% 0 0ms 0 0
Gemma 4 26B A4B 10.0 10.0 100.0% 0 9.01s 450 1,256
Gemini 3 PRO Preview 10.0 10.0 100.0% 0 11.96s 324 971
雑学 スコア 一貫性 試行ごとの合格率 不安定なテスト 正解テスト 応答時間(平均) 出力トークン 推論トークン
Gemma 4 31B 3.0 10.0 0.0% 0 90.14s 1,692 10,014
Gemma 4 26B A4B 3.0 10.0 0.0% 0 180.87s 797 16,905
Gemini 3 PRO Preview 0.0 0.0 0.0% 0 0ms 0 0

クイック比較

比較ペアを切り替え