ナビゲーション
AI BENCHY
Your ad here

AI BENCHY Compare

比較対象モデル

ベンチマークは AI BENCHY テストスイートから次の日時に生成: 2026-04-02

指標 Gemma 4 31B Gemma 4 31B medium リリース: 2026-04-02 Gemini 3 Flash Preview Gemini 3 Flash Preview medium リリース: 2025-12-17 Gemini 3 PRO Preview Gemini 3 PRO Preview medium リリース: 2025-11-18 Gemini 3.1 Pro Preview Gemini 3.1 Pro Preview medium リリース: 2026-02-19
スコア 8.6 10.0 8.7 9.6
順位 #5 #1 #4 #2
一貫性 9.6 10.0 10.0 10.0
正解テスト
試行ごとの合格率 80.4% 100.0% 82.4% 94.1%
不安定なテスト 1 0 0 0
総実行回数 51 51 51 51
結果あたりのコスト 0.109 0.972 1.406 3.257
合計コスト $0.015 $0.166 $0.197 $0.522
???? $0.140 / 1M $0.500 / 1M $0.000 / 1M $2.000 / 1M
???? $0.400 / 1M $3.000 / 1M $0.000 / 1M $12.000 / 1M
出力トークン 9,568 1,640 1,508 1,527
推論トークン 22,501 48,270 10,084 36,341
応答時間（平均） 21.81s 11.39s 9.06s 15.56s
応答時間（最大） 68.92s 50.16s 26.24s 40.61s
応答時間（合計） 327.16s 113.86s 90.58s 155.64s

スコア上位モデル

スコア vs 総コスト

応答時間（平均）

スコア vs 応答時間（平均）

合計出力トークン

スコア vs 合計出力トークン

カテゴリ内訳

反AIトリック スコア 一貫性 試行ごとの合格率 不安定なテスト 正解テスト 応答時間（平均） 出力トークン 推論トークン
Gemma 4 31B 10.0 10.0 100.0% 0 12.89s 962 2,046
Gemini 3 Flash Preview 10.0 10.0 100.0% 0 4.13s 305 3,490
Gemini 3 PRO Preview 10.0 10.0 100.0% 0 14.99s 149 1,485
Gemini 3.1 Pro Preview 10.0 10.0 100.0% 0 7.90s 112 3,218
複合 スコア 一貫性 試行ごとの合格率 不安定なテスト 正解テスト 応答時間（平均） 出力トークン 推論トークン
Gemma 4 31B 3.0 10.0 0.0% 0 0ms 0 0
Gemini 3 Flash Preview 10.0 10.0 100.0% 0 50.16s 351 12,645
Gemini 3 PRO Preview 3.0 10.0 0.0% 0 10.37s 351 952
Gemini 3.1 Pro Preview 9.5 10.0 100.0% 0 40.61s 432 9,281
データ解析と抽出 スコア 一貫性 試行ごとの合格率 不安定なテスト 正解テスト 応答時間（平均） 出力トークン 推論トークン
Gemma 4 31B 10.0 10.0 100.0% 0 21.11s 1,822 2,951
Gemini 3 Flash Preview 10.0 10.0 100.0% 0 4.72s 279 5,333
Gemini 3 PRO Preview 10.0 10.0 100.0% 0 10.84s 279 3,156
Gemini 3.1 Pro Preview 10.0 10.0 100.0% 0 7.72s 279 3,904
ドメイン特化 スコア 一貫性 試行ごとの合格率 不安定なテスト 正解テスト 応答時間（平均） 出力トークン 推論トークン
Gemma 4 31B 7.7 10.0 66.7% 0 38.48s 4,349 8,985
Gemini 3 Flash Preview 10.0 10.0 100.0% 0 21.12s 12 14,908
Gemini 3 PRO Preview 5.3 10.0 33.3% 0 7.01s 15 1,195
Gemini 3.1 Pro Preview 7.7 10.0 66.7% 0 32.73s 18 12,424
汎用知能 スコア 一貫性 試行ごとの合格率 不安定なテスト 正解テスト 応答時間（平均） 出力トークン 推論トークン
Gemma 4 31B 10.0 10.0 100.0% 0 9.57s 105 888
Gemini 3 Flash Preview 10.0 10.0 100.0% 0 4.09s 111 1,285
Gemini 3 PRO Preview 10.0 10.0 100.0% 0 9.34s 78 374
Gemini 3.1 Pro Preview 10.0 10.0 100.0% 0 11.77s 108 1,179
指示追従 スコア 一貫性 試行ごとの合格率 不安定なテスト 正解テスト 応答時間（平均） 出力トークン 推論トークン
Gemma 4 31B 10.0 10.0 100.0% 0 12.76s 533 2,035
Gemini 3 Flash Preview 10.0 10.0 100.0% 0 6.10s 72 4,558
Gemini 3 PRO Preview 9.8 10.0 100.0% 0 3.26s 69 754
Gemini 3.1 Pro Preview 10.0 10.0 100.0% 0 9.56s 72 2,236
Puzzle Solving スコア 一貫性 試行ごとの合格率 不安定なテスト 正解テスト 応答時間（平均） 出力トークン 推論トークン
Gemma 4 31B 8.8 7.9 88.9% 1 27.63s 1,797 5,596
Gemini 3 Flash Preview 10.0 10.0 100.0% 0 4.43s 276 4,921
Gemini 3 PRO Preview 10.0 10.0 100.0% 0 3.91s 243 1,197
Gemini 3.1 Pro Preview 10.0 10.0 100.0% 0 7.15s 232 3,117
ツール呼び出し スコア 一貫性 試行ごとの合格率 不安定なテスト 正解テスト 応答時間（平均） 出力トークン 推論トークン
Gemma 4 31B 3.0 10.0 0.0% 0 0ms 0 0
Gemini 3 Flash Preview 10.0 10.0 100.0% 0 10.55s 234 1,130
Gemini 3 PRO Preview 10.0 10.0 100.0% 0 11.96s 324 971
Gemini 3.1 Pro Preview 10.0 10.0 100.0% 0 23.15s 274 982

クイック比較

比較ペアを切り替え

Gemma 4 31BmediumvsGPT-5.2 ChatnoneGemini 3 PRO PreviewmediumvsGPT-5.2 ChatnoneGemma 4 31BmediumvsGPT-5.3 ChatnoneGemini 3 PRO PreviewmediumvsGPT-5.3 ChatnoneClaude Sonnet 4.6nonevsGemma 4 31BmediumClaude Sonnet 4.6nonevsGemini 3 PRO PreviewmediumGemini 3.1 Pro PreviewmediumvsGPT-5.2 ChatnoneGemma 4 31BmediumvsQwen3.5 Plus 2026-02-15noneGemma 4 31BmediumvsGLM 5noneGemini 3 PRO PreviewmediumvsQwen3.5 Plus 2026-02-15noneGemini 3 PRO PreviewmediumvsGLM 5noneGemini 3.1 Pro PreviewmediumvsGPT-5.3 Chatnone