ナビゲーション
AI BENCHY
Advertise here

AI BENCHY Compare

Google: Gemma 4 31B vs OpenAI: GPT-5.4 Mini

概要

Gemma 4 31B vs GPT-5.4 Mini の benchmark 比較: Gemma 4 31B が平均スコアでリードし、6.3 vs 5.3 です。 Gemma 4 31B の benchmark コストが低く、$0.033 vs $0.038 です。 GPT-5.4 Mini の方が高速で、1.13s vs 56.55s です、成功率は 69.8% vs 30.2% です。

おすすめモデル: GPT-5.4 Mini - 総合的に最も良い選択です。競争力のあるスコア(5.3)、Gemma 4 31B より速い応答、バランスの取れたコストがあります。

ベンチマークは AI BENCHY テストスイートから次の日時に生成: 2026-06-12

指標 Gemma 4 31B Gemma 4 31B medium リリース: 2026-04-02 無料で利用可能 GPT-5.4 Mini GPT-5.4 Mini none リリース: 2026-03-17
スコア 6.3 5.3
順位 #87 #131
信頼性 10.0 10.0
一貫性 9.4 8.8
正解テスト
試行ごとの合格率 69.8% 30.2%
不安定なテスト 1 3
総実行回数 63 63
結果あたりのコスト 0.257 0.743
合計コスト $0.033 $0.038
入力価格 $0.120 / 1M $0.750 / 1M
出力価格 $0.350 / 1M $4.500 / 1M
合計入力トークン 17,957 34,244
出力トークン 22,356 2,541
推論トークン 65,726 0
応答時間(平均) 56.55s 1.13s
応答時間(最大) 437.40s 2.52s
応答時間(合計) 1074.41s 23.82s

Generation showcase

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#87 Gemma 4 31B

medium
Cost
$0.002
Time
45.7s
Tokens
2,696 tok

#131 GPT-5.4 Mini

none
Cost
$0.010
Time
11.7s
Tokens
2,151 tok

スコア上位モデル

スコア vs 総コスト

応答時間(平均)

スコア vs 応答時間(平均)

合計出力トークン

スコア vs 合計出力トークン

カテゴリ内訳

反AIトリック スコア 一貫性 試行ごとの合格率 不安定なテスト 正解テスト 応答時間(平均) 入力トークン 出力トークン 推論トークン
Gemma 4 31B 10.0 10.0 100.0% 0 12.89s 816 962 2,046
GPT-5.4 Mini 3.1 8.1 8.3% 1 929ms 606 654 0
コーディング スコア 一貫性 試行ごとの合格率 不安定なテスト 正解テスト 応答時間(平均) 入力トークン 出力トークン 推論トークン
Gemma 4 31B 4.3 5.8 22.2% 1 219.76s 5,568 11,098 33,212
GPT-5.4 Mini 5.5 10.0 33.3% 0 913ms 7,305 401 0
複合 スコア 一貫性 試行ごとの合格率 不安定なテスト 正解テスト 応答時間(平均) 入力トークン 出力トークン 推論トークン
Gemma 4 31B 3.0 10.0 0.0% 0 0ms 0 0 0
GPT-5.4 Mini 3.0 10.0 0.0% 0 2.52s 11,019 298 0
データ解析と抽出 スコア 一貫性 試行ごとの合格率 不安定なテスト 正解テスト 応答時間(平均) 入力トークン 出力トークン 推論トークン
Gemma 4 31B 10.0 10.0 100.0% 0 21.11s 8,334 1,822 2,951
GPT-5.4 Mini 10.0 10.0 100.0% 0 1.30s 7,140 222 0
ドメイン特化 スコア 一貫性 試行ごとの合格率 不安定なテスト 正解テスト 応答時間(平均) 入力トークン 出力トークン 推論トークン
Gemma 4 31B 7.7 10.0 66.7% 0 38.48s 876 4,349 8,985
GPT-5.4 Mini 3.5 4.4 33.3% 2 937ms 723 88 0
汎用知能 スコア 一貫性 試行ごとの合格率 不安定なテスト 正解テスト 応答時間(平均) 入力トークン 出力トークン 推論トークン
Gemma 4 31B 10.0 10.0 100.0% 0 9.57s 567 105 888
GPT-5.4 Mini 4.8 10.0 0.0% 0 1.82s 477 174 0
指示追従 スコア 一貫性 試行ごとの合格率 不安定なテスト 正解テスト 応答時間(平均) 入力トークン 出力トークン 推論トークン
Gemma 4 31B 10.0 10.0 100.0% 0 12.76s 777 533 2,035
GPT-5.4 Mini 6.3 10.0 50.0% 0 728ms 660 101 0
パズル解決 スコア 一貫性 試行ごとの合格率 不安定なテスト 正解テスト 応答時間(平均) 入力トークン 出力トークン 推論トークン
Gemma 4 31B 9.9 10.0 100.0% 0 26.91s 801 1,795 5,595
GPT-5.4 Mini 5.4 10.0 33.3% 0 836ms 642 305 0
ツール呼び出し スコア 一貫性 試行ごとの合格率 不安定なテスト 正解テスト 応答時間(平均) 入力トークン 出力トークン 推論トークン
Gemma 4 31B 3.0 10.0 0.0% 0 0ms 0 0 0
GPT-5.4 Mini 3.0 10.0 0.0% 0 2.32s 5,477 255 0
雑学 スコア 一貫性 試行ごとの合格率 不安定なテスト 正解テスト 応答時間(平均) 入力トークン 出力トークン 推論トークン
Gemma 4 31B 3.0 10.0 0.0% 0 90.14s 218 1,692 10,014
GPT-5.4 Mini 3.0 10.0 0.0% 0 1.33s 195 43 0

クイック比較

比較ペアを切り替え