ナビゲーション
AI BENCHY
Advertise here

AI BENCHY Compare

Google: Gemini 2.5 Flash vs OpenAI: GPT-5.4

概要

Gemini 2.5 Flash vs GPT-5.4 の benchmark 比較: Gemini 2.5 Flash が平均スコアでリードし、6.2 vs 5.8 です。 Gemini 2.5 Flash の benchmark コストが低く、$0.016 vs $0.122 です。 Gemini 2.5 Flash の方が高速で、875ms vs 1.42s です、成功率は 46.0% vs 36.5% です。

おすすめモデル: Gemini 2.5 Flash - ここでは最高スコア(6.2)で、GPT-5.4 より約 8.0 倍低コストです。

ベンチマークは AI BENCHY テストスイートから次の日時に生成: 2026-06-18

指標 Gemini 2.5 Flash Gemini 2.5 Flash none リリース: 2025-06-17 GPT-5.4 GPT-5.4 none リリース: 2026-03-05
スコア 6.2 5.8
順位 #93 #112
信頼性 10.0 10.0
一貫性 9.6 9.2
正解テスト
試行ごとの合格率 46.0% 36.5%
不安定なテスト 1 2
総実行回数 63 63
結果あたりのコスト 0.169 1.740
合計コスト $0.016 $0.122
入力価格 $0.300 / 1M $2.500 / 1M
出力価格 $2.500 / 1M $15.000 / 1M
合計入力トークン 35,926 34,212
出力トークン 1,770 2,417
推論トークン 0 0
応答時間(平均) 875ms 1.42s
応答時間(最大) 4.39s 2.95s
応答時間(合計) 18.37s 29.87s

生成ショーケース

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#93 Gemini 2.5 Flash

none
無効なSVG
コスト
$0.164
時間
215.5s
トークン
65,659 tok

#112 GPT-5.4

none
コスト
$0.026
時間
18.1s
トークン
1,792 tok

スコア上位モデル

スコア vs 総コスト

応答時間(平均)

スコア vs 応答時間(平均)

合計出力トークン

スコア vs 合計出力トークン

カテゴリ内訳

反AIトリック スコア 一貫性 試行ごとの合格率 不安定なテスト 正解テスト 応答時間(平均) 入力トークン 出力トークン 推論トークン
Gemini 2.5 Flash 3.0 10.0 0.0% 0 582ms 492 102 0
GPT-5.4 3.2 8.0 8.3% 1 1.21s 606 406 0
コーディング スコア 一貫性 試行ごとの合格率 不安定なテスト 正解テスト 応答時間(平均) 入力トークン 出力トークン 推論トークン
Gemini 2.5 Flash 5.5 10.0 33.3% 0 736ms 8,122 483 0
GPT-5.4 5.5 10.0 33.3% 0 1.62s 7,305 516 0
複合 スコア 一貫性 試行ごとの合格率 不安定なテスト 正解テスト 応答時間(平均) 入力トークン 出力トークン 推論トークン
Gemini 2.5 Flash 3.0 10.0 0.0% 0 4.39s 12,519 366 0
GPT-5.4 3.0 10.0 0.0% 0 2.89s 11,019 291 0
データ解析と抽出 スコア 一貫性 試行ごとの合格率 不安定なテスト 正解テスト 応答時間(平均) 入力トークン 出力トークン 推論トークン
Gemini 2.5 Flash 10.0 10.0 100.0% 0 652ms 7,257 279 0
GPT-5.4 10.0 10.0 100.0% 0 1.04s 7,140 222 0
ドメイン特化 スコア 一貫性 試行ごとの合格率 不安定なテスト 正解テスト 応答時間(平均) 入力トークン 出力トークン 推論トークン
Gemini 2.5 Flash 5.9 7.2 55.6% 1 495ms 633 12 0
GPT-5.4 5.3 7.2 44.4% 1 1.07s 723 50 0
汎用知能 スコア 一貫性 試行ごとの合格率 不安定なテスト 正解テスト 応答時間(平均) 入力トークン 出力トークン 推論トークン
Gemini 2.5 Flash 5.0 10.0 0.0% 0 615ms 486 78 0
GPT-5.4 4.4 9.9 0.0% 0 1.78s 477 184 0
指示追従 スコア 一貫性 試行ごとの合格率 不安定なテスト 正解テスト 応答時間(平均) 入力トークン 出力トークン 推論トークン
Gemini 2.5 Flash 10.0 10.0 100.0% 0 590ms 615 72 0
GPT-5.4 6.5 10.0 50.0% 0 1.07s 660 81 0
パズル解決 スコア 一貫性 試行ごとの合格率 不安定なテスト 正解テスト 応答時間(平均) 入力トークン 出力トークン 推論トークン
Gemini 2.5 Flash 7.7 10.0 66.7% 0 604ms 558 132 0
GPT-5.4 5.6 9.8 33.3% 0 1.44s 642 381 0
ツール呼び出し スコア 一貫性 試行ごとの合格率 不安定なテスト 正解テスト 応答時間(平均) 入力トークン 出力トークン 推論トークン
Gemini 2.5 Flash 10.0 10.0 100.0% 0 1.91s 5,088 234 0
GPT-5.4 10.0 10.0 100.0% 0 2.75s 5,445 246 0
雑学 スコア 一貫性 試行ごとの合格率 不安定なテスト 正解テスト 応答時間(平均) 入力トークン 出力トークン 推論トークン
Gemini 2.5 Flash 3.0 10.0 0.0% 0 1.15s 156 12 0
GPT-5.4 3.0 10.0 0.0% 0 990ms 195 40 0

クイック比較

比較ペアを切り替え