AI BENCHY Compare

Google: Gemini 3.5 Flash vs OpenAI: GPT-5.4 Nano

概要

Gemini 3.5 Flash vs GPT-5.4 Nano の benchmark 比較: GPT-5.4 Nano が平均スコアでリードし、7.5 vs 6.8 です。 GPT-5.4 Nano の benchmark コストが低く、$0.107 vs $0.108 です。 Gemini 3.5 Flash の方が高速で、1.57s vs 11.95s です、成功率は 68.3% vs 63.5% です。

おすすめモデル: Gemini 3.5 Flash - スコアはここでの最高値に近く（6.8 vs 7.5）、GPT-5.4 Nano より約 7.6 倍速く応答します。

ベンチマークは AI BENCHY テストスイートから次の日時に生成: 2026-06-12

指標	Gemini 3.5 Flash Gemini 3.5 Flash minimal リリース: 2026-05-19	GPT-5.4 Nano GPT-5.4 Nano medium リリース: 2026-03-17

指標	Gemini 3.5 Flash Gemini 3.5 Flash minimal リリース: 2026-05-19	GPT-5.4 Nano GPT-5.4 Nano medium リリース: 2026-03-17
スコア	6.8	7.5
順位	#71	#48
信頼性	10.0	10.0
一貫性	9.6	8.4
正解テスト
試行ごとの合格率	68.3%	63.5%
不安定なテスト	1	4
総実行回数	63	63
結果あたりのコスト	0.767	0.969
合計コスト	$0.108	$0.107
入力価格	$1.500 / 1M	$0.200 / 1M
出力価格	$9.000 / 1M	$1.250 / 1M
合計入力トークン	39,847	35,434
出力トークン	5,277	3,014
推論トークン	0	76,520
応答時間（平均）	1.57s	11.95s
応答時間（最大）	5.51s	94.06s
応答時間（合計）	33.02s	250.98s

Generation showcase

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#71 Gemini 3.5 Flash

minimal

Cost: $0.041
Time: 20.4s
Tokens: 4,608 tok

#48 GPT-5.4 Nano

medium

Cost: $0.007
Time: 24.6s
Tokens: 4,943 tok

スコア上位モデル

スコア vs 総コスト

応答時間（平均）

スコア vs 応答時間（平均）

合計出力トークン

スコア vs 合計出力トークン

カテゴリ内訳

反AIトリック	スコア	一貫性	試行ごとの合格率	不安定なテスト	正解テスト	応答時間（平均）	入力トークン	出力トークン	推論トークン
Gemini 3.5 Flash	6.5	10.0	50.0%	0		892ms	492	405	0
GPT-5.4 Nano	8.3	10.0	75.0%	0		4.52s	606	683	2,254

コーディング	スコア	一貫性	試行ごとの合格率	不安定なテスト	正解テスト	応答時間（平均）	入力トークン	出力トークン	推論トークン
Gemini 3.5 Flash	5.6	9.9	33.3%	0		2.75s	8,122	3,456	0
GPT-5.4 Nano	6.1	4.7	66.7%	2		19.12s	7,305	516	20,778

複合	スコア	一貫性	試行ごとの合格率	不安定なテスト	正解テスト	応答時間（平均）	入力トークン	出力トークン	推論トークン
Gemini 3.5 Flash	3.0	10.0	0.0%	0		3.56s	15,780	404	0
GPT-5.4 Nano	9.8	10.0	100.0%	0		24.13s	12,345	349	5,719

データ解析と抽出	スコア	一貫性	試行ごとの合格率	不安定なテスト	正解テスト	応答時間（平均）	入力トークン	出力トークン	推論トークン
Gemini 3.5 Flash	10.0	10.0	100.0%	0		1.66s	7,548	279	0
GPT-5.4 Nano	10.0	10.0	100.0%	0		2.54s	7,140	234	516

ドメイン特化	スコア	一貫性	試行ごとの合格率	不安定なテスト	正解テスト	応答時間（平均）	入力トークン	出力トークン	推論トークン
Gemini 3.5 Flash	10.0	10.0	100.0%	0		899ms	633	12	0
GPT-5.4 Nano	5.9	7.2	55.6%	1		38.18s	619	60	43,325

汎用知能	スコア	一貫性	試行ごとの合格率	不安定なテスト	正解テスト	応答時間（平均）	入力トークン	出力トークン	推論トークン
Gemini 3.5 Flash	10.0	10.0	100.0%	0		922ms	486	117	0
GPT-5.4 Nano	4.5	10.0	0.0%	0		4.15s	477	179	443

指示追従	スコア	一貫性	試行ごとの合格率	不安定なテスト	正解テスト	応答時間（平均）	入力トークン	出力トークン	推論トークン
Gemini 3.5 Flash	6.4	5.8	66.7%	1		893ms	615	76	0
GPT-5.4 Nano	9.8	10.0	100.0%	0		1.88s	660	95	521

パズル解決	スコア	一貫性	試行ごとの合格率	不安定なテスト	正解テスト	応答時間（平均）	入力トークン	出力トークン	推論トークン
Gemini 3.5 Flash	10.0	10.0	100.0%	0		1.45s	558	282	0
GPT-5.4 Nano	4.1	7.2	22.2%	1		3.79s	642	594	1,408

ツール呼び出し	スコア	一貫性	試行ごとの合格率	不安定なテスト	正解テスト	応答時間（平均）	入力トークン	出力トークン	推論トークン
Gemini 3.5 Flash	10.0	10.0	100.0%	0		2.79s	5,457	234	0
GPT-5.4 Nano	10.0	10.0	100.0%	0		7.71s	5,445	234	382

雑学	スコア	一貫性	試行ごとの合格率	不安定なテスト	正解テスト	応答時間（平均）	入力トークン	出力トークン	推論トークン
Gemini 3.5 Flash	3.0	10.0	0.0%	0		1.76s	156	12	0
GPT-5.4 Nano	3.0	10.0	0.0%	0		4.81s	195	70	1,174

クイック比較

比較ペアを切り替え