AI BENCHY Compare

Anthropic: Claude Sonnet 4.6 vs Google: Gemini 3.5 Flash

概要

Claude Sonnet 4.6 vs Gemini 3.5 Flash の benchmark 比較: Gemini 3.5 Flash が平均スコアでリードし、9.1 vs 7.3 です。 Claude Sonnet 4.6 の benchmark コストが低く、$0.316 vs $0.582 です。 Gemini 3.5 Flash の方が高速で、4.94s vs 5.04s です、成功率は 55.6% vs 87.3% です。

おすすめモデル: Gemini 3.5 Flash - この比較で最も高いスコア（9.1）を出し、全 2 モデルの中でコストと応答時間のバランスも最良です。

ベンチマークは AI BENCHY テストスイートから次の日時に生成: 2026-07-02

指標	Claude Sonnet 4.6 Claude Sonnet 4.6 none リリース: 2026-02-17	Gemini 3.5 Flash Gemini 3.5 Flash medium リリース: 2026-05-19

指標	Claude Sonnet 4.6 Claude Sonnet 4.6 none リリース: 2026-02-17	Gemini 3.5 Flash Gemini 3.5 Flash medium リリース: 2026-05-19
スコア	7.3	9.1
順位	#57	#8
信頼性	10.0	10.0
一貫性	9.7	9.6
正解テスト
試行ごとの合格率	55.6%	87.3%
不安定なテスト	1	1
総実行回数	63	63
結果あたりのコスト	2.870	3.229
合計コスト	$0.316	$0.582
入力価格	$3.000 / 1M	$1.500 / 1M
出力価格	$15.000 / 1M	$9.000 / 1M
合計入力トークン	57,886	36,936
出力トークン	9,465	2,001
推論トークン	0	56,408
応答時間（平均）	5.04s	4.94s
応答時間（最大）	23.84s	18.07s
応答時間（合計）	70.60s	103.79s

生成ショーケース

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#57 Claude Sonnet 4.6

none

コスト: $0.038
時間: 27.3s
トークン: 2,598 tok

#8 Gemini 3.5 Flash

medium

コスト: $0.201
時間: 112.9s
トークン: 22,371 tok

スコア上位モデル

スコア vs 総コスト

応答時間（平均）

スコア vs 応答時間（平均）

合計出力トークン

スコア vs 合計出力トークン

カテゴリ内訳

反AIトリック	スコア	一貫性	試行ごとの合格率	不安定なテスト	正解テスト	応答時間（平均）	入力トークン	出力トークン	推論トークン
Claude Sonnet 4.6	4.8	10.0	25.0%	0		2.94s	636	1,214	0
Gemini 3.5 Flash	10.0	10.0	100.0%	0		2.09s	492	171	3,385

コーディング	スコア	一貫性	試行ごとの合格率	不安定なテスト	正解テスト	応答時間（平均）	入力トークン	出力トークン	推論トークン
Claude Sonnet 4.6	5.5	10.0	33.3%	0		5.19s	8,522	2,127	0
Gemini 3.5 Flash	7.9	7.5	77.8%	1		12.63s	8,118	461	24,939

複合	スコア	一貫性	試行ごとの合格率	不安定なテスト	正解テスト	応答時間（平均）	入力トークン	出力トークン	推論トークン
Claude Sonnet 4.6	9.5	10.0	100.0%	0		23.84s	26,024	3,766	0
Gemini 3.5 Flash	10.0	10.0	100.0%	0		12.05s	12,873	351	7,807

データ解析と抽出	スコア	一貫性	試行ごとの合格率	不安定なテスト	正解テスト	応答時間（平均）	入力トークン	出力トークン	推論トークン
Claude Sonnet 4.6	10.0	10.0	100.0%	0		3.43s	8,574	252	0
Gemini 3.5 Flash	10.0	10.0	100.0%	0		4.07s	7,548	279	3,784

ドメイン特化	スコア	一貫性	試行ごとの合格率	不安定なテスト	正解テスト	応答時間（平均）	入力トークン	出力トークン	推論トークン
Claude Sonnet 4.6	7.7	10.0	66.7%	0		3.54s	759	413	0
Gemini 3.5 Flash	7.7	10.0	66.7%	0		5.24s	633	12	8,047

汎用知能	スコア	一貫性	試行ごとの合格率	不安定なテスト	正解テスト	応答時間（平均）	入力トークン	出力トークン	推論トークン
Claude Sonnet 4.6	6.1	3.1	66.7%	1		2.56s	513	192	0
Gemini 3.5 Flash	10.0	10.0	100.0%	0		2.52s	486	115	1,144

指示追従	スコア	一貫性	試行ごとの合格率	不安定なテスト	正解テスト	応答時間（平均）	入力トークン	出力トークン	推論トークン
Claude Sonnet 4.6	6.5	10.0	50.0%	0		1.96s	690	90	0
Gemini 3.5 Flash	9.9	10.0	100.0%	0		2.70s	615	71	2,855

パズル解決	スコア	一貫性	試行ごとの合格率	不安定なテスト	正解テスト	応答時間（平均）	入力トークン	出力トークン	推論トークン
Claude Sonnet 4.6	7.7	10.0	66.7%	0		2.53s	663	533	0
Gemini 3.5 Flash	7.7	10.0	66.7%	0		2.38s	558	295	2,747

ツール呼び出し	スコア	一貫性	試行ごとの合格率	不安定なテスト	正解テスト	応答時間（平均）	入力トークン	出力トークン	推論トークン
Claude Sonnet 4.6	10.0	10.0	100.0%	0		4.11s	11,301	447	0
Gemini 3.5 Flash	10.0	10.0	100.0%	0		3.81s	5,457	234	455

雑学	スコア	一貫性	試行ごとの合格率	不安定なテスト	正解テスト	応答時間（平均）	入力トークン	出力トークン	推論トークン
Claude Sonnet 4.6	3.0	10.0	0.0%	0		4.67s	204	431	0
Gemini 3.5 Flash	10.0	10.0	100.0%	0		2.75s	156	12	1,245

クイック比較

比較ペアを切り替え