ナビゲーション
AI BENCHY
Advertise here

AI BENCHY Compare

Anthropic: Claude Opus 4.8 vs Google: Gemini 3 Flash Preview

概要

Claude Opus 4.8 vs Gemini 3 Flash Preview の benchmark 比較: Gemini 3 Flash Preview が平均スコアでリードし、9.6 vs 7.7 です。 Gemini 3 Flash Preview の benchmark コストが低く、$0.667 vs $1.270 です。 Claude Opus 4.8 の方が高速で、10.83s vs 18.64s です、成功率は 79.4% vs 98.4% です。

おすすめモデル: Gemini 3 Flash Preview - ここでは最高スコア(9.6)で、Claude Opus 4.8 より約 1.9 倍低コストです。

ベンチマークは AI BENCHY テストスイートから次の日時に生成: 2026-06-30

指標 Claude Opus 4.8 Claude Opus 4.8 low リリース: 2026-05-28 Gemini 3 Flash Preview Gemini 3 Flash Preview medium リリース: 2025-12-17
スコア 7.7 9.6
順位 #38 #2
信頼性 10.0 10.0
一貫性 8.8 9.7
正解テスト
試行ごとの合格率 79.4% 98.4%
不安定なテスト 3 1
総実行回数 63 63
結果あたりのコスト 8.466 3.335
合計コスト $1.270 $0.667
入力価格 $5.000 / 1M $0.500 / 1M
出力価格 $25.000 / 1M $3.000 / 1M
合計入力トークン 60,946 37,017
出力トークン 31,771 2,006
推論トークン 6,831 214,153
応答時間(平均) 10.83s 18.64s
応答時間(最大) 127.97s 117.26s
応答時間(合計) 227.39s 391.35s

生成ショーケース

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#38 Claude Opus 4.8

low
コスト
$0.031
時間
14.1s
トークン
1,345 tok

#2 Gemini 3 Flash Preview

medium
コスト
$0.010
時間
17.9s
トークン
3,236 tok

スコア上位モデル

スコア vs 総コスト

応答時間(平均)

スコア vs 応答時間(平均)

合計出力トークン

スコア vs 合計出力トークン

カテゴリ内訳

反AIトリック スコア 一貫性 試行ごとの合格率 不安定なテスト 正解テスト 応答時間(平均) 入力トークン 出力トークン 推論トークン
Claude Opus 4.8 10.0 10.0 100.0% 0 3.30s 834 793 371
Gemini 3 Flash Preview 10.0 10.0 100.0% 0 3.88s 494 330 3,216
コーディング スコア 一貫性 試行ごとの合格率 不安定なテスト 正解テスト 応答時間(平均) 入力トークン 出力トークン 推論トークン
Claude Opus 4.8 6.6 4.6 77.8% 2 7.58s 10,590 3,637 809
Gemini 3 Flash Preview 8.6 7.6 88.9% 1 84.40s 8,122 462 161,084
複合 スコア 一貫性 試行ごとの合格率 不安定なテスト 正解テスト 応答時間(平均) 入力トークン 出力トークン 推論トークン
Claude Opus 4.8 9.8 10.0 100.0% 0 20.84s 23,500 2,216 1,081
Gemini 3 Flash Preview 10.0 10.0 100.0% 0 22.42s 12,873 351 10,485
データ解析と抽出 スコア 一貫性 試行ごとの合格率 不安定なテスト 正解テスト 応答時間(平均) 入力トークン 出力トークン 推論トークン
Claude Opus 4.8 6.3 5.8 66.7% 1 2.27s 10,503 310 0
Gemini 3 Flash Preview 10.0 10.0 100.0% 0 5.43s 7,548 279 4,893
ドメイン特化 スコア 一貫性 試行ごとの合格率 不安定なテスト 正解テスト 応答時間(平均) 入力トークン 出力トークン 推論トークン
Claude Opus 4.8 5.3 10.0 33.3% 0 45.53s 975 23,311 3,908
Gemini 3 Flash Preview 10.0 10.0 100.0% 0 15.27s 633 12 21,684
汎用知能 スコア 一貫性 試行ごとの合格率 不安定なテスト 正解テスト 応答時間(平均) 入力トークン 出力トークン 推論トークン
Claude Opus 4.8 10.0 10.0 100.0% 0 2.55s 708 231 0
Gemini 3 Flash Preview 10.0 10.0 100.0% 0 5.19s 486 72 1,905
指示追従 スコア 一貫性 試行ごとの合格率 不安定なテスト 正解テスト 応答時間(平均) 入力トークン 出力トークン 推論トークン
Claude Opus 4.8 9.8 10.0 100.0% 0 2.78s 909 111 221
Gemini 3 Flash Preview 10.0 10.0 100.0% 0 4.04s 615 72 2,709
パズル解決 スコア 一貫性 試行ごとの合格率 不安定なテスト 正解テスト 応答時間(平均) 入力トークン 出力トークン 推論トークン
Claude Opus 4.8 10.0 10.0 100.0% 0 3.01s 894 592 184
Gemini 3 Flash Preview 10.0 10.0 100.0% 0 4.05s 558 183 4,365
ツール呼び出し スコア 一貫性 試行ごとの合格率 不安定なテスト 正解テスト 応答時間(平均) 入力トークン 出力トークン 推論トークン
Claude Opus 4.8 10.0 10.0 100.0% 0 6.85s 11,775 370 35
Gemini 3 Flash Preview 10.0 10.0 100.0% 0 12.60s 5,532 234 1,487
雑学 スコア 一貫性 試行ごとの合格率 不安定なテスト 正解テスト 応答時間(平均) 入力トークン 出力トークン 推論トークン
Claude Opus 4.8 3.0 10.0 0.0% 0 5.48s 258 200 222
Gemini 3 Flash Preview 10.0 10.0 100.0% 0 5.50s 156 11 2,325

クイック比較

比較ペアを切り替え