ナビゲーション
AI BENCHY
Your ad here

AI BENCHY Compare

Anthropic: Claude Sonnet 4.6 vs Google: Gemini 2.5 Flash

ベンチマークは AI BENCHY テストスイートから次の日時に生成: 2026-04-16

指標 Claude Sonnet 4.6 Claude Sonnet 4.6 none リリース: 2026-02-17 Gemini 2.5 Flash Gemini 2.5 Flash medium リリース: 2025-06-17
スコア 7.4 8.2
順位 #41 #15
一貫性 9.6 9.5
正解テスト
試行ごとの合格率 64.8% 75.9%
不安定なテスト 1 1
総実行回数 54 54
結果あたりのコスト 2.376 2.454
合計コスト $0.262 $0.319
???? $3.000 / 1M $0.300 / 1M
???? $15.000 / 1M $2.500 / 1M
出力トークン 7,433 1,898
推論トークン 0 122,273
応答時間（平均） 4.98s 12.12s
応答時間（最大） 23.84s 95.48s
応答時間（合計） 54.83s 218.12s

スコア上位モデル

スコア vs 総コスト

応答時間（平均）

スコア vs 応答時間（平均）

合計出力トークン

スコア vs 合計出力トークン

カテゴリ内訳

反AIトリック スコア 一貫性 試行ごとの合格率 不安定なテスト 正解テスト 応答時間（平均） 出力トークン 推論トークン
Claude Sonnet 4.6 4.8 10.0 25.0% 0 2.94s 1,214 0
Gemini 2.5 Flash 8.4 10.0 75.0% 0 6.30s 255 10,233
コーディング スコア 一貫性 試行ごとの合格率 不安定なテスト 正解テスト 応答時間（平均） 出力トークン 推論トークン
Claude Sonnet 4.6 10.0 10.0 100.0% 0 3.67s 523 0
Gemini 2.5 Flash 10.0 10.0 100.0% 0 16.23s 522 10,350
複合 スコア 一貫性 試行ごとの合格率 不安定なテスト 正解テスト 応答時間（平均） 出力トークン 推論トークン
Claude Sonnet 4.6 9.5 10.0 100.0% 0 23.84s 3,766 0
Gemini 2.5 Flash 10.0 10.0 100.0% 0 28.44s 303 11,922
データ解析と抽出 スコア 一貫性 試行ごとの合格率 不安定なテスト 正解テスト 応答時間（平均） 出力トークン 推論トークン
Claude Sonnet 4.6 10.0 10.0 100.0% 0 3.43s 252 0
Gemini 2.5 Flash 10.0 10.0 100.0% 0 4.06s 279 2,325
ドメイン特化 スコア 一貫性 試行ごとの合格率 不安定なテスト 正解テスト 応答時間（平均） 出力トークン 推論トークン
Claude Sonnet 4.6 7.7 10.0 66.7% 0 3.54s 413 0
Gemini 2.5 Flash 5.9 7.2 55.6% 1 37.34s 18 80,702
汎用知能 スコア 一貫性 試行ごとの合格率 不安定なテスト 正解テスト 応答時間（平均） 出力トークン 推論トークン
Claude Sonnet 4.6 6.1 3.1 66.7% 1 2.56s 192 0
Gemini 2.5 Flash 4.8 10.0 0.0% 0 4.86s 92 1,899
指示追従 スコア 一貫性 試行ごとの合格率 不安定なテスト 正解テスト 応答時間（平均） 出力トークン 推論トークン
Claude Sonnet 4.6 6.5 10.0 50.0% 0 1.96s 90 0
Gemini 2.5 Flash 9.8 10.0 100.0% 0 2.62s 69 1,203
パズル解決 スコア 一貫性 試行ごとの合格率 不安定なテスト 正解テスト 応答時間（平均） 出力トークン 推論トークン
Claude Sonnet 4.6 7.7 10.0 66.7% 0 2.92s 536 0
Gemini 2.5 Flash 7.7 10.0 66.7% 0 3.94s 126 2,499
ツール呼び出し スコア 一貫性 試行ごとの合格率 不安定なテスト 正解テスト 応答時間（平均） 出力トークン 推論トークン
Claude Sonnet 4.6 10.0 10.0 100.0% 0 4.11s 447 0
Gemini 2.5 Flash 10.0 10.0 100.0% 0 6.20s 234 1,140

クイック比較

比較ペアを切り替え

Claude Sonnet 4.6nonevsQwen3.5-35B-A3BmediumClaude Sonnet 4.6nonevsMiMo-V2-FlashmediumClaude Sonnet 4.6nonevsGPT-5.2mediumClaude Sonnet 4.6nonevsSeed-2.0-MinimediumClaude Sonnet 4.6nonevsGPT-5.4 NanomediumClaude Sonnet 4.6nonevsGPT-5.4 MinimediumClaude Sonnet 4.6nonevsMiMo-V2-OmnimediumGemini 2.5 FlashmediumvsGPT-5.2 ChatnoneClaude Sonnet 4.6nonevsGLM 5.1mediumClaude Sonnet 4.6nonevsGPT-5 MinimediumClaude Sonnet 4.6nonevsQwen3.5-FlashmediumClaude Sonnet 4.6nonevsGLM 5V Turbomedium