ナビゲーション
AI BENCHY
Your ad here

AI BENCHY Compare

Anthropic: Claude Sonnet 4.6 vs Google: Gemma 4 26B A4B

ベンチマークは AI BENCHY テストスイートから次の日時に生成: 2026-04-04

指標 Claude Sonnet 4.6 Claude Sonnet 4.6 none リリース: 2026-02-17 Gemma 4 26B A4B Gemma 4 26B A4B medium リリース: 2026-04-03
スコア 7.3 8.3
順位 #39 #13
一貫性 9.6 8.9
正解テスト
試行ごとの合格率 62.8% 80.4%
不安定なテスト 1 2
総実行回数 51 51
結果あたりのコスト 2.512 0.189
合計コスト $0.252 $0.025
???? $3.000 / 1M $0.130 / 1M
???? $15.000 / 1M $0.400 / 1M
出力トークン 6,910 12,412
推論トークン 0 39,955
応答時間(平均) 5.12s 17.38s
応答時間(最大) 23.84s 73.55s
応答時間(合計) 51.16s 278.01s

スコア上位モデル

スコア vs 総コスト

応答時間(平均)

スコア vs 応答時間(平均)

合計出力トークン

スコア vs 合計出力トークン

カテゴリ内訳

反AIトリック スコア 一貫性 試行ごとの合格率 不安定なテスト 正解テスト 応答時間(平均) 出力トークン 推論トークン
Claude Sonnet 4.6 4.8 10.0 25.0% 0 2.94s 1,214 0
Gemma 4 26B A4B 10.0 10.0 100.0% 0 6.20s 1,142 3,045
複合 スコア 一貫性 試行ごとの合格率 不安定なテスト 正解テスト 応答時間(平均) 出力トークン 推論トークン
Claude Sonnet 4.6 9.5 10.0 100.0% 0 23.84s 3,766 0
Gemma 4 26B A4B 9.6 10.0 100.0% 0 73.55s 5,415 13,112
データ解析と抽出 スコア 一貫性 試行ごとの合格率 不安定なテスト 正解テスト 応答時間(平均) 出力トークン 推論トークン
Claude Sonnet 4.6 10.0 10.0 100.0% 0 3.43s 252 0
Gemma 4 26B A4B 10.0 10.0 100.0% 0 16.51s 1,567 2,827
ドメイン特化 スコア 一貫性 試行ごとの合格率 不安定なテスト 正解テスト 応答時間(平均) 出力トークン 推論トークン
Claude Sonnet 4.6 7.7 10.0 66.7% 0 3.54s 413 0
Gemma 4 26B A4B 2.9 4.4 22.2% 2 23.62s 2,469 7,105
汎用知能 スコア 一貫性 試行ごとの合格率 不安定なテスト 正解テスト 応答時間(平均) 出力トークン 推論トークン
Claude Sonnet 4.6 6.1 3.1 66.7% 1 2.56s 192 0
Gemma 4 26B A4B 10.0 10.0 100.0% 0 29.76s 25 5,075
指示追従 スコア 一貫性 試行ごとの合格率 不安定なテスト 正解テスト 応答時間(平均) 出力トークン 推論トークン
Claude Sonnet 4.6 6.5 10.0 50.0% 0 1.96s 90 0
Gemma 4 26B A4B 10.0 10.0 100.0% 0 17.54s 887 4,470
Puzzle Solving スコア 一貫性 試行ごとの合格率 不安定なテスト 正解テスト 応答時間(平均) 出力トークン 推論トークン
Claude Sonnet 4.6 7.7 10.0 66.7% 0 2.92s 536 0
Gemma 4 26B A4B 7.9 9.6 66.7% 0 8.52s 457 3,065
ツール呼び出し スコア 一貫性 試行ごとの合格率 不安定なテスト 正解テスト 応答時間(平均) 出力トークン 推論トークン
Claude Sonnet 4.6 10.0 10.0 100.0% 0 4.11s 447 0
Gemma 4 26B A4B 10.0 10.0 100.0% 0 9.01s 450 1,256

クイック比較

比較ペアを切り替え