- 順位
- #40
- 合計出力トークン
- 29,990
- 応答時間(平均)
- 7.62s
- 合計コスト
- $1.476
Claude Opus 4.7 (medium) vs Gemini 3.5 Flash Lite (high)
平均スコアは 8.7 vs 8.8 でほぼ同等です。 Gemini 3.5 Flash Lite (high) の benchmark コストが低く、$0.540 vs $1.476 です。 Claude Opus 4.7 (medium) の方が高速で、7.62s vs 10.05s です、成功率は 83.3% vs 83.3% です。
- 順位
- #35
- 合計出力トークン
- 204,625
- 応答時間(平均)
- 10.05s
- 合計コスト
- $0.540
おすすめモデル
Gemini 3.5 Flash Lite (high)
ここでは最高スコア(8.8)で、Claude Opus 4.7 (medium) より約 2.7 倍低コストです。
詳細比較
| 指標 | Claude Opus 4.7 Claude Opus 4.7 medium | Gemini 3.5 Flash Lite Gemini 3.5 Flash Lite high |
|---|---|---|
| スコア | 8.7 | 8.8 |
| 順位 | #40 | #35 |
| 信頼性 | 10.0 | 10.0 |
| 一貫性 | 9.6 | 9.3 |
| 試行回数 | 66/66 | 66/66 |
| 正解テスト | ||
| 試行ごとの合格率 | 83.3% | 83.3% |
| 不安定なテスト | 1 | 2 |
| 総実行回数 | 66 | 66 |
| 結果あたりのコスト | 8.200 | 3.174 |
| 合計コスト | $1.476 | $0.540 |
| 入力価格 | $5.000 / 1M | $0.300 / 1M |
| 出力価格 | $25.000 / 1M | $2.500 / 1M |
| 合計入力トークン | 145,249 | 93,046 |
| 出力トークン | 24,948 | 5,884 |
| 推論トークン | 5,042 | 198,741 |
| 応答時間(平均) | 7.62s | 10.05s |
| 応答時間(最大) | 65.40s | 36.22s |
| 応答時間(合計) | 159.94s | 221.06s |
| パラメータ | ~5T 総数 (~500B アクティブ) | ~150B 総数 (~10B アクティブ) |
| 公開状況 | クローズド | クローズド |
モデル生成ショーケース
Hamster playing table tennis
Prompt: Create a detailed SVG illustration of a hamster playing table tennis.
#40 Claude Opus 4.7
medium- コスト
- $0.059
- 時間
- 26.8s
- トークン
- 2,475 tok
#35 Gemini 3.5 Flash Lite
high- コスト
- $0.025
- 時間
- 36.8s
- トークン
- 9,964 tok
スコア上位モデル
スコア vs 総コスト
応答時間(平均)
スコア vs 応答時間(平均)
合計出力トークン
スコア vs 合計出力トークン
カテゴリ内訳
| 反AIトリック | スコア | 一貫性 | 試行ごとの合格率 | 不安定なテスト | 正解テスト | 応答時間(平均) | 入力トークン | 出力トークン | 推論トークン |
|---|---|---|---|---|---|---|---|---|---|
| Claude Opus 4.7 | 8.3 | 10.0 | 75.0% | 0 | 1.85s | 894 | 348 | 0 | |
| Gemini 3.5 Flash Lite | 10.0 | 10.0 | 100.0% | 0 | 2.96s | 498 | 142 | 7,917 |
| コーディング | スコア | 一貫性 | 試行ごとの合格率 | 不安定なテスト | 正解テスト | 応答時間(平均) | 入力トークン | 出力トークン | 推論トークン |
|---|---|---|---|---|---|---|---|---|---|
| Claude Opus 4.7 | 7.6 | 7.2 | 77.8% | 1 | 12.96s | 10,635 | 7,629 | 1,114 | |
| Gemini 3.5 Flash Lite | 8.4 | 7.4 | 88.9% | 1 | 16.58s | 8,130 | 434 | 57,369 |
| 複合 | スコア | 一貫性 | 試行ごとの合格率 | 不安定なテスト | 正解テスト | 応答時間(平均) | 入力トークン | 出力トークン | 推論トークン |
|---|---|---|---|---|---|---|---|---|---|
| Claude Opus 4.7 | 10.0 | 10.0 | 100.0% | 0 | 43.42s | 104,347 | 15,459 | 3,928 | |
| Gemini 3.5 Flash Lite | 9.9 | 10.0 | 100.0% | 0 | 27.90s | 68,427 | 4,360 | 52,993 |
| データ解析と抽出 | スコア | 一貫性 | 試行ごとの合格率 | 不安定なテスト | 正解テスト | 応答時間(平均) | 入力トークン | 出力トークン | 推論トークン |
|---|---|---|---|---|---|---|---|---|---|
| Claude Opus 4.7 | 10.0 | 10.0 | 100.0% | 0 | 2.37s | 10,533 | 324 | 0 | |
| Gemini 3.5 Flash Lite | 10.0 | 10.0 | 100.0% | 0 | 3.17s | 7,362 | 279 | 5,636 |
| ドメイン特化 | スコア | 一貫性 | 試行ごとの合格率 | 不安定なテスト | 正解テスト | 応答時間(平均) | 入力トークン | 出力トークン | 推論トークン |
|---|---|---|---|---|---|---|---|---|---|
| Claude Opus 4.7 | 7.7 | 10.0 | 66.7% | 0 | 1.19s | 627 | 51 | 0 | |
| Gemini 3.5 Flash Lite | 3.6 | 7.2 | 22.2% | 1 | 23.14s | 656 | 17 | 54,566 |
| 汎用知能 | スコア | 一貫性 | 試行ごとの合格率 | 不安定なテスト | 正解テスト | 応答時間(平均) | 入力トークン | 出力トークン | 推論トークン |
|---|---|---|---|---|---|---|---|---|---|
| Claude Opus 4.7 | 10.0 | 10.0 | 100.0% | 0 | 2.87s | 723 | 256 | 0 | |
| Gemini 3.5 Flash Lite | 10.0 | 10.0 | 100.0% | 0 | 3.10s | 488 | 81 | 2,124 |
| 指示追従 | スコア | 一貫性 | 試行ごとの合格率 | 不安定なテスト | 正解テスト | 応答時間(平均) | 入力トークン | 出力トークン | 推論トークン |
|---|---|---|---|---|---|---|---|---|---|
| Claude Opus 4.7 | 10.0 | 10.0 | 100.0% | 0 | 1.57s | 939 | 114 | 0 | |
| Gemini 3.5 Flash Lite | 9.8 | 10.0 | 100.0% | 0 | 2.16s | 625 | 69 | 3,513 |
| パズル解決 | スコア | 一貫性 | 試行ごとの合格率 | 不安定なテスト | 正解テスト | 応答時間(平均) | 入力トークン | 出力トークン | 推論トークン |
|---|---|---|---|---|---|---|---|---|---|
| Claude Opus 4.7 | 10.0 | 10.0 | 100.0% | 0 | 2.43s | 939 | 370 | 0 | |
| Gemini 3.5 Flash Lite | 10.0 | 10.0 | 100.0% | 0 | 2.09s | 572 | 183 | 4,004 |
| ツール呼び出し | スコア | 一貫性 | 試行ごとの合格率 | 不安定なテスト | 正解テスト | 応答時間(平均) | 入力トークン | 出力トークン | 推論トークン |
|---|---|---|---|---|---|---|---|---|---|
| Claude Opus 4.7 | 10.0 | 10.0 | 100.0% | 0 | 4.17s | 15,339 | 373 | 0 | |
| Gemini 3.5 Flash Lite | 10.0 | 10.0 | 100.0% | 0 | 4.55s | 6,132 | 310 | 2,955 |
| 雑学 | スコア | 一貫性 | 試行ごとの合格率 | 不安定なテスト | 正解テスト | 応答時間(平均) | 入力トークン | 出力トークン | 推論トークン |
|---|---|---|---|---|---|---|---|---|---|
| Claude Opus 4.7 | 3.0 | 10.0 | 0.0% | 0 | 2.25s | 273 | 24 | 0 | |
| Gemini 3.5 Flash Lite | 3.0 | 10.0 | 0.0% | 0 | 9.68s | 156 | 9 | 7,664 |
クイック比較
比較ペアを切り替え
Claude Opus 4.8mediumvsGemini 3.5 Flash LitehighClaude Opus 4.7mediumvsGLM 5.3 FlashmaxGemini 3.5 Flash LitehighvsMuse Spark 1.3mediumClaude Opus 4.7mediumvsGemini 3.6 FlashlowClaude Opus 5lowvsGemini 3.5 Flash LitehighGemini 3.5 Flash LitehighvsGLM 5.3 FlashmaxClaude Opus 4.7mediumvsMuse Spark 1.2highClaude Opus 4.7mediumvsGemini 3.5 FlashlowGemini 3.5 Flash LitehighvsMuse Spark 1.2mediumGemini 3.5 Flash LitehighvsMuse Spark 1.1mediumClaude Fable 5mediumvsGemini 3.5 Flash LitehighClaude Opus 4.7mediumvsQwen3.8 Maxlow