- 順位
- #12
- 合計出力トークン
- 205,482
- 応答時間(平均)
- 15.46s
- 合計コスト
- $2.011
Gemini 3.5 Flash (high) vs GPT-6 Sol (medium)
平均スコアは 9.4 vs 9.4 でほぼ同等です。 GPT-6 Sol (medium) の benchmark コストが低く、$0.448 vs $2.011 です。 GPT-6 Sol (medium) の方が高速で、10.33s vs 15.46s です、成功率は 89.4% vs 93.9% です。
比較対象モデル
- 順位
- #14
- 合計出力トークン
- 29,115
- 応答時間(平均)
- 10.33s
- 合計コスト
- $0.448
おすすめモデル
GPT-6 Sol (medium)
ここでは最高スコア(9.4)で、Gemini 3.5 Flash (high) より約 4.5 倍低コストです。
詳細比較
| 指標 | Gemini 3.5 Flash Gemini 3.5 Flash high | GPT-6 Sol GPT-6 Sol medium |
|---|---|---|
| スコア | 9.4 | 9.4 |
| 順位 | #12 | #14 |
| 信頼性 | 10.0 | 10.0 |
| 一貫性 | 9.3 | 9.6 |
| 試行回数 | 66/66 | 66/66 |
| 正解テスト | ||
| 試行ごとの合格率 | 89.4% | 93.9% |
| 不安定なテスト | 2 | 1 |
| 総実行回数 | 66 | 66 |
| 結果あたりのコスト | 10.580 | 2.240 |
| 合計コスト | $2.011 | $0.448 |
| 入力価格 | $1.500 / 1M | $2.000 / 1M |
| 出力価格 | $9.000 / 1M | $10.000 / 1M |
| 合計入力トークン | 107,146 | 78,376 |
| 出力トークン | 8,777 | 4,309 |
| 推論トークン | 196,705 | 24,806 |
| 応答時間(平均) | 15.46s | 10.33s |
| 応答時間(最大) | 145.92s | 82.74s |
| 応答時間(合計) | 340.20s | 227.17s |
| パラメータ | ~500B 総数 (~20B アクティブ) | ~2T 総数 (~150B アクティブ) |
| 公開状況 | クローズド | クローズド |
モデル生成ショーケース
Hamster playing table tennis
Prompt: Create a detailed SVG illustration of a hamster playing table tennis.
#12 Gemini 3.5 Flash
high- コスト
- $0.208
- 時間
- 118.2s
- トークン
- 23,158 tok
#14 GPT-6 Sol
medium- コスト
- $0.035
- 時間
- 36.9s
- トークン
- 3,493 tok
スコア上位モデル
スコア vs 総コスト
応答時間(平均)
スコア vs 応答時間(平均)
合計出力トークン
スコア vs 合計出力トークン
カテゴリ内訳
| 反AIトリック | スコア | 一貫性 | 試行ごとの合格率 | 不安定なテスト | 正解テスト | 応答時間(平均) | 入力トークン | 出力トークン | 推論トークン |
|---|---|---|---|---|---|---|---|---|---|
| Gemini 3.5 Flash | 10.0 | 10.0 | 100.0% | 0 | 2.57s | 492 | 174 | 4,997 | |
| GPT-6 Sol | 10.0 | 10.0 | 100.0% | 0 | 2.70s | 606 | 142 | 564 |
| コーディング | スコア | 一貫性 | 試行ごとの合格率 | 不安定なテスト | 正解テスト | 応答時間(平均) | 入力トークン | 出力トークン | 推論トークン |
|---|---|---|---|---|---|---|---|---|---|
| Gemini 3.5 Flash | 10.0 | 10.0 | 100.0% | 0 | 22.96s | 8,118 | 456 | 47,129 | |
| GPT-6 Sol | 8.2 | 7.2 | 88.9% | 1 | 11.78s | 7,302 | 392 | 2,532 |
| 複合 | スコア | 一貫性 | 試行ごとの合格率 | 不安定なテスト | 正解テスト | 応答時間(平均) | 入力トークン | 出力トークン | 推論トークン |
|---|---|---|---|---|---|---|---|---|---|
| Gemini 3.5 Flash | 8.2 | 6.9 | 66.7% | 1 | 84.14s | 82,416 | 7,153 | 93,585 | |
| GPT-6 Sol | 10.0 | 10.0 | 100.0% | 0 | 10.78s | 55,168 | 2,825 | 1,234 |
| データ解析と抽出 | スコア | 一貫性 | 試行ごとの合格率 | 不安定なテスト | 正解テスト | 応答時間(平均) | 入力トークン | 出力トークン | 推論トークン |
|---|---|---|---|---|---|---|---|---|---|
| Gemini 3.5 Flash | 10.0 | 10.0 | 100.0% | 0 | 6.43s | 7,548 | 279 | 8,466 | |
| GPT-6 Sol | 10.0 | 10.0 | 100.0% | 0 | 7.34s | 7,140 | 234 | 162 |
| ドメイン特化 | スコア | 一貫性 | 試行ごとの合格率 | 不安定なテスト | 正解テスト | 応答時間(平均) | 入力トークン | 出力トークン | 推論トークン |
|---|---|---|---|---|---|---|---|---|---|
| Gemini 3.5 Flash | 5.3 | 7.2 | 44.4% | 1 | 16.99s | 642 | 12 | 28,526 | |
| GPT-6 Sol | 7.7 | 10.0 | 66.7% | 0 | 36.36s | 732 | 67 | 18,352 |
| 汎用知能 | スコア | 一貫性 | 試行ごとの合格率 | 不安定なテスト | 正解テスト | 応答時間(平均) | 入力トークン | 出力トークン | 推論トークン |
|---|---|---|---|---|---|---|---|---|---|
| Gemini 3.5 Flash | 10.0 | 10.0 | 100.0% | 0 | 3.63s | 486 | 115 | 1,650 | |
| GPT-6 Sol | 10.0 | 10.0 | 100.0% | 0 | 13.97s | 477 | 90 | 136 |
| 指示追従 | スコア | 一貫性 | 試行ごとの合格率 | 不安定なテスト | 正解テスト | 応答時間(平均) | 入力トークン | 出力トークン | 推論トークン |
|---|---|---|---|---|---|---|---|---|---|
| Gemini 3.5 Flash | 10.0 | 10.0 | 100.0% | 0 | 3.35s | 615 | 70 | 3,799 | |
| GPT-6 Sol | 10.0 | 10.0 | 100.0% | 0 | 2.00s | 660 | 93 | 304 |
| パズル解決 | スコア | 一貫性 | 試行ごとの合格率 | 不安定なテスト | 正解テスト | 応答時間(平均) | 入力トークン | 出力トークン | 推論トークン |
|---|---|---|---|---|---|---|---|---|---|
| Gemini 3.5 Flash | 10.0 | 10.0 | 100.0% | 0 | 3.23s | 558 | 241 | 4,940 | |
| GPT-6 Sol | 10.0 | 10.0 | 100.0% | 0 | 2.79s | 642 | 196 | 724 |
| ツール呼び出し | スコア | 一貫性 | 試行ごとの合格率 | 不安定なテスト | 正解テスト | 応答時間(平均) | 入力トークン | 出力トークン | 推論トークン |
|---|---|---|---|---|---|---|---|---|---|
| Gemini 3.5 Flash | 9.8 | 10.0 | 100.0% | 0 | 4.96s | 6,115 | 265 | 1,608 | |
| GPT-6 Sol | 10.0 | 10.0 | 100.0% | 0 | 4.77s | 5,454 | 240 | 53 |
| 雑学 | スコア | 一貫性 | 試行ごとの合格率 | 不安定なテスト | 正解テスト | 応答時間(平均) | 入力トークン | 出力トークン | 推論トークン |
|---|---|---|---|---|---|---|---|---|---|
| Gemini 3.5 Flash | 10.0 | 10.0 | 100.0% | 0 | 3.94s | 156 | 12 | 2,005 | |
| GPT-6 Sol | 10.0 | 10.0 | 100.0% | 0 | 4.61s | 195 | 30 | 745 |
クイック比較
比較ペアを切り替え
GPT-6 SolmediumvsGrok 4.6highGemini 3.5 FlashhighvsGPT-5.6 SolmediumGemini 3.5 FlashhighvsGPT-6 AstramediumGemini 3.5 FlashhighvsGPT-6 AstralowClaude Opus 5.5lowvsGPT-6 SolmediumGemini 3.5 FlashhighvsGPT-5.5lowClaude Opus 5.5highvsGPT-6 SolmediumClaude Opus 5.5lowvsGemini 3.5 FlashhighGemini 3.5 FlashhighvsGPT-5.6 SollowGemini 3.7 FlashlowvsGPT-6 SolmediumClaude Opus 5highvsGPT-6 SolmediumClaude Opus 5mediumvsGemini 3.5 Flashhigh