- 順位
- #4
- 合計出力トークン
- 53,622
- 応答時間(平均)
- 18.65s
- 合計コスト
- $3.474
比較対象モデル
GPT-6 Astra (high) vs Gemini 3.8 Flash (high) vs Claude Fable 5.1 (high) ベンチマーク比較: Gemini 3.8 Flash (high) は スコア で 9.9 と首位です。 Gemini 3.8 Flash (high) は 信頼性 で 10.0 と首位です。 Gemini 3.8 Flash (high) は 合計コスト が最も低く、$1.595 です。 Claude Fable 5.1 (high) は 13.59s で最速です。
- 順位
- #2
- 合計出力トークン
- 408,188
- 応答時間(平均)
- 37.19s
- 合計コスト
- $1.595
- 順位
- #25
- 合計出力トークン
- 40,071
- 応答時間(平均)
- 13.59s
- 合計コスト
- $3.364
おすすめモデル
Gemini 3.8 Flash (high)
ここでは最高スコア(9.9)で、この比較の他のモデル より約 2.1 倍低コストです。
詳細比較
| 指標 | GPT-6 Astra GPT-6 Astra high | Gemini 3.8 Flash Gemini 3.8 Flash high | Claude Fable 5.1 Claude Fable 5.1 high |
|---|---|---|---|
| スコア | 9.9 | 9.9 | 9.0 |
| 順位 | #4 | #2 | #25 |
| 信頼性 | 9.9 | 10.0 | 10.0 |
| 一貫性 | 9.6 | 9.6 | 9.6 |
| 試行回数 | 66/66 | 66/66 | 66/66 |
| 正解テスト | |||
| 試行ごとの合格率 | 97.0% | 98.5% | 89.4% |
| 不安定なテスト | 1 | 1 | 1 |
| 総実行回数 | 66 | 66 | 66 |
| 結果あたりのコスト | 16.543 | 7.592 | 17.701 |
| 合計コスト | $3.474 | $1.595 | $3.364 |
| 入力価格 | $10.000 / 1M | $0.750 / 1M | $10.000 / 1M |
| 出力価格 | $50.000 / 1M | $3.750 / 1M | $50.000 / 1M |
| 合計入力トークン | 79,290 | 84,593 | 135,958 |
| 出力トークン | 4,847 | 10,517 | 7,930 |
| 推論トークン | 48,775 | 397,671 | 32,141 |
| 応答時間(平均) | 18.65s | 37.19s | 13.59s |
| 応答時間(最大) | 254.93s | 177.08s | 40.17s |
| 応答時間(合計) | 410.28s | 818.19s | 298.90s |
| パラメータ | ~2T 総数 (~150B アクティブ) | ~500B 総数 (~20B アクティブ) | ~9.5T 総数 (~878B アクティブ) |
| 公開状況 | クローズド | クローズド | クローズド |
モデル生成ショーケース
Hamster playing table tennis
Prompt: Create a detailed SVG illustration of a hamster playing table tennis.
#4 GPT-6 Astra
high- コスト
- $0.457
- 時間
- 176.7s
- トークン
- 9,218 tok
#2 Gemini 3.8 Flash
high- コスト
- $0.077
- 時間
- 129.1s
- トークン
- 20,373 tok
#25 Claude Fable 5.1
high- コスト
- $0.384
- 時間
- 102.5s
- トークン
- 7,824 tok
スコア上位モデル
スコア vs 総コスト
応答時間(平均)
スコア vs 応答時間(平均)
合計出力トークン
スコア vs 合計出力トークン
カテゴリ内訳
| 反AIトリック | スコア | 一貫性 | 試行ごとの合格率 | 不安定なテスト | 正解テスト | 応答時間(平均) | 入力トークン | 出力トークン | 推論トークン |
|---|---|---|---|---|---|---|---|---|---|
| GPT-6 Astra | 10.0 | 10.0 | 100.0% | 0 | 3.25s | 606 | 166 | 605 | |
| Gemini 3.8 Flash | 10.0 | 10.0 | 100.0% | 0 | 2.92s | 492 | 172 | 4,363 | |
| Claude Fable 5.1 | 10.0 | 10.0 | 100.0% | 0 | 5.90s | 858 | 287 | 790 |
| コーディング | スコア | 一貫性 | 試行ごとの合格率 | 不安定なテスト | 正解テスト | 応答時間(平均) | 入力トークン | 出力トークン | 推論トークン |
|---|---|---|---|---|---|---|---|---|---|
| GPT-6 Astra | 10.0 | 10.0 | 100.0% | 0 | 5.86s | 7,302 | 392 | 2,387 | |
| Gemini 3.8 Flash | 10.0 | 10.0 | 100.0% | 0 | 29.30s | 8,118 | 462 | 50,196 | |
| Claude Fable 5.1 | 8.4 | 7.4 | 88.9% | 1 | 13.91s | 10,608 | 520 | 6,503 |
| 複合 | スコア | 一貫性 | 試行ごとの合格率 | 不安定なテスト | 正解テスト | 応答時間(平均) | 入力トークン | 出力トークン | 推論トークン |
|---|---|---|---|---|---|---|---|---|---|
| GPT-6 Astra | 10.0 | 10.0 | 100.0% | 0 | 24.38s | 56,082 | 3,273 | 3,995 | |
| Gemini 3.8 Flash | 10.0 | 10.0 | 100.0% | 0 | 115.73s | 60,514 | 4,032 | 132,696 | |
| Claude Fable 5.1 | 10.0 | 10.0 | 100.0% | 0 | 34.59s | 98,419 | 5,484 | 5,373 |
| データ解析と抽出 | スコア | 一貫性 | 試行ごとの合格率 | 不安定なテスト | 正解テスト | 応答時間(平均) | 入力トークン | 出力トークン | 推論トークン |
|---|---|---|---|---|---|---|---|---|---|
| GPT-6 Astra | 10.0 | 10.0 | 100.0% | 0 | 2.32s | 7,140 | 234 | 174 | |
| Gemini 3.8 Flash | 10.0 | 10.0 | 100.0% | 0 | 8.23s | 7,548 | 279 | 7,902 | |
| Claude Fable 5.1 | 10.0 | 10.0 | 100.0% | 0 | 6.30s | 10,515 | 312 | 403 |
| ドメイン特化 | スコア | 一貫性 | 試行ごとの合格率 | 不安定なテスト | 正解テスト | 応答時間(平均) | 入力トークン | 出力トークン | 推論トークン |
|---|---|---|---|---|---|---|---|---|---|
| GPT-6 Astra | 7.6 | 7.2 | 77.8% | 1 | 95.10s | 732 | 68 | 38,756 | |
| Gemini 3.8 Flash | 8.2 | 7.2 | 88.9% | 1 | 131.31s | 649 | 4,972 | 167,505 | |
| Claude Fable 5.1 | 7.7 | 10.0 | 66.7% | 0 | 24.34s | 990 | 63 | 12,436 |
| 汎用知能 | スコア | 一貫性 | 試行ごとの合格率 | 不安定なテスト | 正解テスト | 応答時間(平均) | 入力トークン | 出力トークン | 推論トークン |
|---|---|---|---|---|---|---|---|---|---|
| GPT-6 Astra | 10.0 | 10.0 | 100.0% | 0 | 8.28s | 477 | 122 | 772 | |
| Gemini 3.8 Flash | 10.0 | 10.0 | 100.0% | 0 | 4.06s | 486 | 75 | 1,576 | |
| Claude Fable 5.1 | 10.0 | 10.0 | 100.0% | 0 | 5.40s | 714 | 291 | 0 |
| 指示追従 | スコア | 一貫性 | 試行ごとの合格率 | 不安定なテスト | 正解テスト | 応答時間(平均) | 入力トークン | 出力トークン | 推論トークン |
|---|---|---|---|---|---|---|---|---|---|
| GPT-6 Astra | 10.0 | 10.0 | 100.0% | 0 | 3.58s | 660 | 93 | 462 | |
| Gemini 3.8 Flash | 10.0 | 10.0 | 100.0% | 0 | 4.73s | 615 | 72 | 4,241 | |
| Claude Fable 5.1 | 10.0 | 10.0 | 100.0% | 0 | 5.60s | 921 | 97 | 263 |
| パズル解決 | スコア | 一貫性 | 試行ごとの合格率 | 不安定なテスト | 正解テスト | 応答時間(平均) | 入力トークン | 出力トークン | 推論トークン |
|---|---|---|---|---|---|---|---|---|---|
| GPT-6 Astra | 10.0 | 10.0 | 100.0% | 0 | 3.60s | 642 | 211 | 601 | |
| Gemini 3.8 Flash | 10.0 | 10.0 | 100.0% | 0 | 3.44s | 558 | 204 | 3,704 | |
| Claude Fable 5.1 | 10.0 | 10.0 | 100.0% | 0 | 6.11s | 912 | 506 | 558 |
| ツール呼び出し | スコア | 一貫性 | 試行ごとの合格率 | 不安定なテスト | 正解テスト | 応答時間(平均) | 入力トークン | 出力トークン | 推論トークン |
|---|---|---|---|---|---|---|---|---|---|
| GPT-6 Astra | 10.0 | 10.0 | 100.0% | 0 | 8.92s | 5,454 | 258 | 433 | |
| Gemini 3.8 Flash | 10.0 | 10.0 | 100.0% | 0 | 42.65s | 5,457 | 238 | 20,359 | |
| Claude Fable 5.1 | 10.0 | 10.0 | 100.0% | 0 | 13.30s | 11,757 | 354 | 118 |
| 雑学 | スコア | 一貫性 | 試行ごとの合格率 | 不安定なテスト | 正解テスト | 応答時間(平均) | 入力トークン | 出力トークン | 推論トークン |
|---|---|---|---|---|---|---|---|---|---|
| GPT-6 Astra | 10.0 | 10.0 | 100.0% | 0 | 5.83s | 195 | 30 | 590 | |
| Gemini 3.8 Flash | 10.0 | 10.0 | 100.0% | 0 | 10.30s | 156 | 11 | 5,129 | |
| Claude Fable 5.1 | 3.0 | 10.0 | 0.0% | 0 | 30.58s | 264 | 16 | 5,697 |
クイック比較
比較ペアを切り替え
Claude Fable 5.1highvsGemini 3.5 FlashmediumClaude Fable 5.1highvsGPT-5.5mediumClaude Fable 5.1highvsQwen3.8 MaxmediumGemini 3.8 FlashhighvsGPT-6 AstramaxClaude Fable 5.1highvsQwen3.7 MaxmediumGemini 3.8 FlashhighvsGPT-6 AstraxhighClaude Fable 5.1highvsSeed 2.1 TurbolowClaude Fable 5.1highvsGPT-5.3-CodexmediumGemini 3.6 FlashmediumvsGPT-6 AstrahighClaude Fable 5.1highvsGemini 3.8 FlashmediumClaude Fable 5.1highvsGemini 3.7 FlashlowClaude Fable 5.1highvsGemini 3.5 Flashlow