- 順位
- #162
- 合計出力トークン
- 128,787
- 応答時間(平均)
- 68.43s
- 合計コスト
- $0.081
DeepSeek V3.2 (medium) vs Ember-1 (high)
平均スコアは 7.0 vs 7.1 でほぼ同等です。 DeepSeek V3.2 (medium) の benchmark コストが低く、$0.081 vs $1.798 です。 Ember-1 (high) の方が高速で、56.77s vs 68.43s です、成功率は 65.2% vs 71.2% です。
比較対象モデル
- 順位
- #158
- 合計出力トークン
- 110,125
- 応答時間(平均)
- 56.77s
- 合計コスト
- $1.798
おすすめモデル
DeepSeek V3.2 (medium)
ここでは最高スコア(7.0)で、Ember-1 (high) より約 22.3 倍低コストです。
詳細比較
| 指標 | DeepSeek V3.2 DeepSeek V3.2 medium | Ember-1 Ember-1 high |
|---|---|---|
| スコア | 7.0 | 7.1 |
| 順位 | #162 | #158 |
| 信頼性 | 10.0 | 8.0 |
| 一貫性 | 7.4 | 7.3 |
| 試行回数 | 66/66 | 66/66 |
| 正解テスト | ||
| 試行ごとの合格率 | 65.2% | 71.2% |
| 不安定なテスト | 7 | 7 |
| 総実行回数 | 66 | 66 |
| 結果あたりのコスト | 0.672 | 14.981 |
| 合計コスト | $0.081 | $1.798 |
| 入力価格 | $0.280 / 1M | $3.000 / 1M |
| 出力価格 | $0.420 / 1M | $15.000 / 1M |
| 合計入力トークン | 101,056 | 48,577 |
| 出力トークン | 11,832 | 7,345 |
| 推論トークン | 116,955 | 102,780 |
| 応答時間(平均) | 68.43s | 56.77s |
| 応答時間(最大) | 376.10s | 255.06s |
| 応答時間(合計) | 1505.53s | 1248.88s |
| パラメータ | 671B 総数 (37B アクティブ) | ~2.8T 総数 (~104B アクティブ) |
| 公開状況 | オープンソース | クローズド |
モデル生成ショーケース
Hamster playing table tennis
Prompt: Create a detailed SVG illustration of a hamster playing table tennis.
#162 DeepSeek V3.2
medium- コスト
- $0.001
- 時間
- 53.6s
- トークン
- 1,932 tok
#158 Ember-1
high- コスト
- $0.038
- 時間
- 55.1s
- トークン
- 2,671 tok
スコア上位モデル
スコア vs 総コスト
応答時間(平均)
スコア vs 応答時間(平均)
合計出力トークン
スコア vs 合計出力トークン
カテゴリ内訳
| 反AIトリック | スコア | 一貫性 | 試行ごとの合格率 | 不安定なテスト | 正解テスト | 応答時間(平均) | 入力トークン | 出力トークン | 推論トークン |
|---|---|---|---|---|---|---|---|---|---|
| DeepSeek V3.2 | 8.2 | 7.9 | 83.3% | 1 | 24.23s | 448 | 3,247 | 6,953 | |
| Ember-1 | 8.7 | 7.9 | 91.7% | 1 | 24.05s | 1,544 | 886 | 992 |
| コーディング | スコア | 一貫性 | 試行ごとの合格率 | 不安定なテスト | 正解テスト | 応答時間(平均) | 入力トークン | 出力トークン | 推論トークン |
|---|---|---|---|---|---|---|---|---|---|
| DeepSeek V3.2 | 6.0 | 7.2 | 55.6% | 1 | 248.68s | 5,717 | 649 | 52,014 | |
| Ember-1 | 8.2 | 7.2 | 88.9% | 1 | 72.23s | 7,144 | 1,281 | 23,093 |
| 複合 | スコア | 一貫性 | 試行ごとの合格率 | 不安定なテスト | 正解テスト | 応答時間(平均) | 入力トークン | 出力トークン | 推論トークン |
|---|---|---|---|---|---|---|---|---|---|
| DeepSeek V3.2 | 7.3 | 5.8 | 83.3% | 1 | 79.92s | 76,997 | 5,219 | 24,229 | |
| Ember-1 | 6.4 | 5.8 | 66.7% | 1 | 79.89s | 28,994 | 1,667 | 6,614 |
| データ解析と抽出 | スコア | 一貫性 | 試行ごとの合格率 | 不安定なテスト | 正解テスト | 応答時間(平均) | 入力トークン | 出力トークン | 推論トークン |
|---|---|---|---|---|---|---|---|---|---|
| DeepSeek V3.2 | 10.0 | 10.0 | 100.0% | 0 | 36.09s | 7,388 | 207 | 7,693 | |
| Ember-1 | 7.3 | 5.9 | 83.3% | 1 | 36.10s | 6,076 | 230 | 1,228 |
| ドメイン特化 | スコア | 一貫性 | 試行ごとの合格率 | 不安定なテスト | 正解テスト | 応答時間(平均) | 入力トークン | 出力トークン | 推論トークン |
|---|---|---|---|---|---|---|---|---|---|
| DeepSeek V3.2 | 2.9 | 4.4 | 22.2% | 2 | 22.94s | 481 | 19 | 6,779 | |
| Ember-1 | 2.9 | 4.4 | 22.2% | 2 | 175.49s | 1,154 | 1,023 | 61,582 |
| 汎用知能 | スコア | 一貫性 | 試行ごとの合格率 | 不安定なテスト | 正解テスト | 応答時間(平均) | 入力トークン | 出力トークン | 推論トークン |
|---|---|---|---|---|---|---|---|---|---|
| DeepSeek V3.2 | 3.4 | 2.5 | 33.3% | 1 | 58.29s | 314 | 49 | 2,189 | |
| Ember-1 | 10.0 | 10.0 | 100.0% | 0 | 4.49s | 744 | 194 | 304 |
| 指示追従 | スコア | 一貫性 | 試行ごとの合格率 | 不安定なテスト | 正解テスト | 応答時間(平均) | 入力トークン | 出力トークン | 推論トークン |
|---|---|---|---|---|---|---|---|---|---|
| DeepSeek V3.2 | 10.0 | 10.0 | 100.0% | 0 | 35.78s | 627 | 1,397 | 2,845 | |
| Ember-1 | 7.1 | 5.8 | 83.3% | 1 | 33.38s | 992 | 162 | 784 |
| パズル解決 | スコア | 一貫性 | 試行ごとの合格率 | 不安定なテスト | 正解テスト | 応答時間(平均) | 入力トークン | 出力トークン | 推論トークン |
|---|---|---|---|---|---|---|---|---|---|
| DeepSeek V3.2 | 7.0 | 7.2 | 55.6% | 1 | 37.69s | 594 | 518 | 6,375 | |
| Ember-1 | 10.0 | 10.0 | 100.0% | 0 | 4.84s | 1,452 | 390 | 848 |
| ツール呼び出し | スコア | 一貫性 | 試行ごとの合格率 | 不安定なテスト | 正解テスト | 応答時間(平均) | 入力トークン | 出力トークン | 推論トークン |
|---|---|---|---|---|---|---|---|---|---|
| DeepSeek V3.2 | 10.0 | 10.0 | 100.0% | 0 | 34.81s | 8,307 | 507 | 859 | |
| Ember-1 | 3.0 | 10.0 | 0.0% | 0 | 26.45s | 0 | 0 | 0 |
| 雑学 | スコア | 一貫性 | 試行ごとの合格率 | 不安定なテスト | 正解テスト | 応答時間(平均) | 入力トークン | 出力トークン | 推論トークン |
|---|---|---|---|---|---|---|---|---|---|
| DeepSeek V3.2 | 3.0 | 10.0 | 0.0% | 0 | 83.99s | 183 | 20 | 7,019 | |
| Ember-1 | 3.0 | 10.0 | 0.0% | 0 | 65.34s | 477 | 1,512 | 7,335 |
クイック比較
比較ペアを切り替え
DeepSeek V3.2mediumvsSpace Bunny AlphahighEmber-1highvsGrok 4.3mediumDeepSeek V3.2mediumvsGPT-6 LunalowEmber-1highvsGPT-5.6 SolnoneDeepSeek V3.2mediumvsGPT-5.6 SolnoneEmber-1highvsGPT-6 LunalowDeepSeek V3.2mediumvsGPT-5.5noneEmber-1highvsGLM 5.1mediumDeepSeek V3.2mediumvsMercury 2.5highEmber-1highvsGPT-5.5noneEmber-1highvsMercury 2mediumEmber-1highvsGrok 4.20medium