- 順位
- #277
- 合計出力トークン
- 11,832
- 応答時間(平均)
- 22.65s
- 合計コスト
- $0.786
Ember-1 vs Laguna XS 2.1
Ember-1 が平均スコアでリードし、5.4 vs 5.3 です。 Laguna XS 2.1 の benchmark コストが低く、$0.019 vs $0.786 です。 Laguna XS 2.1 の方が高速で、4.56s vs 22.65s です、成功率は 43.5% vs 29.0% です。
比較対象モデル
- 順位
- #283
- 合計出力トークン
- 23,173
- 応答時間(平均)
- 4.56s
- 合計コスト
- $0.019
おすすめモデル
Laguna XS 2.1
スコアはここでの最高値に近く(5.3 vs 5.4)、Ember-1 より約 41.4 倍低コストです。
詳細比較
| 指標 | Ember-1 Ember-1 none | Laguna XS 2.1 Laguna XS 2.1 none 無料で利用可能 |
|---|---|---|
| スコア | 5.4 | 5.3 |
| 順位 | #277 | #283 |
| 信頼性 | 8.8 | 10.0 |
| 一貫性 | 8.6 | 9.1 |
| 試行回数 | 69/69 | 69/69 |
| 正解テスト | ||
| 試行ごとの合格率 | 43.5% | 29.0% |
| 不安定なテスト | 4 | 3 |
| 総実行回数 | 69 | 69 |
| 結果あたりのコスト | 9.817 | 0.380 |
| 合計コスト | $0.786 | $0.019 |
| 入力価格 | $3.000 / 1M | $0.060 / 1M |
| 出力価格 | $15.000 / 1M | $0.120 / 1M |
| 合計入力トークン | 202,617 | 270,072 |
| 出力トークン | 11,832 | 23,173 |
| 推論トークン | 0 | 0 |
| 応答時間(平均) | 22.65s | 4.56s |
| 応答時間(最大) | 93.12s | 70.79s |
| 応答時間(合計) | 520.91s | 104.80s |
| パラメータ | ~2.8T 総数 (~104B アクティブ) | 33B 総数 (3B アクティブ) |
| 公開状況 | クローズド | 重み公開 |
モデル生成ショーケース
Hamster playing table tennis
Prompt: Create a detailed SVG illustration of a hamster playing table tennis.
#277 Ember-1
none- コスト
- $0.156
- 時間
- 224.6s
- トークン
- 10,555 tok
#283 Laguna XS 2.1
none- コスト
- $0.001
- 時間
- 27.6s
- トークン
- 4,344 tok
スコア上位モデル
スコア vs 総コスト
応答時間(平均)
スコア vs 応答時間(平均)
合計出力トークン
スコア vs 合計出力トークン
カテゴリ内訳
| エージェントタスク | スコア | 一貫性 | 試行ごとの合格率 | 不安定なテスト | 正解テスト | 応答時間(平均) | 入力トークン | 出力トークン | 推論トークン |
|---|---|---|---|---|---|---|---|---|---|
| Ember-1 | 6.1 | 3.1 | 66.7% | 1 | 92.87s | 175,191 | 9,168 | 0 | |
| Laguna XS 2.1 | 5.0 | 10.0 | 0.0% | 0 | 70.79s | 178,465 | 9,796 | 0 |
| 反AIトリック | スコア | 一貫性 | 試行ごとの合格率 | 不安定なテスト | 正解テスト | 応答時間(平均) | 入力トークン | 出力トークン | 推論トークン |
|---|---|---|---|---|---|---|---|---|---|
| Ember-1 | 5.2 | 7.9 | 41.7% | 1 | 22.37s | 796 | 867 | 0 | |
| Laguna XS 2.1 | 5.3 | 8.3 | 33.3% | 1 | 755ms | 774 | 1,015 | 0 |
| コーディング | スコア | 一貫性 | 試行ごとの合格率 | 不安定なテスト | 正解テスト | 応答時間(平均) | 入力トークン | 出力トークン | 推論トークン |
|---|---|---|---|---|---|---|---|---|---|
| Ember-1 | 5.5 | 10.0 | 33.3% | 0 | 1.94s | 7,485 | 393 | 0 | |
| Laguna XS 2.1 | 4.3 | 7.8 | 22.2% | 1 | 623ms | 7,995 | 562 | 0 |
| 複合 | スコア | 一貫性 | 試行ごとの合格率 | 不安定なテスト | 正解テスト | 応答時間(平均) | 入力トークン | 出力トークン | 推論トークン |
|---|---|---|---|---|---|---|---|---|---|
| Ember-1 | 3.0 | 10.0 | 0.0% | 0 | 49.01s | 12,162 | 327 | 0 | |
| Laguna XS 2.1 | 3.0 | 10.0 | 0.0% | 0 | 10.39s | 64,647 | 10,328 | 0 |
| データ解析と抽出 | スコア | 一貫性 | 試行ごとの合格率 | 不安定なテスト | 正解テスト | 応答時間(平均) | 入力トークン | 出力トークン | 推論トークン |
|---|---|---|---|---|---|---|---|---|---|
| Ember-1 | 6.4 | 5.9 | 66.7% | 1 | 35.25s | 4,017 | 161 | 0 | |
| Laguna XS 2.1 | 10.0 | 10.0 | 100.0% | 0 | 768ms | 7,734 | 240 | 0 |
| ドメイン特化 | スコア | 一貫性 | 試行ごとの合格率 | 不安定なテスト | 正解テスト | 応答時間(平均) | 入力トークン | 出力トークン | 推論トークン |
|---|---|---|---|---|---|---|---|---|---|
| Ember-1 | 5.3 | 10.0 | 33.3% | 0 | 21.61s | 804 | 68 | 0 | |
| Laguna XS 2.1 | 5.3 | 10.0 | 33.3% | 0 | 303ms | 843 | 14 | 0 |
| 汎用知能 | スコア | 一貫性 | 試行ごとの合格率 | 不安定なテスト | 正解テスト | 応答時間(平均) | 入力トークン | 出力トークン | 推論トークン |
|---|---|---|---|---|---|---|---|---|---|
| Ember-1 | 5.0 | 10.0 | 0.0% | 0 | 2.28s | 540 | 160 | 0 | |
| Laguna XS 2.1 | 5.0 | 10.0 | 0.0% | 0 | 529ms | 537 | 128 | 0 |
| 指示追従 | スコア | 一貫性 | 試行ごとの合格率 | 不安定なテスト | 正解テスト | 応答時間(平均) | 入力トークン | 出力トークン | 推論トークン |
|---|---|---|---|---|---|---|---|---|---|
| Ember-1 | 6.4 | 5.8 | 66.7% | 1 | 31.00s | 509 | 81 | 0 | |
| Laguna XS 2.1 | 3.8 | 5.8 | 33.3% | 1 | 364ms | 638 | 50 | 0 |
| パズル解決 | スコア | 一貫性 | 試行ごとの合格率 | 不安定なテスト | 正解テスト | 応答時間(平均) | 入力トークン | 出力トークン | 推論トークン |
|---|---|---|---|---|---|---|---|---|---|
| Ember-1 | 10.0 | 10.0 | 100.0% | 0 | 2.54s | 840 | 569 | 0 | |
| Laguna XS 2.1 | 3.0 | 10.0 | 0.0% | 0 | 1.01s | 771 | 730 | 0 |
| ツール呼び出し | スコア | 一貫性 | 試行ごとの合格率 | 不安定なテスト | 正解テスト | 応答時間(平均) | 入力トークン | 出力トークン | 推論トークン |
|---|---|---|---|---|---|---|---|---|---|
| Ember-1 | 3.0 | 10.0 | 0.0% | 0 | 26.44s | 0 | 0 | 0 | |
| Laguna XS 2.1 | 10.0 | 10.0 | 100.0% | 0 | 1.36s | 7,413 | 300 | 0 |
| 雑学 | スコア | 一貫性 | 試行ごとの合格率 | 不安定なテスト | 正解テスト | 応答時間(平均) | 入力トークン | 出力トークン | 推論トークン |
|---|---|---|---|---|---|---|---|---|---|
| Ember-1 | 3.0 | 10.0 | 0.0% | 0 | 1.05s | 273 | 38 | 0 | |
| Laguna XS 2.1 | 3.0 | 10.0 | 0.0% | 0 | 254ms | 255 | 10 | 0 |
クイック比較
比較ペアを切り替え
Ember-1nonevsStep 3.5 FlashmediumEmber-1nonevsHy4 previewlowNorth Mini Codemedium無料で利用可能vsEmber-1noneEmber-1nonevsGranite 4.2 8BlowGranite 4.2 8BlowvsLaguna XS 2.1none無料で利用可能Laguna XS 2.1none無料で利用可能vsInkling Smalllow無料で利用可能Nemotron 3.5 Lightninghigh無料で利用可能vsLaguna XS 2.1none無料で利用可能Laguna XS 2.1none無料で利用可能vsStep 3.5 FlashmediumKAT Coder AIR V2.5highvsLaguna XS 2.1none無料で利用可能Laguna XS 2.1none無料で利用可能vsHy4 previewlowNorth Mini Codemedium無料で利用可能vsLaguna XS 2.1none無料で利用可能Mistral Small 4mediumvsLaguna XS 2.1none無料で利用可能