#121 Mistral Small 4
medium- Cost
- $0.006
- Time
- 47.9s
- Tokens
- 9,857 tok
概要
Mistral Small 4 は AI BENCHY で 5.4 を記録し、順位は #121 です。信頼性は 10.0、成功率は 45.0%、総コストは $0.056、平均応答時間は 8.33s です。
Mistral Small 4 の特徴: 最も目立つのは 反AIトリック で、順位は #2 です。一方、最も弱い領域は データ解析と抽出 で #9 です。 推論トークンの使用量がかなり多く、遅さやコストの高さにつながっている可能性があります。
入力価格
$0.150 / 1M
出力価格
$0.600 / 1M
不安定なテスト
7
不安定なテストは、実行間で結果が混在しています(少なくとも1回合格かつ1回失敗)。
Generation showcase
Prompt: Create a detailed SVG illustration of a hamster playing table tennis.
実行履歴
| テスト日時 | スコア | 信頼性 | 正解テスト | 合計コスト | 比較する |
|---|---|---|---|---|---|
| 2026-06-04 13:43 新しいテストを追加 | 5.3 | 10.0 | $0.068 | 比較する | |
| 2026-05-22 00:16 スイート変更 | 5.4 | 10.0 | $0.056 | 現在の実行 | |
| 2026-04-11 01:44 最初に記録された実行 | 5.7 | 該当なし | $0.034 | 比較する |
この実行では別のベンチマークスイートが使われました。履歴の変化を読むときはスイート変更も考慮してください。
実行比較
| 実行 | スコア | 一貫性 | 信頼性 | 正解テスト | 不安定なテスト | 合計出力トークン | 合計入力トークン | 合計コスト | 応答時間(平均) |
|---|---|---|---|---|---|---|---|---|---|
| 2026-05-22 00:16 · スイート変更 | 5.4 | 7.1 | 10.0 | 5/20 | 7 | 89,683 | 0 | $0.056 | 8.33s |
| 2026-06-04 13:43 · 新しいテストを追加 | 5.3 | 6.9 | 10.0 | 5/21 | 8 | 108,862 | 42,576 | $0.068 | 9.40s |
| 差分 | +0.1 | +0.2 | 0.0 | 0 | -1 | -19179 | -42576 | -$0.012 | -1070ms |
この 2 つの実行では異なるベンチマークスイートが使われているため、差分にはモデル変化とスイート変化の両方が含まれます。
最初のモデルを選択し、次に2つ目のモデルをクリックして並列比較ページを開きます。