ナビゲーション
AI BENCHY
Advertise here

Inception: Mercury 2 vs Mistral: Mistral Small 4

Mistral Small 4 (medium) が平均スコアでリードし、5.1 vs 4.6 です。 Mercury 2 の benchmark コストが低く、$0.030 vs $0.096 です。 Mercury 2 の方が高速で、829ms vs 10.77s です、成功率は 22.7% vs 42.4% です。

おすすめモデルMercury 2スコアはここでの最高値に近く(4.6 vs 5.1)、Mistral Small 4 (medium) より約 3.3 倍低コストです。

ベンチマークは AI BENCHY テストスイートから次の日時に生成: 2026-07-18

指標 Mercury 2 Mercury 2 none リリース: 2026-02-24 Mistral Small 4 Mistral Small 4 medium リリース: 2026-03-16
スコア 4.6 5.1
順位 #185 #163
信頼性 10.0 10.0
一貫性 9.2 7.0
正解テスト
試行ごとの合格率 22.7% 42.4%
不安定なテスト 2 8
総実行回数 66 66
結果あたりのコスト 0.734 1.913
合計コスト $0.030 $0.096
入力価格 $0.250 / 1M $0.150 / 1M
出力価格 $0.750 / 1M $0.600 / 1M
合計入力トークン 88,704 140,494
出力トークン 9,564 39,462
推論トークン 0 92,362
応答時間(平均) 829ms 10.77s
応答時間(最大) 4.52s 59.15s
応答時間(合計) 18.24s 236.94s

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#185 Mercury 2

none
コスト
$0.002
時間
1.8s
トークン
1,514 tok

#163 Mistral Small 4

medium
コスト
$0.006
時間
47.9s
トークン
9,857 tok

スコア上位モデル

スコア vs 総コスト

応答時間(平均)

スコア vs 応答時間(平均)

合計出力トークン

スコア vs 合計出力トークン

カテゴリ内訳

コーディング スコア 一貫性 試行ごとの合格率 不安定なテスト 正解テスト 応答時間(平均) 入力トークン 出力トークン 推論トークン
Mercury 2 3.4 9.6 0.0% 0 1.03s 7,229 3,088 0
Mistral Small 4 4.4 5.1 33.3% 2 39.98s 7,636 11,635 54,715

クイック比較

比較ペアを切り替え