ナビゲーション
AI BENCHY
Advertise here

Mercury 2 vs Nemotron 3.5 Lightning (low)

Nemotron 3.5 Lightning (low) が平均スコアでリードし、4.8 vs 4.7 です。 Mercury 2 の benchmark コストが低く、$0.030 vs $0.175 です。 Mercury 2 の方が高速で、825ms vs 59.81s です、成功率は 24.2% vs 42.4% です。

ベンチマークは AI BENCHY テストスイートから次の日時に生成: 2026-08-15

順位
#259
合計出力トークン
9,584
応答時間(平均)
825ms
合計コスト
$0.030
順位
#248
合計出力トークン
665,174
応答時間(平均)
59.81s
合計コスト
$0.175
おすすめモデル Mercury 2

スコアはここでの最高値に近く(4.7 vs 4.8)、Nemotron 3.5 Lightning (low) より約 5.9 倍低コストです。

詳細比較

指標 Mercury 2 Mercury 2 none リリース: 2026-02-24 Nemotron 3.5 Lightning Nemotron 3.5 Lightning low リリース: 2026-08-11 無料で利用可能
スコア 4.7 4.8
順位 #259 #248
信頼性 10.0 9.8
一貫性 9.2 6.8
試行回数 66/66 66/66
正解テスト
試行ごとの合格率 24.2% 42.4%
不安定なテスト 2 9
総実行回数 66 66
結果あたりのコスト 0.740 0.000
合計コスト $0.030 $0.175
入力価格 $0.250 / 1M $0.100 / 1M
出力価格 $0.750 / 1M $0.250 / 1M
合計入力トークン 89,637 138,792
出力トークン 9,584 142,972
推論トークン 0 522,202
応答時間(平均) 825ms 59.81s
応答時間(最大) 4.52s 312.21s
応答時間(合計) 18.14s 1315.80s
パラメータ ~100B 30B 総数 (3B アクティブ)
公開状況 クローズド 重み公開

モデル生成ショーケース

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#259 Mercury 2

none
コスト
$0.002
時間
1.8s
トークン
1,514 tok

#248 Nemotron 3.5 Lightning

low
コスト
$0.000
時間
32.2s
トークン
6,089 tok

スコア上位モデル

スコア vs 総コスト

応答時間(平均)

スコア vs 応答時間(平均)

合計出力トークン

スコア vs 合計出力トークン

カテゴリ内訳

コーディング スコア 一貫性 試行ごとの合格率 不安定なテスト 正解テスト 応答時間(平均) 入力トークン 出力トークン 推論トークン
Mercury 2 3.4 9.6 0.0% 0 1.03s 7,229 3,088 0
Nemotron 3.5 Lightning 4.0 7.8 11.1% 1 224.42s 7,522 72,614 262,558

クイック比較

比較ペアを切り替え