ナビゲーション
AI BENCHY
Advertise here

Mercury 2.5 Preview (low) vs Nemotron 3.5 Lightning (medium)

Nemotron 3.5 Lightning (medium) が平均スコアでリードし、5.1 vs 5.0 です。 Mercury 2.5 Preview (low) の benchmark コストが低く、$0.011 vs $0.156 です。 Mercury 2.5 Preview (low) の方が高速で、1.31s vs 70.11s です、成功率は 47.0% vs 48.5% です。

ベンチマークは AI BENCHY テストスイートから次の日時に生成: 2026-09-02

順位
#254
合計出力トークン
31,975
応答時間(平均)
1.31s
合計コスト
$0.011
順位
#244
合計出力トークン
760,441
応答時間(平均)
70.11s
合計コスト
$0.156
おすすめモデル Mercury 2.5 Preview (low)

スコアはここでの最高値に近く(5.0 vs 5.1)、Nemotron 3.5 Lightning (medium) より約 15.3 倍低コストです。

詳細比較

指標 Mercury 2.5 Preview Mercury 2.5 Preview low リリース: 2026-09-02 Nemotron 3.5 Lightning Nemotron 3.5 Lightning medium リリース: 2026-08-11 無料で利用可能
スコア 5.0 5.1
順位 #254 #244
信頼性 10.0 9.9
一貫性 7.0 6.0
試行回数 66/66 66/66
正解テスト
試行ごとの合格率 47.0% 48.5%
不安定なテスト 8 11
総実行回数 66 66
結果あたりのコスト 0.169 0.000
合計コスト $0.011 $0.156
入力価格 $0.040 / 1M $0.080 / 1M
出力価格 $0.150 / 1M $0.200 / 1M
合計入力トークン 133,525 126,330
出力トークン 7,259 165,702
推論トークン 24,716 594,739
応答時間(平均) 1.31s 70.11s
応答時間(最大) 7.29s 437.11s
応答時間(合計) 28.77s 1542.52s
パラメータ ~100B 30B 総数 (3B アクティブ)
公開状況 クローズド 重み公開

モデル生成ショーケース

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#254 Mercury 2.5 Preview

low
コスト
$0.001
時間
1.5s
トークン
1,169 tok

#244 Nemotron 3.5 Lightning

medium
コスト
$0.000
時間
130.5s
トークン
6,750 tok

スコア上位モデル

スコア vs 総コスト

応答時間(平均)

スコア vs 応答時間(平均)

合計出力トークン

スコア vs 合計出力トークン

カテゴリ内訳

コーディング スコア 一貫性 試行ごとの合格率 不安定なテスト 正解テスト 応答時間(平均) 入力トークン 出力トークン 推論トークン
Mercury 2.5 Preview 5.5 10.0 33.3% 0 972ms 7,794 695 2,263
Nemotron 3.5 Lightning 4.4 5.1 33.3% 2 285.47s 7,623 78,065 297,359

クイック比較

比較ペアを切り替え