ナビゲーション
Advertise here

Mercury 2.5 (low) vs Nemotron 3.5 Lightning (high)

Nemotron 3.5 Lightning (high) が平均スコアでリードし、5.2 vs 5.1 です。 Mercury 2.5 (low) の benchmark コストが低く、$0.020 vs $0.111 です。 Mercury 2.5 (low) の方が高速で、3.34s vs 77.08s です、成功率は 37.7% vs 47.8% です。

ベンチマークは AI BENCHY テストスイートから次の日時に生成: 2026-10-01

比較対象モデル

順位
#293
合計出力トークン
40,302
応答時間(平均)
3.34s
合計コスト
$0.020
順位
#287
合計出力トークン
659,693
応答時間(平均)
77.08s
合計コスト
$0.111
おすすめモデル Mercury 2.5 (low)

スコアはここでの最高値に近く(5.1 vs 5.2)、Nemotron 3.5 Lightning (high) より約 5.8 倍低コストです。

詳細比較

指標 Mercury 2.5 Mercury 2.5 low リリース: 2026-09-08 Nemotron 3.5 Lightning Nemotron 3.5 Lightning high リリース: 2026-08-11 無料で利用可能
スコア 5.1 5.2
順位 #293 #287
信頼性 9.8 9.6
一貫性 8.2 5.7
試行回数 69/69 69/69
正解テスト
試行ごとの合格率 37.7% 47.8%
不安定なテスト 5 12
総実行回数 69 69
結果あたりのコスト 0.319 0.000
合計コスト $0.020 $0.111
入力価格 $0.040 / 1M $0.060 / 1M
出力価格 $0.150 / 1M $0.160 / 1M
合計入力トークン 326,083 170,517
出力トークン 7,224 149,968
推論トークン 33,078 509,725
応答時間(平均) 3.34s 77.08s
応答時間(最大) 47.06s 490.99s
応答時間(合計) 76.80s 1772.78s
パラメータ ~100B 30B 総数 (3B アクティブ)
公開状況 クローズド 重み公開

モデル生成ショーケース

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#293 Mercury 2.5

low
コスト
$0.001
時間
2.4s
トークン
1,236 tok

#287 Nemotron 3.5 Lightning

high
コスト
$0.000
時間
92.8s
トークン
11,343 tok

スコア上位モデル

スコア vs 総コスト

応答時間(平均)

スコア vs 応答時間(平均)

合計出力トークン

スコア vs 合計出力トークン

カテゴリ内訳

コーディング スコア 一貫性 試行ごとの合格率 不安定なテスト 正解テスト 応答時間(平均) 入力トークン 出力トークン 推論トークン
Mercury 2.5 5.5 10.0 33.3% 0 972ms 7,909 521 2,269
Nemotron 3.5 Lightning 4.4 5.1 33.3% 2 168.41s 7,623 68,533 242,319

クイック比較

比較ペアを切り替え