ナビゲーション
AI BENCHY
Your ad here

AI BENCHY Compare

Inception: Mercury 2 vs NVIDIA: Nemotron 3 Super

ベンチマークは AI BENCHY テストスイートから次の日時に生成: 2026-04-26

指標 Mercury 2 Mercury 2 medium リリース: 2026-02-24 Nemotron 3 Super Nemotron 3 Super none リリース: 2026-03-11 無料で利用可能
スコア 6.5 5.1
順位 #65 #103
信頼性 該当なし 該当なし
一貫性 8.6 8.2
正解テスト
試行ごとの合格率 53.7% 35.2%
不安定なテスト 3 4
総実行回数 54 52
結果あたりのコスト 0.580 0.000
合計コスト $0.047 $0.000
???? $0.250 / 1M $0.090 / 1M
???? $0.750 / 1M $0.450 / 1M
出力トークン 3,972 4,760
推論トークン 48,333 0
応答時間(平均) 2.21s 8.54s
応答時間(最大) 14.63s 24.97s
応答時間(合計) 37.51s 153.69s

スコア上位モデル

スコア vs 総コスト

応答時間(平均)

スコア vs 応答時間(平均)

合計出力トークン

スコア vs 合計出力トークン

カテゴリ内訳

反AIトリック スコア 一貫性 試行ごとの合格率 不安定なテスト 正解テスト 応答時間(平均) 出力トークン 推論トークン
Mercury 2 6.9 9.9 50.0% 0 1.12s 2,546 2,609
Nemotron 3 Super 4.8 10.0 25.0% 0 7.43s 2,174 0
コーディング スコア 一貫性 試行ごとの合格率 不安定なテスト 正解テスト 応答時間(平均) 出力トークン 推論トークン
Mercury 2 10.0 10.0 100.0% 0 1.53s 249 2,213
Nemotron 3 Super 3.3 1.6 33.3% 1 2.99s 535 0
複合 スコア 一貫性 試行ごとの合格率 不安定なテスト 正解テスト 応答時間(平均) 出力トークン 推論トークン
Mercury 2 10.0 10.0 100.0% 0 3.28s 268 4,887
Nemotron 3 Super 3.0 10.0 0.0% 0 19.98s 124 0
データ解析と抽出 スコア 一貫性 試行ごとの合格率 不安定なテスト 正解テスト 応答時間(平均) 出力トークン 推論トークン
Mercury 2 7.3 5.9 83.3% 1 1.11s 183 1,656
Nemotron 3 Super 10.0 10.0 100.0% 0 7.92s 249 0
ドメイン特化 スコア 一貫性 試行ごとの合格率 不安定なテスト 正解テスト 応答時間(平均) 出力トークン 推論トークン
Mercury 2 2.9 7.2 11.1% 1 6.48s 41 30,754
Nemotron 3 Super 3.6 7.2 22.2% 1 6.23s 26 0
汎用知能 スコア 一貫性 試行ごとの合格率 不安定なテスト 正解テスト 応答時間(平均) 出力トークン 推論トークン
Mercury 2 4.8 10.0 0.0% 0 821ms 137 542
Nemotron 3 Super 4.2 9.9 0.0% 0 24.97s 170 0
指示追従 スコア 一貫性 試行ごとの合格率 不安定なテスト 正解テスト 応答時間(平均) 出力トークン 推論トークン
Mercury 2 10.0 10.0 100.0% 0 1.07s 14 958
Nemotron 3 Super 4.9 6.9 33.3% 1 1.50s 66 0
パズル解決 スコア 一貫性 試行ごとの合格率 不安定なテスト 正解テスト 応答時間(平均) 出力トークン 推論トークン
Mercury 2 3.9 7.5 22.2% 1 934ms 354 2,758
Nemotron 3 Super 5.7 10.0 33.3% 0 7.50s 1,135 0
ツール呼び出し スコア 一貫性 試行ごとの合格率 不安定なテスト 正解テスト 応答時間(平均) 出力トークン 推論トークン
Mercury 2 10.0 10.0 100.0% 0 1.89s 180 1,956
Nemotron 3 Super 4.7 1.6 66.7% 1 16.00s 281 0

クイック比較

比較ペアを切り替え