ナビゲーション
AI BENCHY
Advertise here

Mercury 2 vs KAT-Coder-Air V2.5

KAT-Coder-Air V2.5 が平均スコアでリードし、4.8 vs 4.7 です。 Mercury 2 の benchmark コストが低く、$0.030 vs $0.070 です。 Mercury 2 の方が高速で、825ms vs 12.46s です、成功率は 24.2% vs 36.4% です。

ベンチマークは AI BENCHY テストスイートから次の日時に生成: 2026-08-26

順位
#264
合計出力トークン
9,584
応答時間(平均)
825ms
合計コスト
$0.030
順位
#257
合計出力トークン
97,752
応答時間(平均)
12.46s
合計コスト
$0.070
おすすめモデル Mercury 2

スコアはここでの最高値に近く(4.7 vs 4.8)、KAT-Coder-Air V2.5 より約 2.3 倍低コストです。

詳細比較

指標 Mercury 2 Mercury 2 none リリース: 2026-02-24 KAT-Coder-Air V2.5 KAT-Coder-Air V2.5 none リリース: 2026-07-14
スコア 4.7 4.8
順位 #264 #257
信頼性 10.0 10.0
一貫性 9.2 7.2
試行回数 66/66 66/66
正解テスト
試行ごとの合格率 24.2% 36.4%
不安定なテスト 2 7
総実行回数 66 66
結果あたりのコスト 0.740 1.382
合計コスト $0.030 $0.070
入力価格 $0.250 / 1M $0.150 / 1M
出力価格 $0.750 / 1M $0.600 / 1M
合計入力トークン 89,637 69,376
出力トークン 9,584 97,752
推論トークン 0 0
応答時間(平均) 825ms 12.46s
応答時間(最大) 4.52s 121.05s
応答時間(合計) 18.14s 274.11s
パラメータ ~100B ~35B 総数 (~3B アクティブ)
公開状況 クローズド クローズド

モデル生成ショーケース

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#264 Mercury 2

none
コスト
$0.002
時間
1.8s
トークン
1,514 tok

#257 KAT-Coder-Air V2.5

none
コスト
$0.002
時間
14.5s
トークン
2,619 tok

スコア上位モデル

スコア vs 総コスト

応答時間(平均)

スコア vs 応答時間(平均)

合計出力トークン

スコア vs 合計出力トークン

カテゴリ内訳

コーディング スコア 一貫性 試行ごとの合格率 不安定なテスト 正解テスト 応答時間(平均) 入力トークン 出力トークン 推論トークン
Mercury 2 3.4 9.6 0.0% 0 1.03s 7,229 3,088 0
KAT-Coder-Air V2.5 3.3 9.6 0.0% 0 14.31s 6,472 16,918 0

クイック比較

比較ペアを切り替え