ナビゲーション
Advertise here

Mercury 2.5 (high) vs KAT-Coder-Pro V2.5 (low)

KAT-Coder-Pro V2.5 (low) が平均スコアでリードし、6.5 vs 6.5 です。 Mercury 2.5 (high) の benchmark コストが低く、$0.044 vs $0.400 です。 Mercury 2.5 (high) の方が高速で、7.62s vs 19.40s です、成功率は 59.4% vs 65.2% です。

ベンチマークは AI BENCHY テストスイートから次の日時に生成: 2026-10-01

比較対象モデル

順位
#195
合計出力トークン
193,676
応答時間(平均)
7.62s
合計コスト
$0.044
順位
#191
合計出力トークン
113,193
応答時間(平均)
19.40s
合計コスト
$0.400
おすすめモデル Mercury 2.5 (high)

スコアはここでの最高値に近く(6.5 vs 6.5)、KAT-Coder-Pro V2.5 (low) より約 9.2 倍低コストです。

詳細比較

指標 Mercury 2.5 Mercury 2.5 high リリース: 2026-09-08 KAT-Coder-Pro V2.5 KAT-Coder-Pro V2.5 low リリース: 2026-07-14
スコア 6.5 6.5
順位 #195 #191
信頼性 9.8 10.0
一貫性 8.7 7.1
試行回数 69/69 69/69
正解テスト
試行ごとの合格率 59.4% 65.2%
不安定なテスト 4 8
総実行回数 69 69
結果あたりのコスト 0.362 3.636
合計コスト $0.044 $0.400
入力価格 $0.040 / 1M $0.740 / 1M
出力価格 $0.150 / 1M $2.960 / 1M
合計入力トークン 358,562 87,682
出力トークン 4,266 7,166
推論トークン 189,410 106,027
応答時間(平均) 7.62s 19.40s
応答時間(最大) 80.30s 209.15s
応答時間(合計) 175.36s 446.11s
パラメータ ~100B ~700B 総数 (~72B アクティブ)
公開状況 クローズド クローズド

モデル生成ショーケース

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#195 Mercury 2.5

high
コスト
$0.001
時間
3.5s
トークン
2,447 tok

#191 KAT-Coder-Pro V2.5

low
コスト
$0.016
時間
47.6s
トークン
5,182 tok

スコア上位モデル

スコア vs 総コスト

応答時間(平均)

スコア vs 応答時間(平均)

合計出力トークン

スコア vs 合計出力トークン

カテゴリ内訳

コーディング スコア 一貫性 試行ごとの合格率 不安定なテスト 正解テスト 応答時間(平均) 入力トークン 出力トークン 推論トークン
Mercury 2.5 6.4 7.8 44.4% 1 6.58s 7,757 415 44,012
KAT-Coder-Pro V2.5 7.8 10.0 66.7% 0 24.87s 7,893 402 24,945

クイック比較

比較ペアを切り替え