ナビゲーション
AI BENCHY
Advertise here

KAT-Coder-Pro V2.5 (high) vs Muse Glimmer 30B (low)

KAT-Coder-Pro V2.5 (high) が平均スコアでリードし、7.2 vs 7.1 です。 Muse Glimmer 30B (low) の benchmark コストが低く、$0.186 vs $0.482 です。 Muse Glimmer 30B (low) の方が高速で、18.51s vs 20.83s です、成功率は 63.6% vs 63.6% です。

ベンチマークは AI BENCHY テストスイートから次の日時に生成: 2026-08-11

順位
#92
合計出力トークン
136,164
応答時間(平均)
20.83s
合計コスト
$0.482
順位
#99
合計出力トークン
95,478
応答時間(平均)
18.51s
合計コスト
$0.186
おすすめモデル Muse Glimmer 30B (low)

スコアはここでの最高値に近く(7.1 vs 7.2)、KAT-Coder-Pro V2.5 (high) より約 2.6 倍低コストです。

詳細比較

指標 KAT-Coder-Pro V2.5 KAT-Coder-Pro V2.5 high リリース: 2026-07-14 Muse Glimmer 30B Muse Glimmer 30B low リリース: 2026-08-11
スコア 7.2 7.1
順位 #92 #99
信頼性 10.0 10.0
一貫性 7.8 8.2
ベンチマーク網羅率 22/22 テスト · 66/66 回 22/22 テスト · 66/66 回
正解テスト
試行ごとの合格率 63.6% 63.6%
不安定なテスト 6 5
総実行回数 66 66
結果あたりのコスト 4.378 1.685
合計コスト $0.482 $0.186
入力価格 $0.740 / 1M $0.350 / 1M
出力価格 $2.960 / 1M $1.500 / 1M
合計入力トークン 106,076 130,300
出力トークン 9,071 33,907
推論トークン 127,093 61,571
応答時間(平均) 20.83s 18.51s
応答時間(最大) 199.97s 234.92s
応答時間(合計) 458.31s 407.22s

モデル生成ショーケース

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#92 KAT-Coder-Pro V2.5

high
コスト
$0.009
時間
26.4s
トークン
3,117 tok

#99 Muse Glimmer 30B

low
コスト
$0.002
時間
13.5s
トークン
953 tok

スコア上位モデル

スコア vs 総コスト

応答時間(平均)

スコア vs 応答時間(平均)

合計出力トークン

スコア vs 合計出力トークン

カテゴリ内訳

コーディング スコア 一貫性 試行ごとの合格率 不安定なテスト 正解テスト 応答時間(平均) 入力トークン 出力トークン 推論トークン
KAT-Coder-Pro V2.5 6.4 7.9 44.4% 1 22.00s 7,893 422 20,461
Muse Glimmer 30B 8.1 9.9 66.7% 0 16.52s 7,419 2,759 10,173

クイック比較

比較ペアを切り替え