ナビゲーション
Advertise here

KAT-Coder-Pro V2.5 (low) vs Beam 1.0 501B A23B (medium)

平均スコアは 6.5 vs 6.6 でほぼ同等です。 Beam 1.0 501B A23B (medium) の benchmark コストが低く、$0.499 vs $0.568 です。 Beam 1.0 501B A23B (medium) の方が高速で、6.27s vs 19.40s です、成功率は 65.2% vs 65.2% です。

ベンチマークは AI BENCHY テストスイートから次の日時に生成: 2026-10-17

比較対象モデル

順位
#221
合計出力トークン
113,193
応答時間(平均)
19.40s
合計コスト
$0.568
順位
#220
合計出力トークン
98,521
応答時間(平均)
6.27s
合計コスト
$0.499
おすすめモデル Beam 1.0 501B A23B (medium)

ここでは最高スコア(6.6)で、KAT-Coder-Pro V2.5 (low) より約 3.1 倍速く応答します。

詳細比較

指標 KAT-Coder-Pro V2.5 KAT-Coder-Pro V2.5 low リリース: 2026-07-14 Beam 1.0 501B A23B Beam 1.0 501B A23B medium リリース: 2026-10-17
スコア 6.5 6.6
順位 #221 #220
信頼性 10.0 10.0
一貫性 7.1 9.3
試行回数 69/69 69/69
正解テスト
試行ごとの合格率 65.2% 65.2%
不安定なテスト 8 2
総実行回数 69 69
結果あたりのコスト 3.636 3.561
合計コスト $0.568 $0.499
入力価格 $0.740 / 1M $1.000 / 1M
出力価格 $2.960 / 1M $3.000 / 1M
キャッシュ読み取り料金 $0.150 / 1M $0.100 / 1M
キャッシュ書き込み料金 該当なし 該当なし
合計入力トークン 87,682 202,937
出力トークン 7,166 4,328
推論トークン 106,027 94,193
応答時間(平均) 19.40s 6.27s
応答時間(最大) 209.15s 31.55s
応答時間(合計) 446.11s 144.28s
パラメータ ~700B 総数 (~72B アクティブ) 501B 総数 (23B アクティブ)
公開状況 クローズド オープンソース

キャッシュ料金は入力トークンに適用されます。読み取りは保存済みのプロンプトを再利用し、書き込みは保存するため追加料金がかかる場合があります。出力トークンには出力料金が適用されます。

モデル生成ショーケース

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#221 KAT-Coder-Pro V2.5

low
コスト
$0.016
時間
47.6s
トークン
5,182 tok

#220 Beam 1.0 501B A23B

medium
コスト
$0.005
時間
11.8s
トークン
4,267 tok

スコア上位モデル

スコア vs 総コスト

応答時間(平均)

スコア vs 応答時間(平均)

合計出力トークン

スコア vs 合計出力トークン

カテゴリ内訳

コーディング スコア 一貫性 試行ごとの合格率 不安定なテスト 正解テスト 応答時間(平均) 入力トークン 出力トークン 推論トークン
KAT-Coder-Pro V2.5 7.8 10.0 66.7% 0 24.87s 7,893 402 24,945
Beam 1.0 501B A23B 10.0 10.0 100.0% 0 11.81s 7,791 440 27,204

比較ペアを切り替え