AI BENCHY
AD
Track all your projects in one dashboard. Get 📊stats, 🔥heatmaps and 👀recordings in one self-hosted dashboard.
uxwizz.com
#101

KAT-Coder-Pro V2.5

Kwaipilot リリース: 2026-07-14 テスト日時: 2026-08-14 03:23 kwaipilot/kat-coder-pro-v2.5::low
~700B 総数 (~72B アクティブ)MoEクローズド推定

概要

KAT-Coder-Pro V2.5 は AI BENCHY で 7.3 を記録し、順位は #101 です。信頼性は 10.0、成功率は 68.2%、総コストは $0.400、平均応答時間は 20.20s です。

KAT-Coder-Pro V2.5 の特徴: 最も目立つのは 指示追従 で、順位は #1 です。一方、最も弱い領域は 汎用知能#17 です。

モデル情報

調査日:2026-08-12

推定
パラメータ
~700B 総数 (~72B アクティブ)
アーキテクチャ
MoE
公開状況
クローズド
ライセンス
-

公開情報に基づく最善の推定値です。提供元はすべての値を公表していません。

スコア

7.3

一貫性

7.0

信頼性

10.0

合計出力トークン

113,193

合計入力トークン

87,682

入力価格

$0.740 / 1M

出力価格

$2.960 / 1M

正解テスト

誤答テスト数: 11

試行ごとの合格率: 68.2%

不安定なテスト

8

不安定なテストは、実行間で結果が混在しています(少なくとも1回合格かつ1回失敗)。

応答時間(平均)

20.20s

応答時間(最大): 209.15s

応答時間(合計): 444.35s

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#101 KAT-Coder-Pro V2.5

low
コスト
$0.016
時間
47.6s
トークン
5,182 tok

実行履歴

テスト日時 スコア 信頼性 正解テスト 合計コスト 比較する
2026-08-14 03:23 再テスト 7.3 10.0 $0.400 現在の実行
2026-07-16 23:38 新しいテストを追加 7.4 10.0 $0.387 比較する
2026-07-14 11:05 初回実行 8.0 9.9 $0.220 比較する

この実行では別のベンチマークスイートが使われました。履歴の変化を読むときはスイート変更も考慮してください。

実行比較

実行ベンチマーク網羅率スコア一貫性信頼性正解テスト不安定なテスト合計出力トークン合計入力トークン合計コスト応答時間(平均)
2026-08-14 03:23 · 現在の実行66/66 回7.37.010.011/228113,19387,682$0.40020.20s
2026-07-16 23:38 · 新しいテストを追加66/66 回7.47.010.011/228108,64087,673$0.38719.47s
差分0.00.00.000+4553+9+$0.014+729ms

この 2 つの実行では異なるベンチマークスイートが使われているため、差分にはモデル変化とスイート変化の両方が含まれます。

価格履歴

このモデルの OpenRouter における過去の価格データ。

日付 入力価格 出力価格
2026-08-14 12:51 $0.740 / 1M $2.960 / 1M

チャート

最初のモデルを選択し、次に2つ目のモデルをクリックして並列比較ページを開きます。

合計出力トークン

スコア vs 合計出力トークン

クイック比較

カテゴリ内訳

カテゴリ スコア 一貫性 正解テスト
反AIトリック 6.9 5.8
コーディング 7.8 10.0
複合 6.4 5.8
データ解析と抽出 10.0 10.0
ドメイン特化 3.5 4.4
汎用知能 4.1 2.7
指示追従 10.0 10.0
パズル解決 6.4 4.4
ツール呼び出し 10.0 10.0
雑学 3.0 10.0

比較対象モデル