AI BENCHY
AD
Track all your projects in one dashboard. Get 📊stats, 🔥heatmaps and 👀recordings in one self-hosted dashboard.
uxwizz.com
#173

KAT-Coder-Air V2.5

Kwaipilot リリース: 2026-07-14 テスト日時: 2026-07-16 23:35 kwaipilot/kat-coder-air-v2.5::high

概要

KAT-Coder-Air V2.5 は AI BENCHY で 5.6 を記録し、順位は #173 です。信頼性は 9.9、成功率は 43.9%、総コストは $0.077、平均応答時間は 15.90s です。

KAT-Coder-Air V2.5 の特徴: 最も目立つのは 複合 で、順位は #1 です。一方、最も弱い領域は データ解析と抽出#11 です。 推論トークンの使用量がかなり多く、遅さやコストの高さにつながっている可能性があります。

スコア

5.6

一貫性

7.7

信頼性

9.9

合計出力トークン

115,331

合計入力トークン

50,470

入力価格

$0.150 / 1M

出力価格

$0.600 / 1M

正解テスト

誤答テスト数: 15

試行ごとの合格率: 43.9%

不安定なテスト

6

不安定なテストは、実行間で結果が混在しています(少なくとも1回合格かつ1回失敗)。

応答時間(平均)

15.90s

応答時間(最大): 118.35s

応答時間(合計): 349.71s

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#173 KAT-Coder-Air V2.5

high
無効なSVG
コスト
$0.000
時間
300.0s
トークン
0 tok

実行履歴

テスト日時 スコア 信頼性 正解テスト 合計コスト 比較する
2026-07-16 23:35 新しいテストを追加 5.6 9.9 $0.077 現在の実行
2026-07-14 11:05 初回実行 6.2 9.7 $0.064 比較する

この実行では別のベンチマークスイートが使われました。履歴の変化を読むときはスイート変更も考慮してください。

価格履歴

このモデルの OpenRouter における過去の価格データ。

日付 入力価格 出力価格
2026-07-14 11:25 $0.150 / 1M $0.600 / 1M

チャート

最初のモデルを選択し、次に2つ目のモデルをクリックして並列比較ページを開きます。

合計出力トークン

スコア vs 合計出力トークン

クイック比較

カテゴリ内訳

カテゴリ スコア 一貫性 正解テスト
反AIトリック 6.9 5.8
コーディング 4.3 7.3
複合 6.5 10.0
データ解析と抽出 6.5 10.0
ドメイン特化 2.9 7.2
汎用知能 5.1 10.0
指示追従 9.8 10.0
パズル解決 3.5 4.4
ツール呼び出し 10.0 10.0
雑学 3.0 10.0

比較対象モデル