#101 KAT-Coder-Pro V2.5
low- コスト
- $0.016
- 時間
- 47.6s
- トークン
- 5,182 tok
概要
KAT-Coder-Pro V2.5 は AI BENCHY で 7.3 を記録し、順位は #101 です。信頼性は 10.0、成功率は 68.2%、総コストは $0.400、平均応答時間は 20.20s です。
KAT-Coder-Pro V2.5 の特徴: 最も目立つのは 指示追従 で、順位は #1 です。一方、最も弱い領域は 汎用知能 で #17 です。
調査日:2026-08-12
公開情報に基づく最善の推定値です。提供元はすべての値を公表していません。
入力価格
$0.740 / 1M
出力価格
$2.960 / 1M
不安定なテスト
8
不安定なテストは、実行間で結果が混在しています(少なくとも1回合格かつ1回失敗)。
Prompt: Create a detailed SVG illustration of a hamster playing table tennis.
実行履歴
| テスト日時 | スコア | 信頼性 | 正解テスト | 合計コスト | 比較する |
|---|---|---|---|---|---|
| 2026-08-14 03:23 再テスト | 7.3 | 10.0 | $0.400 | 現在の実行 | |
| 2026-07-16 23:38 新しいテストを追加 | 7.4 | 10.0 | $0.387 | 比較する | |
| 2026-07-14 11:05 初回実行 | 8.0 | 9.9 | $0.220 | 比較する |
この実行では別のベンチマークスイートが使われました。履歴の変化を読むときはスイート変更も考慮してください。
実行比較
| 実行 | ベンチマーク網羅率 | スコア | 一貫性 | 信頼性 | 正解テスト | 不安定なテスト | 合計出力トークン | 合計入力トークン | 合計コスト | 応答時間(平均) |
|---|---|---|---|---|---|---|---|---|---|---|
| 2026-08-14 03:23 · 現在の実行 | 66/66 回 | 7.3 | 7.0 | 10.0 | 11/22 | 8 | 113,193 | 87,682 | $0.400 | 20.20s |
| 2026-07-14 11:05 · 初回実行 | 63/63 回 | 8.0 | 7.3 | 9.9 | 11/21 | 7 | 63,300 | 42,750 | $0.220 | 10.44s |
| 差分 | — | -0.6 | -0.3 | +0.1 | 0 | +1 | +49893 | +44932 | +$0.181 | +9761ms |
ベンチマーク網羅率が異なります: 66/66 回 (目標: テストごとに 3 回) と 63/63 回 (目標: テストごとに 3 回)。合計値と反復回数に左右される指標は直接比較できません。
この 2 つの実行では異なるベンチマークスイートが使われているため、差分にはモデル変化とスイート変化の両方が含まれます。
価格履歴
このモデルの OpenRouter における過去の価格データ。
| 日付 | 入力価格 | 出力価格 |
|---|---|---|
| 2026-08-14 12:51 | $0.740 / 1M | $2.960 / 1M |
最初のモデルを選択し、次に2つ目のモデルをクリックして並列比較ページを開きます。