#66 KAT-Coder-Pro V2.5
high- コスト
- $0.009
- 時間
- 26.4s
- トークン
- 3,117 tok
Kwaipilot: KAT-Coder-Pro V2.5 vs xAI: Grok 4.20
KAT-Coder-Pro V2.5 (high) が平均スコアでリードし、7.2 vs 7.1 です。 KAT-Coder-Pro V2.5 (high) の benchmark コストが低く、$0.482 vs $0.777 です。 KAT-Coder-Pro V2.5 (high) の方が高速で、20.83s vs 29.47s です、成功率は 63.6% vs 63.6% です。
おすすめモデルKAT-Coder-Pro V2.5 (high)ここでは最高スコア（7.2）で、Grok 4.20 (medium) より約 1.6 倍低コストです。
ベンチマークは AI BENCHY テストスイートから次の日時に生成: 2026-07-17
| 指標 | KAT-Coder-Pro V2.5 KAT-Coder-Pro V2.5 high | Grok 4.20 Grok 4.20 medium |
|---|---|---|
| スコア | 7.2 | 7.1 |
| 順位 | #66 | #72 |
| 信頼性 | 10.0 | 10.0 |
| 一貫性 | 7.8 | 8.5 |
| 正解テスト | ||
| 試行ごとの合格率 | 63.6% | 63.6% |
| 不安定なテスト | 6 | 4 |
| 総実行回数 | 66 | 66 |
| 結果あたりのコスト | 4.378 | 9.709 |
| 合計コスト | $0.482 | $0.777 |
| 入力価格 | $0.740 / 1M | $1.250 / 1M |
| 出力価格 | $2.960 / 1M | $2.500 / 1M |
| 合計入力トークン | 106,076 | 102,791 |
| 出力トークン | 9,071 | 5,363 |
| 推論トークン | 127,093 | 253,977 |
| 応答時間（平均） | 20.83s | 29.47s |
| 応答時間（最大） | 199.97s | 199.66s |
| 応答時間（合計） | 458.31s | 648.35s |
Hamster playing table tennis
Prompt: Create a detailed SVG illustration of a hamster playing table tennis.
#72 xAI: Grok 4.20
medium- コスト
- $0.041
- 時間
- 110.3s
- トークン
- 16,336 tok
スコア上位モデル
スコア vs 総コスト
応答時間（平均）
スコア vs 応答時間（平均）
合計出力トークン
スコア vs 合計出力トークン
カテゴリ内訳
| 反AIトリック | スコア | 一貫性 | 試行ごとの合格率 | 不安定なテスト | 正解テスト | 応答時間（平均） | 入力トークン | 出力トークン | 推論トークン |
|---|---|---|---|---|---|---|---|---|---|
| KAT-Coder-Pro V2.5 | 7.0 | 8.0 | 66.7% | 1 | 3.17s | 672 | 447 | 2,716 | |
| Grok 4.20 | 8.2 | 7.9 | 83.3% | 1 | 3.95s | 2,010 | 287 | 8,312 |
| コーディング | スコア | 一貫性 | 試行ごとの合格率 | 不安定なテスト | 正解テスト | 応答時間（平均） | 入力トークン | 出力トークン | 推論トークン |
|---|---|---|---|---|---|---|---|---|---|
| KAT-Coder-Pro V2.5 | 6.4 | 7.9 | 44.4% | 1 | 22.00s | 7,893 | 422 | 20,461 | |
| Grok 4.20 | 6.3 | 6.6 | 55.6% | 1 | 109.93s | 8,307 | 268 | 103,150 |
| 複合 | スコア | 一貫性 | 試行ごとの合格率 | 不安定なテスト | 正解テスト | 応答時間（平均） | 入力トークン | 出力トークン | 推論トークン |
|---|---|---|---|---|---|---|---|---|---|
| KAT-Coder-Pro V2.5 | 7.3 | 5.8 | 83.3% | 1 | 106.70s | 78,458 | 6,956 | 60,306 | |
| Grok 4.20 | 8.7 | 6.9 | 83.3% | 1 | 42.25s | 71,267 | 3,776 | 44,009 |
| データ解析と抽出 | スコア | 一貫性 | 試行ごとの合格率 | 不安定なテスト | 正解テスト | 応答時間（平均） | 入力トークン | 出力トークン | 推論トークン |
|---|---|---|---|---|---|---|---|---|---|
| KAT-Coder-Pro V2.5 | 10.0 | 10.0 | 100.0% | 0 | 4.13s | 7,776 | 278 | 1,960 | |
| Grok 4.20 | 10.0 | 10.0 | 100.0% | 0 | 4.17s | 7,761 | 180 | 5,333 |
| ドメイン特化 | スコア | 一貫性 | 試行ごとの合格率 | 不安定なテスト | 正解テスト | 応答時間（平均） | 入力トークン | 出力トークン | 推論トークン |
|---|---|---|---|---|---|---|---|---|---|
| KAT-Coder-Pro V2.5 | 2.9 | 4.4 | 22.2% | 2 | 35.33s | 771 | 33 | 35,701 | |
| Grok 4.20 | 5.3 | 10.0 | 33.3% | 0 | 27.03s | 1,764 | 375 | 49,339 |
| 汎用知能 | スコア | 一貫性 | 試行ごとの合格率 | 不安定なテスト | 正解テスト | 応答時間（平均） | 入力トークン | 出力トークン | 推論トークン |
|---|---|---|---|---|---|---|---|---|---|
| KAT-Coder-Pro V2.5 | 5.1 | 10.0 | 0.0% | 0 | 3.27s | 516 | 139 | 647 | |
| Grok 4.20 | 3.9 | 2.6 | 33.3% | 1 | 24.48s | 825 | 65 | 6,440 |
| 指示追従 | スコア | 一貫性 | 試行ごとの合格率 | 不安定なテスト | 正解テスト | 応答時間（平均） | 入力トークン | 出力トークン | 推論トークン |
|---|---|---|---|---|---|---|---|---|---|
| KAT-Coder-Pro V2.5 | 9.9 | 10.0 | 100.0% | 0 | 2.67s | 699 | 84 | 976 | |
| Grok 4.20 | 9.8 | 10.0 | 100.0% | 0 | 4.26s | 1,362 | 57 | 6,419 |
| パズル解決 | スコア | 一貫性 | 試行ごとの合格率 | 不安定なテスト | 正解テスト | 応答時間（平均） | 入力トークン | 出力トークン | 推論トークン |
|---|---|---|---|---|---|---|---|---|---|
| KAT-Coder-Pro V2.5 | 8.2 | 7.2 | 88.9% | 1 | 3.38s | 696 | 428 | 1,936 | |
| Grok 4.20 | 7.7 | 10.0 | 66.7% | 0 | 6.22s | 1,689 | 149 | 7,913 |
| ツール呼び出し | スコア | 一貫性 | 試行ごとの合格率 | 不安定なテスト | 正解テスト | 応答時間（平均） | 入力トークン | 出力トークン | 推論トークン |
|---|---|---|---|---|---|---|---|---|---|
| KAT-Coder-Pro V2.5 | 10.0 | 10.0 | 100.0% | 0 | 28.04s | 8,391 | 268 | 896 | |
| Grok 4.20 | 3.0 | 10.0 | 0.0% | 0 | 13.68s | 7,275 | 197 | 6,620 |
| 雑学 | スコア | 一貫性 | 試行ごとの合格率 | 不安定なテスト | 正解テスト | 応答時間（平均） | 入力トークン | 出力トークン | 推論トークン |
|---|---|---|---|---|---|---|---|---|---|
| KAT-Coder-Pro V2.5 | 3.0 | 10.0 | 0.0% | 0 | 5.22s | 204 | 16 | 1,494 | |
| Grok 4.20 | 3.0 | 10.0 | 0.0% | 0 | 63.48s | 531 | 9 | 16,442 |
クイック比較
比較ペアを切り替え
KAT-Coder-Pro V2.5highvsKimi K2.6mediumKAT-Coder-Pro V2.5highvsStep 3.7 FlashlowKAT-Coder-Pro V2.5highvsQwen3.5 Plus 2026-04-20mediumClaude Opus 4.8nonevsKAT-Coder-Pro V2.5highQwen3.7 PlusnonevsGrok 4.20mediumKAT-Coder-Pro V2.5highvsQwen3.7 PlusnoneGemini 3.1 Flash LitemediumvsKAT-Coder-Pro V2.5highKAT-Coder-Pro V2.5highvsQwen3.5-122B-A10BmediumGemini 3.1 Flash Lite PreviewmediumvsKAT-Coder-Pro V2.5highKAT-Coder-Pro V2.5highvsGrok 4.3mediumKAT-Coder-Pro V2.5highvsGLM 5.1mediumClaude Sonnet 4.6nonevsKAT-Coder-Pro V2.5high