- 順位
- #70
- 合計出力トークン
- 108,640
- 応答時間(平均)
- 19.47s
- 合計コスト
- $0.387
KAT-Coder-Pro V2.5 (low) vs Qwen3.7 Plus (medium)
Qwen3.7 Plus (medium) が平均スコアでリードし、7.9 vs 7.4 です。 Qwen3.7 Plus (medium) の benchmark コストが低く、$0.267 vs $0.387 です。 KAT-Coder-Pro V2.5 (low) の方が高速で、19.47s vs 51.51s です、成功率は 69.7% vs 75.8% です。
- 順位
- #43
- 合計出力トークン
- 179,429
- 応答時間(平均)
- 51.51s
- 合計コスト
- $0.267
おすすめモデル
Qwen3.7 Plus (medium)
この比較で最も高いスコア(7.9)を出し、全 2 モデルの中でコストと応答時間のバランスも最良です。
詳細比較
| 指標 | KAT-Coder-Pro V2.5 KAT-Coder-Pro V2.5 low | Qwen3.7 Plus Qwen3.7 Plus medium |
|---|---|---|
| スコア | 7.4 | 7.9 |
| 順位 | #70 | #43 |
| 信頼性 | 10.0 | 10.0 |
| 一貫性 | 7.0 | 8.9 |
| 正解テスト | ||
| 試行ごとの合格率 | 69.7% | 75.8% |
| 不安定なテスト | 8 | 3 |
| 総実行回数 | 66 | 66 |
| 結果あたりのコスト | 3.514 | 2.072 |
| 合計コスト | $0.387 | $0.267 |
| 入力価格 | $0.740 / 1M | $0.320 / 1M |
| 出力価格 | $2.960 / 1M | $1.280 / 1M |
| 合計入力トークン | 87,673 | 115,233 |
| 出力トークン | 7,166 | 6,162 |
| 推論トークン | 101,474 | 173,267 |
| 応答時間(平均) | 19.47s | 51.51s |
| 応答時間(最大) | 209.15s | 315.30s |
| 応答時間(合計) | 428.31s | 1133.15s |
Hamster playing table tennis
Prompt: Create a detailed SVG illustration of a hamster playing table tennis.
#70 KAT-Coder-Pro V2.5
low- コスト
- $0.016
- 時間
- 47.6s
- トークン
- 5,182 tok
#43 Qwen3.7 Plus
medium- コスト
- $0.018
- 時間
- 193.2s
- トークン
- 10,821 tok
スコア上位モデル
スコア vs 総コスト
応答時間(平均)
スコア vs 応答時間(平均)
合計出力トークン
スコア vs 合計出力トークン
カテゴリ内訳
| 反AIトリック | スコア | 一貫性 | 試行ごとの合格率 | 不安定なテスト | 正解テスト | 応答時間(平均) | 入力トークン | 出力トークン | 推論トークン |
|---|---|---|---|---|---|---|---|---|---|
| KAT-Coder-Pro V2.5 | 6.9 | 5.8 | 75.0% | 2 | 4.20s | 672 | 277 | 4,228 | |
| Qwen3.7 Plus | 10.0 | 10.0 | 100.0% | 0 | 8.58s | 672 | 195 | 5,065 |
| コーディング | スコア | 一貫性 | 試行ごとの合格率 | 不安定なテスト | 正解テスト | 応答時間(平均) | 入力トークン | 出力トークン | 推論トークン |
|---|---|---|---|---|---|---|---|---|---|
| KAT-Coder-Pro V2.5 | 7.8 | 10.0 | 66.7% | 0 | 24.87s | 7,893 | 402 | 24,945 | |
| Qwen3.7 Plus | 6.1 | 6.6 | 55.6% | 1 | 108.60s | 6,472 | 414 | 43,576 |
| 複合 | スコア | 一貫性 | 試行ごとの合格率 | 不安定なテスト | 正解テスト | 応答時間(平均) | 入力トークン | 出力トークン | 推論トークン |
|---|---|---|---|---|---|---|---|---|---|
| KAT-Coder-Pro V2.5 | 6.4 | 5.8 | 66.7% | 1 | 111.87s | 60,055 | 5,393 | 43,732 | |
| Qwen3.7 Plus | 8.2 | 6.9 | 66.7% | 1 | 190.27s | 89,228 | 4,403 | 57,645 |
| データ解析と抽出 | スコア | 一貫性 | 試行ごとの合格率 | 不安定なテスト | 正解テスト | 応答時間(平均) | 入力トークン | 出力トークン | 推論トークン |
|---|---|---|---|---|---|---|---|---|---|
| KAT-Coder-Pro V2.5 | 10.0 | 10.0 | 100.0% | 0 | 4.19s | 7,776 | 288 | 1,917 | |
| Qwen3.7 Plus | 10.0 | 10.0 | 100.0% | 0 | 21.75s | 7,782 | 270 | 6,713 |
| ドメイン特化 | スコア | 一貫性 | 試行ごとの合格率 | 不安定なテスト | 正解テスト | 応答時間(平均) | 入力トークン | 出力トークン | 推論トークン |
|---|---|---|---|---|---|---|---|---|---|
| KAT-Coder-Pro V2.5 | 4.1 | 4.4 | 44.5% | 2 | 17.52s | 771 | 35 | 16,877 | |
| Qwen3.7 Plus | 3.6 | 7.2 | 22.2% | 1 | 45.35s | 771 | 57 | 27,073 |
| 汎用知能 | スコア | 一貫性 | 試行ごとの合格率 | 不安定なテスト | 正解テスト | 応答時間(平均) | 入力トークン | 出力トークン | 推論トークン |
|---|---|---|---|---|---|---|---|---|---|
| KAT-Coder-Pro V2.5 | 4.1 | 2.7 | 33.3% | 1 | 2.32s | 516 | 99 | 412 | |
| Qwen3.7 Plus | 10.0 | 10.0 | 100.0% | 0 | 25.48s | 516 | 123 | 3,998 |
| 指示追従 | スコア | 一貫性 | 試行ごとの合格率 | 不安定なテスト | 正解テスト | 応答時間(平均) | 入力トークン | 出力トークン | 推論トークン |
|---|---|---|---|---|---|---|---|---|---|
| KAT-Coder-Pro V2.5 | 10.0 | 10.0 | 100.0% | 0 | 2.53s | 699 | 83 | 1,008 | |
| Qwen3.7 Plus | 10.0 | 10.0 | 100.0% | 0 | 16.13s | 699 | 102 | 5,013 |
| パズル解決 | スコア | 一貫性 | 試行ごとの合格率 | 不安定なテスト | 正解テスト | 応答時間(平均) | 入力トークン | 出力トークン | 推論トークン |
|---|---|---|---|---|---|---|---|---|---|
| KAT-Coder-Pro V2.5 | 6.4 | 4.4 | 77.8% | 2 | 3.11s | 696 | 289 | 1,820 | |
| Qwen3.7 Plus | 10.0 | 10.0 | 100.0% | 0 | 16.38s | 696 | 280 | 7,312 |
| ツール呼び出し | スコア | 一貫性 | 試行ごとの合格率 | 不安定なテスト | 正解テスト | 応答時間(平均) | 入力トークン | 出力トークン | 推論トークン |
|---|---|---|---|---|---|---|---|---|---|
| KAT-Coder-Pro V2.5 | 10.0 | 10.0 | 100.0% | 0 | 18.45s | 8,391 | 282 | 834 | |
| Qwen3.7 Plus | 10.0 | 10.0 | 100.0% | 0 | 15.02s | 8,193 | 292 | 1,831 |
| 雑学 | スコア | 一貫性 | 試行ごとの合格率 | 不安定なテスト | 正解テスト | 応答時間(平均) | 入力トークン | 出力トークン | 推論トークン |
|---|---|---|---|---|---|---|---|---|---|
| KAT-Coder-Pro V2.5 | 3.0 | 10.0 | 0.0% | 0 | 17.06s | 204 | 18 | 5,701 | |
| Qwen3.7 Plus | 3.0 | 10.0 | 0.0% | 0 | 91.07s | 204 | 26 | 15,041 |
クイック比較
比較ペアを切り替え
Claude Sonnet 4.6nonevsKAT-Coder-Pro V2.5lowKAT-Coder-Pro V2.5lowvsLongCat 2.0mediumGemini 3.1 Flash Lite PreviewmediumvsKAT-Coder-Pro V2.5lowGemini 3.1 Flash LitemediumvsKAT-Coder-Pro V2.5lowKAT-Coder-Pro V2.5lowvsQwen3.7 MaxnoneKAT-Coder-Pro V2.5lowvsQwen3.5-27BmediumGPT-5.6 TerrahighvsQwen3.7 PlusmediumKimi K3maxvsQwen3.7 PlusmediumClaude Opus 4.8nonevsKAT-Coder-Pro V2.5lowKAT-Coder-Pro V2.5lowvsQwen3.5 Plus 2026-02-15mediumClaude Opus 4.8lowvsQwen3.7 PlusmediumKAT-Coder-Pro V2.5lowvsGPT-5.4 Minimedium