ナビゲーション
AI BENCHY
Advertise here

DeepSeek V4 Pro vs KAT-Coder-Pro V2.5 (medium)

KAT-Coder-Pro V2.5 (medium) が平均スコアでリードし、6.9 vs 6.8 です。 DeepSeek V4 Pro の benchmark コストが低く、$0.145 vs $0.478 です。 DeepSeek V4 Pro の方が高速で、11.71s vs 24.87s です、成功率は 47.0% vs 65.2% です。

ベンチマークは AI BENCHY テストスイートから次の日時に生成: 2026-08-29

順位
#135
合計出力トークン
35,547
応答時間(平均)
11.71s
合計コスト
$0.145
順位
#126
合計出力トークン
139,375
応答時間(平均)
24.87s
合計コスト
$0.478
おすすめモデル DeepSeek V4 Pro

スコアはここでの最高値に近く(6.8 vs 6.9)、KAT-Coder-Pro V2.5 (medium) より約 3.3 倍低コストです。

詳細比較

指標 DeepSeek V4 Pro DeepSeek V4 Pro none リリース: 2026-04-24 KAT-Coder-Pro V2.5 KAT-Coder-Pro V2.5 medium リリース: 2026-07-14
スコア 6.8 6.9
順位 #135 #126
信頼性 10.0 10.0
一貫性 8.6 7.0
試行回数 66/66 66/66
正解テスト
試行ごとの合格率 47.0% 65.2%
不安定なテスト 4 8
総実行回数 66 66
結果あたりのコスト 1.061 4.342
合計コスト $0.145 $0.478
入力価格 $0.661 / 1M $0.740 / 1M
出力価格 $1.322 / 1M $2.960 / 1M
合計入力トークン 148,078 87,916
出力トークン 35,547 7,213
推論トークン 0 132,162
応答時間(平均) 11.71s 24.87s
応答時間(最大) 119.44s 257.00s
応答時間(合計) 257.67s 547.14s
パラメータ 1.6T 総数 (49B アクティブ) ~700B 総数 (~72B アクティブ)
公開状況 オープンソース クローズド

モデル生成ショーケース

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#135 DeepSeek V4 Pro

none
無効なSVG
コスト
$0.000
時間
300.0s
トークン
0 tok

#126 KAT-Coder-Pro V2.5

medium
コスト
$0.009
時間
25.6s
トークン
2,939 tok

スコア上位モデル

スコア vs 総コスト

応答時間(平均)

スコア vs 応答時間(平均)

合計出力トークン

スコア vs 合計出力トークン

カテゴリ内訳

コーディング スコア 一貫性 試行ごとの合格率 不安定なテスト 正解テスト 応答時間(平均) 入力トークン 出力トークン 推論トークン
DeepSeek V4 Pro 5.6 10.0 33.3% 0 13.38s 7,275 5,500 0
KAT-Coder-Pro V2.5 7.8 10.0 66.7% 0 33.10s 7,893 416 33,658

クイック比較

比較ペアを切り替え