导航
AI BENCHY
Advertise here

Kwaipilot: KAT-Coder-Pro V2.5 vs Qwen: Qwen3.5-27B

Qwen3.5-27B (medium) 平均分领先,为 7.4 vs 7.2KAT-Coder-Pro V2.5 (high) benchmark 成本更低,为 $0.482 vs $1.627KAT-Coder-Pro V2.5 (high) 更快,为 20.83s vs 111.94s,通过率为 63.6% vs 72.7%

推荐模型KAT-Coder-Pro V2.5 (high)它的得分接近这里的最高分(7.2 vs 7.4),同时成本比Qwen3.5-27B (medium)低约 3.4 倍。

基准结果生成自 AI BENCHY 测试套件,时间:: 2026-07-18

指标 KAT-Coder-Pro V2.5 KAT-Coder-Pro V2.5 high 发布日期: 2026-07-14 Qwen3.5-27B Qwen3.5-27B medium 发布日期: 2026-02-24
分数 7.2 7.4
排名 #68 #58
可靠性 10.0 10.0
一致性 7.8 8.2
测试正确
尝试通过率 63.6% 72.7%
不稳定测试 6 5
总运行次数 66 66
每个结果成本 4.378 8.324
总成本 $0.482 $1.627
输入价格 $0.740 / 1M $0.260 / 1M
输出价格 $2.960 / 1M $2.600 / 1M
总输入令牌 106,076 111,635
输出令牌 9,071 15,999
推理令牌 127,093 598,430
响应时间(平均) 20.83s 111.94s
响应时间(最大) 199.97s 1026.43s
响应时间(总计) 458.31s 2462.67s

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#68 KAT-Coder-Pro V2.5

high
成本
$0.009
时间
26.4s
令牌
3,117 tok

#58 Qwen3.5-27B

medium
成本
$0.008
时间
62.0s
令牌
3,099 tok

按分数排名的模型

分数 vs 总成本

响应时间(平均)

分数 vs 响应时间(平均)

总输出令牌

分数 vs 总输出令牌

类别细分

编程 分数 一致性 尝试通过率 不稳定测试 测试正确 响应时间(平均) 输入令牌 输出令牌 推理令牌
KAT-Coder-Pro V2.5 6.4 7.9 44.4% 1 22.00s 7,893 422 20,461
Qwen3.5-27B 6.2 7.1 55.6% 1 160.69s 7,895 6,381 89,388

快速对比

切换对比组合