导航
AI BENCHY
AD
Track all your projects in one dashboard. Get 📊stats, 🔥heatmaps and 👀recordings in one self-hosted dashboard.
uxwizz.com

AI BENCHY 对比

Kwaipilot: KAT-Coder-Air V2.5 vs Mistral: Mistral Small 4

摘要

Mistral Small 4 (medium) 平均分领先,为 5.1 vs 4.9KAT-Coder-Air V2.5 benchmark 成本更低,为 $0.037 vs $0.068KAT-Coder-Air V2.5 更快,为 6.99s vs 9.40s,通过率为 38.1% vs 44.4%

推荐模型Mistral Small 4 (medium)它在本次比较中得分最高(5.1),并且在全部 2 个模型中兼顾成本和响应时间最好。

基准结果生成自 AI BENCHY 测试套件,时间:: 2026-07-14

指标 KAT-Coder-Air V2.5 KAT-Coder-Air V2.5 none 发布日期: 2026-07-14 Mistral Small 4 Mistral Small 4 medium 发布日期: 2026-03-16
分数 4.9 5.1
排名 #168 #160
可靠性 10.0 10.0
一致性 7.1 6.9
测试正确
尝试通过率 38.1% 44.4%
不稳定测试 7 8
总运行次数 63 63
每个结果成本 0.724 1.344
总成本 $0.037 $0.068
输入价格 $0.150 / 1M $0.150 / 1M
输出价格 $0.600 / 1M $0.600 / 1M
总输入令牌 41,328 42,576
输出令牌 49,933 24,184
推理令牌 0 84,678
响应时间(平均) 6.99s 9.40s
响应时间(最大) 24.94s 59.15s
响应时间(总计) 146.78s 197.39s

生成展示

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#168 KAT-Coder-Air V2.5

none
成本
$0.002
时间
14.5s
令牌
2,619 tok

#160 Mistral Small 4

medium
成本
$0.006
时间
47.9s
令牌
9,857 tok

按分数排名的模型

分数 vs 总成本

响应时间(平均)

分数 vs 响应时间(平均)

总输出令牌

分数 vs 总输出令牌

类别细分

编程 分数 一致性 尝试通过率 不稳定测试 测试正确 响应时间(平均) 输入令牌 输出令牌 推理令牌
KAT-Coder-Air V2.5 3.3 9.6 0.0% 0 14.31s 6,472 16,918 0
Mistral Small 4 4.4 5.1 33.3% 2 39.98s 7,636 11,635 54,715

快速对比

切换对比组合