AI Benchy 排行榜

Name: AI BENCHY 模型基准结果
Creator: AI BENCHY
License: https://aibenchy.com/methodology/

基准结果生成自 AI BENCHY 测试套件，时间：: 2026-09-02 已评估模型: 311

311/311

排名	模型	分数	公司	总成本	响应时间（平均）
#282#282	Granite 4.2 8Bhigh	4.6	IBM Granite	$0.084	235.89s
查看模型卡片总测试数 22 错误测试数 18 可靠性 7.6 尝试通过率 39.4% 不稳定测试 10 输入令牌 43,278 输出令牌 181,083 推理令牌 431,132 响应时间（平均） 235.89s 响应时间（总计） 5189.64s 响应时间（最大） 685.87s 超时: 10 答案错误: 6 无效工具调用: 1 无答案: 1 反AI技巧 : 6.9 编程 : 3.8 综合 : 5.0 数据解析与提取 : 3.8 领域专项 : 2.9 通用智能 : 5.5 指令遵循 : 6.4 谜题求解 : 2.9 工具调用 : 10.0 常识问答 : 3.0
#228#228	Hy4 previewlow	5.6	Tencent	$1.745	214.25s
查看模型卡片总测试数 22 错误测试数 19 可靠性 5.4 尝试通过率 19.7% 不稳定测试 3 输入令牌 45,154 输出令牌 4,022 推理令牌 678,516 响应时间（平均） 214.25s 响应时间（总计） 4713.56s 响应时间（最大） 597.45s API 错误: 14 答案错误: 3 未遵循指令: 1 无答案: 1 反AI技巧 : 6.0 编程 : 5.2 综合 : 2.9 数据解析与提取 : 8.7 领域专项 : 4.5 通用智能 : 7.5 指令遵循 : 9.8 谜题求解 : 5.3 工具调用 : 3.0 常识问答 : 3.0
#50#50	Seed 2.1 Turbomedium	8.4	Bytedance Seed	$1.951	193.59s
查看模型卡片总测试数 22 错误测试数 7 可靠性 10.0 尝试通过率 78.8% 不稳定测试 5 输入令牌 104,433 输出令牌 6,511 推理令牌 752,680 响应时间（平均） 193.59s 响应时间（总计） 4258.98s 响应时间（最大） 885.33s 答案错误: 5 未遵循指令: 1 无答案: 1 反AI技巧 : 8.2 编程 : 8.2 综合 : 10.0 数据解析与提取 : 10.0 领域专项 : 2.9 通用智能 : 6.1 指令遵循 : 9.8 谜题求解 : 9.9 工具调用 : 10.0 常识问答 : 3.0
#202#202	Step 3.5 Flashmedium	5.9	Stepfun	$0.132 ↑	191.63s
查看模型卡片总测试数 21 错误测试数 11 可靠性 10.0 尝试通过率 50.0% 不稳定测试 2 输入令牌 65,716 输出令牌 189,424 推理令牌 379,112 响应时间（平均） 191.63s 响应时间（总计） 3066.07s 响应时间（最大） 1597.85s 答案错误: 5 未遵循指令: 3 API 错误: 1 无答案: 1 超时: 1 反AI技巧 : 10.0 编程 : 2.4 综合 : 6.5 数据解析与提取 : 10.0 领域专项 : 3.5 通用智能 : 5.5 指令遵循 : 8.3 谜题求解 : 5.3 工具调用 : 10.0 常识问答 : 3.0
#29#29	Seed 2.1 Turbohigh	8.9	Bytedance Seed	$1.797	173.96s
查看模型卡片总测试数 22 错误测试数 6 可靠性 10.0 尝试通过率 78.8% 不稳定测试 3 输入令牌 104,695 输出令牌 6,645 推理令牌 691,086 响应时间（平均） 173.96s 响应时间（总计） 3827.19s 响应时间（最大） 584.71s 答案错误: 4 未遵循指令: 1 无答案: 1 反AI技巧 : 8.2 编程 : 10.0 综合 : 10.0 数据解析与提取 : 10.0 领域专项 : 2.9 通用智能 : 6.5 指令遵循 : 9.8 谜题求解 : 10.0 工具调用 : 10.0 常识问答 : 3.0
#49#49	Qwen3.8 27Bhigh	8.4	Qwen	~$0.287	167.89s
查看模型卡片总测试数 22 错误测试数 6 可靠性 9.6 尝试通过率 77.3% 不稳定测试 2 输入令牌 100,179 输出令牌 904 推理令牌 655,731 响应时间（平均） 167.89s 响应时间（总计） 3693.54s 响应时间（最大） 640.85s 未遵循指令: 2 无答案: 2 答案错误: 2 反AI技巧 : 10.0 编程 : 8.1 综合 : 10.0 数据解析与提取 : 10.0 领域专项 : 5.3 通用智能 : 5.0 指令遵循 : 9.8 谜题求解 : 7.6 工具调用 : 10.0 常识问答 : 3.0
#18#18	Seed 2.1 Turbolow	9.1	Bytedance Seed	$1.546	163.90s
查看模型卡片总测试数 22 错误测试数 5 可靠性 10.0 尝试通过率 80.3% 不稳定测试 2 输入令牌 104,464 输出令牌 6,844 推理令牌 590,392 响应时间（平均） 163.90s 响应时间（总计） 3605.87s 响应时间（最大） 739.98s 答案错误: 3 无答案: 2 反AI技巧 : 8.2 编程 : 10.0 综合 : 10.0 数据解析与提取 : 10.0 领域专项 : 2.9 通用智能 : 10.0 指令遵循 : 9.8 谜题求解 : 10.0 工具调用 : 10.0 常识问答 : 3.0
#155#155	LongCat 2.0high	6.7	Meituan	$0.492	153.29s
查看模型卡片总测试数 22 错误测试数 13 可靠性 10.0 尝试通过率 51.5% 不稳定测试 4 输入令牌 93,411 输出令牌 30,470 推理令牌 356,172 响应时间（平均） 153.29s 响应时间（总计） 3372.36s 响应时间（最大） 941.66s 答案错误: 7 未遵循指令: 2 无答案: 2 超时: 2 反AI技巧 : 8.9 编程 : 7.8 综合 : 10.0 数据解析与提取 : 3.6 领域专项 : 3.6 通用智能 : 5.1 指令遵循 : 6.5 谜题求解 : 3.1 工具调用 : 10.0 常识问答 : 3.0
#104#104	LongCat 2.0medium	7.4	Meituan	$0.499	143.55s
查看模型卡片总测试数 22 错误测试数 10 可靠性 10.0 尝试通过率 59.1% 不稳定测试 2 输入令牌 97,324 输出令牌 44,383 推理令牌 346,490 响应时间（平均） 143.55s 响应时间（总计） 3158.11s 响应时间（最大） 939.52s 答案错误: 7 API 错误: 1 无答案: 1 超时: 1 反AI技巧 : 10.0 编程 : 10.0 综合 : 7.3 数据解析与提取 : 6.3 领域专项 : 3.0 通用智能 : 4.8 指令遵循 : 6.5 谜题求解 : 5.4 工具调用 : 10.0 常识问答 : 3.0
#66#66	Kimi K3max	7.9	Moonshot AI	$3.467	142.84s
查看模型卡片总测试数 22 错误测试数 6 可靠性 9.0 尝试通过率 77.3% 不稳定测试 2 输入令牌 34,960 输出令牌 2,887 推理令牌 221,241 响应时间（平均） 142.84s 响应时间（总计） 2714.02s 响应时间（最大） 766.58s API 错误: 2 无答案: 2 额外格式: 1 超时: 1 反AI技巧 : 10.0 编程 : 10.0 综合 : 6.5 数据解析与提取 : 7.3 领域专项 : 5.3 通用智能 : 10.0 指令遵循 : 10.0 谜题求解 : 10.0 工具调用 : 3.0 常识问答 : 3.0
#211#211	North Mini Codemedium	5.7	Cohere	$0.000	141.99s
查看模型卡片总测试数 22 错误测试数 14 可靠性 8.5 尝试通过率 43.9% 不稳定测试 4 输入令牌 81,742 输出令牌 423,884 推理令牌 1,340,907 响应时间（平均） 141.99s 响应时间（总计） 3123.87s 响应时间（最大） 786.72s 答案错误: 9 额外格式: 2 API 错误: 1 无效工具调用: 1 超时: 1 反AI技巧 : 8.4 编程 : 4.5 综合 : 2.9 数据解析与提取 : 10.0 领域专项 : 2.9 通用智能 : 5.1 指令遵循 : 9.8 谜题求解 : 3.3 工具调用 : 10.0 常识问答 : 3.0
#143#143	Solar Pro 4low	6.8	Upstage	$0.044	136.11s
查看模型卡片总测试数 22 错误测试数 11 可靠性 10.0 尝试通过率 60.6% 不稳定测试 6 输入令牌 90,556 输出令牌 6,153 推理令牌 332,220 响应时间（平均） 136.11s 响应时间（总计） 2994.49s 响应时间（最大） 640.89s 答案错误: 6 未遵循指令: 2 API 错误: 1 无答案: 1 超时: 1 反AI技巧 : 8.2 编程 : 5.5 综合 : 6.3 数据解析与提取 : 10.0 领域专项 : 2.9 通用智能 : 5.5 指令遵循 : 8.0 谜题求解 : 9.0 工具调用 : 10.0 常识问答 : 3.0
#87#87	Solar Pro 4xhigh	7.6	Upstage	$0.050	134.85s
查看模型卡片总测试数 22 错误测试数 10 可靠性 10.0 尝试通过率 60.6% 不稳定测试 2 输入令牌 98,116 输出令牌 21,720 推理令牌 367,730 响应时间（平均） 134.85s 响应时间（总计） 2966.79s 响应时间（最大） 491.42s 答案错误: 4 未遵循指令: 3 无答案: 2 额外格式: 1 反AI技巧 : 8.3 编程 : 5.8 综合 : 10.0 数据解析与提取 : 10.0 领域专项 : 3.0 通用智能 : 5.5 指令遵循 : 8.4 谜题求解 : 8.9 工具调用 : 10.0 常识问答 : 3.0
#289#289	GLM 4.7 Flashmedium	4.3	Z.ai	$0.168	134.34s
查看模型卡片总测试数 22 错误测试数 18 可靠性 8.6 尝试通过率 31.8% 不稳定测试 8 输入令牌 79,104 输出令牌 42,254 推理令牌 377,280 响应时间（平均） 134.34s 响应时间（总计） 2015.13s 响应时间（最大） 1539.97s 答案错误: 9 无答案: 3 未遵循指令: 2 无效工具调用: 2 超时: 2 反AI技巧 : 4.7 编程 : 3.2 综合 : 2.9 数据解析与提取 : 6.3 领域专项 : 3.5 通用智能 : 3.6 指令遵循 : 6.2 谜题求解 : 2.9 工具调用 : 10.0 常识问答 : 3.0
#144#144	Solar Pro 4medium	6.8	Upstage	$0.047	127.64s
查看模型卡片总测试数 22 错误测试数 10 可靠性 9.9 尝试通过率 62.1% 不稳定测试 4 输入令牌 87,902 输出令牌 30,743 推理令牌 335,668 响应时间（平均） 127.64s 响应时间（总计） 2808.09s 响应时间（最大） 519.91s 答案错误: 5 未遵循指令: 2 API 错误: 1 额外格式: 1 无答案: 1 反AI技巧 : 8.2 编程 : 5.5 综合 : 6.4 数据解析与提取 : 10.0 领域专项 : 3.0 通用智能 : 3.0 指令遵循 : 9.8 谜题求解 : 9.0 工具调用 : 10.0 常识问答 : 3.0
#138#138	Seed-2.0-Codehigh	6.9	Bytedance Seed	$1.273	124.18s
查看模型卡片总测试数 22 错误测试数 11 可靠性 8.6 尝试通过率 63.6% 不稳定测试 5 输入令牌 81,970 输出令牌 7,186 推理令牌 403,389 响应时间（平均） 124.18s 响应时间（总计） 2732.03s 响应时间（最大） 675.30s API 错误: 5 答案错误: 4 未遵循指令: 1 无答案: 1 反AI技巧 : 8.3 编程 : 6.2 综合 : 7.3 数据解析与提取 : 10.0 领域专项 : 3.5 通用智能 : 4.6 指令遵循 : 9.8 谜题求解 : 7.8 工具调用 : 4.7 常识问答 : 3.0
#105#105	Qwen3.8 2.4T A95Bhigh	7.4	Qwen	$2.357	120.59s
查看模型卡片总测试数 22 错误测试数 8 可靠性 9.4 尝试通过率 74.2% 不稳定测试 4 输入令牌 108,931 输出令牌 112,801 推理令牌 343,227 响应时间（平均） 120.59s 响应时间（总计） 2653.05s 响应时间（最大） 532.28s 答案错误: 3 未遵循指令: 2 无答案: 2 无效工具调用: 1 反AI技巧 : 10.0 编程 : 5.9 综合 : 6.9 数据解析与提取 : 10.0 领域专项 : 4.1 通用智能 : 6.1 指令遵循 : 9.8 谜题求解 : 10.0 工具调用 : 10.0 常识问答 : 3.0
#125#125	Solar Pro 4high	7.1	Upstage	$0.046	120.58s
查看模型卡片总测试数 22 错误测试数 11 可靠性 10.0 尝试通过率 62.1% 不稳定测试 5 输入令牌 79,740 输出令牌 23,357 推理令牌 339,837 响应时间（平均） 120.58s 响应时间（总计） 2652.77s 响应时间（最大） 491.07s 答案错误: 5 未遵循指令: 3 API 错误: 1 额外格式: 1 无答案: 1 反AI技巧 : 8.7 编程 : 5.7 综合 : 7.3 数据解析与提取 : 10.0 领域专项 : 3.6 通用智能 : 5.5 指令遵循 : 7.9 谜题求解 : 8.7 工具调用 : 10.0 常识问答 : 3.0
#56#56	Qwen3.8 2.4T A95Blow	8.1	Qwen	$2.672	118.97s
查看模型卡片总测试数 22 错误测试数 7 可靠性 9.4 尝试通过率 72.7% 不稳定测试 2 输入令牌 113,279 输出令牌 121,045 推理令牌 374,496 响应时间（平均） 118.97s 响应时间（总计） 2617.41s 响应时间（最大） 534.21s 答案错误: 4 无答案: 2 无效工具调用: 1 反AI技巧 : 10.0 编程 : 7.8 综合 : 8.2 数据解析与提取 : 10.0 领域专项 : 3.2 通用智能 : 6.1 指令遵循 : 9.8 谜题求解 : 10.0 工具调用 : 10.0 常识问答 : 3.0
#24#24	Muse Spark 1.3high	9.0	Meta	$1.252	117.06s
查看模型卡片总测试数 22 错误测试数 5 可靠性 9.5 尝试通过率 81.8% 不稳定测试 3 输入令牌 99,477 输出令牌 14,053 推理令牌 251,124 响应时间（平均） 117.06s 响应时间（总计） 2575.43s 响应时间（最大） 470.12s 答案错误: 2 API 错误: 1 未遵循指令: 1 无答案: 1 反AI技巧 : 10.0 编程 : 10.0 综合 : 10.0 数据解析与提取 : 10.0 领域专项 : 2.9 通用智能 : 10.0 指令遵循 : 6.4 谜题求解 : 10.0 工具调用 : 9.6 常识问答 : 3.0
#116#116	Kimi K2.6medium	7.2	Moonshot AI	$1.247 ↑	115.89s
查看模型卡片总测试数 22 错误测试数 10 可靠性 10.0 尝试通过率 63.6% 不稳定测试 4 输入令牌 68,913 输出令牌 64,654 推理令牌 282,865 响应时间（平均） 115.89s 响应时间（总计） 2433.66s 响应时间（最大） 876.20s 超时: 3 答案错误: 3 未遵循指令: 2 无效工具调用: 1 无答案: 1 反AI技巧 : 7.0 编程 : 5.7 综合 : 6.9 数据解析与提取 : 10.0 领域专项 : 5.3 通用智能 : 10.0 指令遵循 : 10.0 谜题求解 : 6.0 工具调用 : 10.0 常识问答 : 3.0
#62#62	DeepSeek V4 Flash 0731high	8.0	DeepSeek	$0.084 ↓	114.94s
查看模型卡片总测试数 22 错误测试数 8 可靠性 10.0 尝试通过率 75.8% 不稳定测试 5 输入令牌 96,702 输出令牌 16,966 推理令牌 496,341 响应时间（平均） 114.94s 响应时间（总计） 2528.65s 响应时间（最大） 600.61s 答案错误: 4 未遵循指令: 2 API 错误: 1 无答案: 1 反AI技巧 : 8.7 编程 : 6.3 综合 : 10.0 数据解析与提取 : 10.0 领域专项 : 3.5 通用智能 : 10.0 指令遵循 : 9.8 谜题求解 : 8.2 工具调用 : 10.0 常识问答 : 3.0
#152#152	LongCat 2.0low	6.7	Meituan	$0.412	113.61s
查看模型卡片总测试数 22 错误测试数 12 可靠性 9.9 尝试通过率 54.6% 不稳定测试 4 输入令牌 90,870 输出令牌 5,676 推理令牌 314,918 响应时间（平均） 113.61s 响应时间（总计） 2499.46s 响应时间（最大） 560.39s 答案错误: 7 API 错误: 2 未遵循指令: 1 无答案: 1 超时: 1 反AI技巧 : 10.0 编程 : 6.6 综合 : 10.0 数据解析与提取 : 6.3 领域专项 : 2.9 通用智能 : 3.4 指令遵循 : 6.5 谜题求解 : 3.1 工具调用 : 10.0 常识问答 : 3.0
#95#95	Qwen3.5-27Bmedium	7.5	Qwen	$0.982 ↓	113.28s
查看模型卡片总测试数 22 错误测试数 9 可靠性 10.0 尝试通过率 75.8% 不稳定测试 6 输入令牌 111,644 输出令牌 16,113 推理令牌 598,796 响应时间（平均） 113.28s 响应时间（总计） 2492.26s 响应时间（最大） 1026.43s 答案错误: 4 未遵循指令: 2 额外格式: 1 无效工具调用: 1 超时: 1 反AI技巧 : 8.7 编程 : 6.2 综合 : 7.3 数据解析与提取 : 10.0 领域专项 : 5.9 通用智能 : 6.1 指令遵循 : 10.0 谜题求解 : 8.2 工具调用 : 10.0 常识问答 : 3.0
#240#240	Laguna S 2.1high	5.4	Poolside	$0.114 ↓	111.60s
查看模型卡片总测试数 22 错误测试数 18 可靠性 10.0 尝试通过率 27.3% 不稳定测试 5 输入令牌 208,937 输出令牌 175,588 推理令牌 409,276 响应时间（平均） 111.60s 响应时间（总计） 2455.24s 响应时间（最大） 1190.11s 答案错误: 11 无效工具调用: 2 无答案: 2 API 错误: 1 额外格式: 1 未遵循指令: 1 反AI技巧 : 3.4 编程 : 5.3 综合 : 2.9 数据解析与提取 : 10.0 领域专项 : 3.0 通用智能 : 4.6 指令遵循 : 4.6 谜题求解 : 2.9 工具调用 : 10.0 常识问答 : 3.0

1 2 13

→

全球基准趋势

了解当前模型如何权衡得分、成本、速度、输出长度和各类别能力。

图表 →

智能与成本的帕累托前沿

领先公司最高得分随时间的变化

智能与响应速度的帕累托前沿

得分与输出令牌的帕累托前沿

各模型的类别难度

快速对比

Gemini 3.6 FlashhighvsGemini 3.8 Flashhigh Gemini 3.8 FlashhighvsGemini 3.7 Flashhigh Gemini 3.7 FlashhighvsGemini 3.6 Flashmedium Gemini 3.6 FlashmediumvsGPT-5.6 Sollow GPT-5.6 SollowvsGemini 3 Flash Previewmedium Gemini 3 Flash PreviewmediumvsGemini 3.5 Flashhigh Gemini 3.5 FlashhighvsGemini 3.7 Flashmedium Gemini 3.7 FlashmediumvsGPT-5.6 Solmedium GPT-5.6 SolmediumvsGPT-5.6 Solhigh GPT-5.6 SolhighvsGPT-5.5low GPT-5.5lowvsGrok 4.6high Grok 4.6highvsGemini 3.1 Pro Previewmedium

AI Benchy 排行榜

推荐模型

筛选模型

全球基准趋势

智能与成本的帕累托前沿

领先公司最高得分随时间的变化

智能与响应速度的帕累托前沿

得分与输出令牌的帕累托前沿

各模型的类别难度

快速对比