| #309#309 |
Nemotron 3 Nano Omni 30b A3b Reasoningnone已归档模型:该模型将不再更新,也不会在新测试中继续测试。
|
3.2… |
NVIDIA |
$0.000
…
|
728ms… |
只有当某个测试的所有运行都通过时,才计为完全通过。
答案错误: 9 API 错误: 6 未遵循指令: 2
响应时间(平均)728ms
响应时间(最大)2.21s
响应时间(总计)9.47s
…
|
- 总测试数
- 19
- 错误测试数
- 17
- 尝试通过率
- 15.2%
- 输入令牌
- 11,661
- 输出令牌
- 1,302
- 推理令牌
- 0
- 响应时间(平均)
- 728ms
- 响应时间(总计)
- 9.47s
- 响应时间(最大)
- 2.21s
-
反AI技巧
: 4.8
只有当某个测试的所有运行都通过时,才计为完全通过。
答案错误: 2 API 错误: 1
响应时间(平均)584ms
响应时间(最大)772ms
响应时间(总计)1.75s
-
编程
: 3.3
只有当某个测试的所有运行都通过时,才计为完全通过。
没有失败答案。
响应时间(平均)1.27s
响应时间(最大)1.27s
响应时间(总计)1.27s
-
综合
: 1.5
只有当某个测试的所有运行都通过时,才计为完全通过。
API 错误: 1
响应时间(平均)0ms
响应时间(最大)0ms
响应时间(总计)0ms
-
数据解析与提取
: 3.8
只有当某个测试的所有运行都通过时,才计为完全通过。
答案错误: 2
响应时间(平均)1.42s
响应时间(最大)2.21s
响应时间(总计)2.84s
-
领域专项
: 3.6
只有当某个测试的所有运行都通过时,才计为完全通过。
答案错误: 3
响应时间(平均)489ms
响应时间(最大)513ms
响应时间(总计)1.47s
-
通用智能
: 3.0
只有当某个测试的所有运行都通过时,才计为完全通过。
API 错误: 1
响应时间(平均)0ms
响应时间(最大)0ms
响应时间(总计)0ms
-
指令遵循
: 4.8
只有当某个测试的所有运行都通过时,才计为完全通过。
未遵循指令: 1 答案错误: 1
响应时间(平均)541ms
响应时间(最大)542ms
响应时间(总计)1.08s
-
谜题求解
: 3.0
只有当某个测试的所有运行都通过时,才计为完全通过。
API 错误: 1 未遵循指令: 1 答案错误: 1
响应时间(平均)532ms
响应时间(最大)580ms
响应时间(总计)1.06s
-
工具调用
: 3.0
只有当某个测试的所有运行都通过时,才计为完全通过。
API 错误: 1
响应时间(平均)0ms
响应时间(最大)0ms
响应时间(总计)0ms
-
常识问答
: 3.0
只有当某个测试的所有运行都通过时,才计为完全通过。
API 错误: 1
响应时间(平均)0ms
响应时间(最大)0ms
响应时间(总计)0ms
|
| #311#311 |
LFM2-24B-A2Bnone已归档模型:该模型将不再更新,也不会在新测试中继续测试。
|
2.2… |
Liquid |
$0.001
…
|
782ms… |
只有当某个测试的所有运行都通过时,才计为完全通过。
答案错误: 9 API 错误: 4 未遵循指令: 1
响应时间(平均)782ms
响应时间(最大)3.15s
响应时间(总计)10.94s
…
|
- 总测试数
- 16
- 错误测试数
- 14
- 尝试通过率
- 12.1%
- 输入令牌
- 10,771
- 输出令牌
- 1,173
- 推理令牌
- 0
- 响应时间(平均)
- 782ms
- 响应时间(总计)
- 10.94s
- 响应时间(最大)
- 3.15s
-
反AI技巧
: 2.5
只有当某个测试的所有运行都通过时,才计为完全通过。
答案错误: 3
响应时间(平均)471ms
响应时间(最大)872ms
响应时间(总计)1.41s
-
编程
: 0.0
只有当某个测试的所有运行都通过时,才计为完全通过。
没有失败答案。
响应时间(平均)0ms
响应时间(最大)0ms
响应时间(总计)0ms
-
综合
: 1.5
只有当某个测试的所有运行都通过时,才计为完全通过。
API 错误: 1
响应时间(平均)0ms
响应时间(最大)0ms
响应时间(总计)0ms
-
数据解析与提取
: 3.0
只有当某个测试的所有运行都通过时,才计为完全通过。
答案错误: 2
响应时间(平均)714ms
响应时间(最大)987ms
响应时间(总计)1.43s
-
领域专项
: 5.9
只有当某个测试的所有运行都通过时,才计为完全通过。
API 错误: 1 答案错误: 1
响应时间(平均)287ms
响应时间(最大)334ms
响应时间(总计)860ms
-
通用智能
: 4.0
只有当某个测试的所有运行都通过时,才计为完全通过。
未遵循指令: 1
响应时间(平均)395ms
响应时间(最大)395ms
响应时间(总计)395ms
-
指令遵循
: 6.3
只有当某个测试的所有运行都通过时,才计为完全通过。
答案错误: 1
响应时间(平均)752ms
响应时间(最大)1.22s
响应时间(总计)1.50s
-
谜题求解
: 3.8
只有当某个测试的所有运行都通过时,才计为完全通过。
答案错误: 2 API 错误: 1
响应时间(平均)1.78s
响应时间(最大)3.15s
响应时间(总计)5.34s
-
工具调用
: 3.0
只有当某个测试的所有运行都通过时,才计为完全通过。
API 错误: 1
响应时间(平均)0ms
响应时间(最大)0ms
响应时间(总计)0ms
-
常识问答
: 0.0
只有当某个测试的所有运行都通过时,才计为完全通过。
没有失败答案。
响应时间(平均)0ms
响应时间(最大)0ms
响应时间(总计)0ms
|
| #306#306 |
Laguna Xs.2none已归档模型:该模型将不再更新,也不会在新测试中继续测试。
|
3.8… |
Poolside |
$0.004
↕
…
|
806ms… |
只有当某个测试的所有运行都通过时,才计为完全通过。
答案错误: 8 API 错误: 4 未遵循指令: 1 无效工具调用: 1
响应时间(平均)806ms
响应时间(最大)2.01s
响应时间(总计)12.09s
…
|
- 总测试数
- 19
- 错误测试数
- 14
- 尝试通过率
- 22.7%
- 输入令牌
- 33,675
- 输出令牌
- 2,826
- 推理令牌
- 0
- 响应时间(平均)
- 806ms
- 响应时间(总计)
- 12.09s
- 响应时间(最大)
- 2.01s
-
反AI技巧
: 3.0
只有当某个测试的所有运行都通过时,才计为完全通过。
答案错误: 2 API 错误: 1 未遵循指令: 1
响应时间(平均)534ms
响应时间(最大)906ms
响应时间(总计)1.60s
-
编程
: 8.3
只有当某个测试的所有运行都通过时,才计为完全通过。
答案错误: 1
响应时间(平均)1.96s
响应时间(最大)1.96s
响应时间(总计)1.96s
-
综合
: 1.5
只有当某个测试的所有运行都通过时,才计为完全通过。
答案错误: 1
响应时间(平均)2.01s
响应时间(最大)2.01s
响应时间(总计)2.01s
-
数据解析与提取
: 10.0
只有当某个测试的所有运行都通过时,才计为完全通过。
没有失败答案。
响应时间(平均)646ms
响应时间(最大)658ms
响应时间(总计)1.29s
-
领域专项
: 5.3
只有当某个测试的所有运行都通过时,才计为完全通过。
答案错误: 2
响应时间(平均)371ms
响应时间(最大)419ms
响应时间(总计)1.11s
-
通用智能
: 3.0
只有当某个测试的所有运行都通过时,才计为完全通过。
API 错误: 1
响应时间(平均)0ms
响应时间(最大)0ms
响应时间(总计)0ms
-
指令遵循
: 6.5
只有当某个测试的所有运行都通过时,才计为完全通过。
答案错误: 1
响应时间(平均)439ms
响应时间(最大)448ms
响应时间(总计)878ms
-
谜题求解
: 5.3
只有当某个测试的所有运行都通过时,才计为完全通过。
API 错误: 1 答案错误: 1
响应时间(平均)650ms
响应时间(最大)843ms
响应时间(总计)1.30s
-
工具调用
: 3.0
只有当某个测试的所有运行都通过时,才计为完全通过。
无效工具调用: 1
响应时间(平均)1.93s
响应时间(最大)1.93s
响应时间(总计)1.93s
-
常识问答
: 3.0
只有当某个测试的所有运行都通过时,才计为完全通过。
API 错误: 1
响应时间(平均)0ms
响应时间(最大)0ms
响应时间(总计)0ms
|
| #281#281 |
Mercury 2none
|
4.7… |
Inception |
$0.030
…
|
825ms… |
只有当某个测试的所有运行都通过时,才计为完全通过。
答案错误: 17 未遵循指令: 1
响应时间(平均)825ms
响应时间(最大)4.52s
响应时间(总计)18.14s
…
|
- 总测试数
- 22
- 错误测试数
- 18
- 尝试通过率
- 24.2%
- 输入令牌
- 89,637
- 输出令牌
- 9,584
- 推理令牌
- 0
- 响应时间(平均)
- 825ms
- 响应时间(总计)
- 18.14s
- 响应时间(最大)
- 4.52s
-
反AI技巧
: 3.0
只有当某个测试的所有运行都通过时,才计为完全通过。
答案错误: 4
响应时间(平均)483ms
响应时间(最大)716ms
响应时间(总计)1.93s
-
编程
: 3.4
只有当某个测试的所有运行都通过时,才计为完全通过。
答案错误: 3
响应时间(平均)1.03s
响应时间(最大)1.43s
响应时间(总计)3.10s
-
综合
: 3.0
只有当某个测试的所有运行都通过时,才计为完全通过。
答案错误: 2
响应时间(平均)2.56s
响应时间(最大)4.52s
响应时间(总计)5.13s
-
数据解析与提取
: 7.3
只有当某个测试的所有运行都通过时,才计为完全通过。
答案错误: 1
响应时间(平均)667ms
响应时间(最大)819ms
响应时间(总计)1.33s
-
领域专项
: 5.9
只有当某个测试的所有运行都通过时,才计为完全通过。
答案错误: 2
响应时间(平均)500ms
响应时间(最大)733ms
响应时间(总计)1.50s
-
通用智能
: 4.8
只有当某个测试的所有运行都通过时,才计为完全通过。
未遵循指令: 1
响应时间(平均)628ms
响应时间(最大)628ms
响应时间(总计)628ms
-
指令遵循
: 6.5
只有当某个测试的所有运行都通过时,才计为完全通过。
答案错误: 1
响应时间(平均)551ms
响应时间(最大)622ms
响应时间(总计)1.10s
-
谜题求解
: 3.1
只有当某个测试的所有运行都通过时,才计为完全通过。
答案错误: 3
响应时间(平均)535ms
响应时间(最大)642ms
响应时间(总计)1.60s
-
工具调用
: 10.0
只有当某个测试的所有运行都通过时,才计为完全通过。
没有失败答案。
响应时间(平均)1.27s
响应时间(最大)1.27s
响应时间(总计)1.27s
-
常识问答
: 3.0
只有当某个测试的所有运行都通过时,才计为完全通过。
答案错误: 1
响应时间(平均)548ms
响应时间(最大)548ms
响应时间(总计)548ms
|
| #293#293 |
Grok 4.20none54/66 次尝试 (目标:每项测试重复 3 次)
|
4.1… |
X AI |
$0.057
↓
…
|
1.11s… |
只有当某个测试的所有运行都通过时,才计为完全通过。
答案错误: 10 额外格式: 1 无效工具调用: 1
响应时间(平均)1.11s
响应时间(最大)6.04s
响应时间(总计)19.96s
…
|
- 总测试数
- 18
- 错误测试数
- 12
- 尝试通过率
- 27.3%
- 输入令牌
- 41,313
- 输出令牌
- 1,923
- 推理令牌
- 0
- 响应时间(平均)
- 1.11s
- 响应时间(总计)
- 19.96s
- 响应时间(最大)
- 6.04s
-
反AI技巧
: 4.8
只有当某个测试的所有运行都通过时,才计为完全通过。
答案错误: 3
响应时间(平均)501ms
响应时间(最大)839ms
响应时间(总计)2.01s
-
编程
: 1.1
只有当某个测试的所有运行都通过时,才计为完全通过。
答案错误: 1
响应时间(平均)1.22s
响应时间(最大)1.22s
响应时间(总计)1.22s
-
综合
: 1.5
只有当某个测试的所有运行都通过时,才计为完全通过。
无效工具调用: 1
响应时间(平均)6.04s
响应时间(最大)6.04s
响应时间(总计)6.04s
-
数据解析与提取
: 10.0
只有当某个测试的所有运行都通过时,才计为完全通过。
没有失败答案。
响应时间(平均)522ms
响应时间(最大)537ms
响应时间(总计)1.04s
-
领域专项
: 3.0
只有当某个测试的所有运行都通过时,才计为完全通过。
答案错误: 2 额外格式: 1
响应时间(平均)687ms
响应时间(最大)821ms
响应时间(总计)2.06s
-
通用智能
: 4.8
只有当某个测试的所有运行都通过时,才计为完全通过。
答案错误: 1
响应时间(平均)659ms
响应时间(最大)659ms
响应时间(总计)659ms
-
指令遵循
: 6.3
只有当某个测试的所有运行都通过时,才计为完全通过。
答案错误: 1
响应时间(平均)445ms
响应时间(最大)505ms
响应时间(总计)889ms
-
谜题求解
: 5.3
只有当某个测试的所有运行都通过时,才计为完全通过。
答案错误: 2
响应时间(平均)473ms
响应时间(最大)502ms
响应时间(总计)1.42s
-
工具调用
: 10.0
只有当某个测试的所有运行都通过时,才计为完全通过。
没有失败答案。
响应时间(平均)4.63s
响应时间(最大)4.63s
响应时间(总计)4.63s
-
常识问答
: 0.0
只有当某个测试的所有运行都通过时,才计为完全通过。
没有失败答案。
响应时间(平均)0ms
响应时间(最大)0ms
响应时间(总计)0ms
|
| #286#286 |
Grok 4.20 Betanone已归档模型:该模型将不再更新,也不会在新测试中继续测试。
|
4.4… |
X AI |
$0.087
↓
…
|
1.19s… |
只有当某个测试的所有运行都通过时,才计为完全通过。
答案错误: 10 未遵循指令: 1 无效工具调用: 1
响应时间(平均)1.19s
响应时间(最大)6.48s
响应时间(总计)21.43s
…
|
- 总测试数
- 18
- 错误测试数
- 12
- 尝试通过率
- 30.3%
- 输入令牌
- 40,597
- 输出令牌
- 1,657
- 推理令牌
- 0
- 响应时间(平均)
- 1.19s
- 响应时间(总计)
- 21.43s
- 响应时间(最大)
- 6.48s
-
反AI技巧
: 4.0
只有当某个测试的所有运行都通过时,才计为完全通过。
答案错误: 4
响应时间(平均)597ms
响应时间(最大)866ms
响应时间(总计)2.39s
-
编程
: 1.8
只有当某个测试的所有运行都通过时,才计为完全通过。
答案错误: 1
响应时间(平均)1.14s
响应时间(最大)1.14s
响应时间(总计)1.14s
-
综合
: 1.5
只有当某个测试的所有运行都通过时,才计为完全通过。
无效工具调用: 1
响应时间(平均)6.48s
响应时间(最大)6.48s
响应时间(总计)6.48s
-
数据解析与提取
: 10.0
只有当某个测试的所有运行都通过时,才计为完全通过。
没有失败答案。
响应时间(平均)601ms
响应时间(最大)634ms
响应时间(总计)1.20s
-
领域专项
: 3.0
只有当某个测试的所有运行都通过时,才计为完全通过。
答案错误: 3
响应时间(平均)611ms
响应时间(最大)616ms
响应时间(总计)1.83s
-
通用智能
: 5.0
只有当某个测试的所有运行都通过时,才计为完全通过。
未遵循指令: 1
响应时间(平均)541ms
响应时间(最大)541ms
响应时间(总计)541ms
-
指令遵循
: 6.3
只有当某个测试的所有运行都通过时,才计为完全通过。
答案错误: 1
响应时间(平均)649ms
响应时间(最大)952ms
响应时间(总计)1.30s
-
谜题求解
: 7.7
只有当某个测试的所有运行都通过时,才计为完全通过。
答案错误: 1
响应时间(平均)586ms
响应时间(最大)813ms
响应时间(总计)1.76s
-
工具调用
: 10.0
只有当某个测试的所有运行都通过时,才计为完全通过。
没有失败答案。
响应时间(平均)4.79s
响应时间(最大)4.79s
响应时间(总计)4.79s
-
常识问答
: 0.0
只有当某个测试的所有运行都通过时,才计为完全通过。
没有失败答案。
响应时间(平均)0ms
响应时间(最大)0ms
响应时间(总计)0ms
|
| #251#251 |
Mistral Small 4none
|
5.1… |
Mistral |
$0.022
…
|
1.20s… |
只有当某个测试的所有运行都通过时,才计为完全通过。
答案错误: 16 未遵循指令: 1
响应时间(平均)1.20s
响应时间(最大)13.16s
响应时间(总计)26.41s
…
|
- 总测试数
- 22
- 错误测试数
- 17
- 尝试通过率
- 25.8%
- 输入令牌
- 104,717
- 输出令牌
- 9,812
- 推理令牌
- 0
- 响应时间(平均)
- 1.20s
- 响应时间(总计)
- 26.41s
- 响应时间(最大)
- 13.16s
-
反AI技巧
: 3.4
只有当某个测试的所有运行都通过时,才计为完全通过。
答案错误: 4
响应时间(平均)395ms
响应时间(最大)769ms
响应时间(总计)1.58s
-
编程
: 3.7
只有当某个测试的所有运行都通过时,才计为完全通过。
答案错误: 3
响应时间(平均)901ms
响应时间(最大)1.28s
响应时间(总计)2.70s
-
综合
: 3.0
只有当某个测试的所有运行都通过时,才计为完全通过。
答案错误: 2
响应时间(平均)7.44s
响应时间(最大)13.16s
响应时间(总计)14.88s
-
数据解析与提取
: 10.0
只有当某个测试的所有运行都通过时,才计为完全通过。
没有失败答案。
响应时间(平均)822ms
响应时间(最大)1.08s
响应时间(总计)1.64s
-
领域专项
: 5.3
只有当某个测试的所有运行都通过时,才计为完全通过。
答案错误: 2
响应时间(平均)377ms
响应时间(最大)418ms
响应时间(总计)1.13s
-
通用智能
: 4.0
只有当某个测试的所有运行都通过时,才计为完全通过。
答案错误: 1
响应时间(平均)729ms
响应时间(最大)729ms
响应时间(总计)729ms
-
指令遵循
: 6.5
只有当某个测试的所有运行都通过时,才计为完全通过。
答案错误: 1
响应时间(平均)380ms
响应时间(最大)380ms
响应时间(总计)759ms
-
谜题求解
: 3.1
只有当某个测试的所有运行都通过时,才计为完全通过。
答案错误: 2 未遵循指令: 1
响应时间(平均)399ms
响应时间(最大)570ms
响应时间(总计)1.20s
-
工具调用
: 10.0
只有当某个测试的所有运行都通过时,才计为完全通过。
没有失败答案。
响应时间(平均)1.40s
响应时间(最大)1.40s
响应时间(总计)1.40s
-
常识问答
: 3.0
只有当某个测试的所有运行都通过时,才计为完全通过。
答案错误: 1
响应时间(平均)397ms
响应时间(最大)397ms
响应时间(总计)397ms
|
| #299#299 |
Nemotron 3.5 Lightningnone
|
4.0… |
NVIDIA |
$0.007
↕
…
|
1.21s… |
只有当某个测试的所有运行都通过时,才计为完全通过。
答案错误: 16 无效工具调用: 2 未遵循指令: 1
响应时间(平均)1.21s
响应时间(最大)6.30s
响应时间(总计)26.62s
…
|
- 总测试数
- 22
- 错误测试数
- 19
- 尝试通过率
- 16.7%
- 输入令牌
- 74,074
- 输出令牌
- 2,731
- 推理令牌
- 0
- 响应时间(平均)
- 1.21s
- 响应时间(总计)
- 26.62s
- 响应时间(最大)
- 6.30s
-
反AI技巧
: 4.8
只有当某个测试的所有运行都通过时,才计为完全通过。
答案错误: 3
响应时间(平均)2.12s
响应时间(最大)6.30s
响应时间(总计)8.49s
-
编程
: 3.1
只有当某个测试的所有运行都通过时,才计为完全通过。
答案错误: 3
响应时间(平均)1.55s
响应时间(最大)1.76s
响应时间(总计)4.64s
-
综合
: 3.0
只有当某个测试的所有运行都通过时,才计为完全通过。
无效工具调用: 1 答案错误: 1
响应时间(平均)2.02s
响应时间(最大)2.27s
响应时间(总计)4.05s
-
数据解析与提取
: 6.5
只有当某个测试的所有运行都通过时,才计为完全通过。
未遵循指令: 1
响应时间(平均)633ms
响应时间(最大)712ms
响应时间(总计)1.27s
-
领域专项
: 3.0
只有当某个测试的所有运行都通过时,才计为完全通过。
答案错误: 3
响应时间(平均)683ms
响应时间(最大)1.30s
响应时间(总计)2.05s
-
通用智能
: 4.4
只有当某个测试的所有运行都通过时,才计为完全通过。
答案错误: 1
响应时间(平均)586ms
响应时间(最大)586ms
响应时间(总计)586ms
-
指令遵循
: 6.5
只有当某个测试的所有运行都通过时,才计为完全通过。
答案错误: 1
响应时间(平均)511ms
响应时间(最大)524ms
响应时间(总计)1.02s
-
谜题求解
: 3.1
只有当某个测试的所有运行都通过时,才计为完全通过。
答案错误: 3
响应时间(平均)750ms
响应时间(最大)1.07s
响应时间(总计)2.25s
-
工具调用
: 2.8
只有当某个测试的所有运行都通过时,才计为完全通过。
无效工具调用: 1
响应时间(平均)1.70s
响应时间(最大)1.70s
响应时间(总计)1.70s
-
常识问答
: 3.0
只有当某个测试的所有运行都通过时,才计为完全通过。
答案错误: 1
响应时间(平均)575ms
响应时间(最大)575ms
响应时间(总计)575ms
|
| #288#288 |
Elephant Alphanone已归档模型:该模型将不再更新,也不会在新测试中继续测试。
|
4.3… |
Openrouter |
$0.000
…
|
1.22s… |
只有当某个测试的所有运行都通过时,才计为完全通过。
答案错误: 9 API 错误: 3 未遵循指令: 3 无效工具调用: 1
响应时间(平均)1.22s
响应时间(最大)3.81s
响应时间(总计)22.03s
…
|
- 总测试数
- 21
- 错误测试数
- 16
- 尝试通过率
- 25.8%
- 输入令牌
- 33,743
- 输出令牌
- 2,573
- 推理令牌
- 0
- 响应时间(平均)
- 1.22s
- 响应时间(总计)
- 22.03s
- 响应时间(最大)
- 3.81s
-
反AI技巧
: 6.6
只有当某个测试的所有运行都通过时,才计为完全通过。
未遵循指令: 1 答案错误: 1
响应时间(平均)963ms
响应时间(最大)1.68s
响应时间(总计)3.85s
-
编程
: 4.2
只有当某个测试的所有运行都通过时,才计为完全通过。
API 错误: 2 答案错误: 1
响应时间(平均)1.39s
响应时间(最大)1.39s
响应时间(总计)1.39s
-
综合
: 1.5
只有当某个测试的所有运行都通过时,才计为完全通过。
答案错误: 1
响应时间(平均)3.81s
响应时间(最大)3.81s
响应时间(总计)3.81s
-
数据解析与提取
: 6.5
只有当某个测试的所有运行都通过时,才计为完全通过。
答案错误: 1
响应时间(平均)1.04s
响应时间(最大)1.05s
响应时间(总计)2.08s
-
领域专项
: 3.0
只有当某个测试的所有运行都通过时,才计为完全通过。
答案错误: 3
响应时间(平均)927ms
响应时间(最大)1.17s
响应时间(总计)2.78s
-
通用智能
: 4.0
只有当某个测试的所有运行都通过时,才计为完全通过。
未遵循指令: 1
响应时间(平均)854ms
响应时间(最大)854ms
响应时间(总计)854ms
-
指令遵循
: 9.8
只有当某个测试的所有运行都通过时,才计为完全通过。
没有失败答案。
响应时间(平均)1.03s
响应时间(最大)1.17s
响应时间(总计)2.07s
-
谜题求解
: 4.2
只有当某个测试的所有运行都通过时,才计为完全通过。
答案错误: 2 未遵循指令: 1
响应时间(平均)807ms
响应时间(最大)925ms
响应时间(总计)2.42s
-
工具调用
: 3.0
只有当某个测试的所有运行都通过时,才计为完全通过。
无效工具调用: 1
响应时间(平均)2.79s
响应时间(最大)2.79s
响应时间(总计)2.79s
-
常识问答
: 3.0
只有当某个测试的所有运行都通过时,才计为完全通过。
API 错误: 1
响应时间(平均)0ms
响应时间(最大)0ms
响应时间(总计)0ms
|
| #290#290 |
Elephant Alphamedium已归档模型:该模型将不再更新,也不会在新测试中继续测试。
|
4.3… |
Openrouter |
$0.000
…
|
1.27s… |
只有当某个测试的所有运行都通过时,才计为完全通过。
答案错误: 9 API 错误: 3 未遵循指令: 2 无效工具调用: 1
响应时间(平均)1.27s
响应时间(最大)3.70s
响应时间(总计)22.82s
…
|
- 总测试数
- 21
- 错误测试数
- 15
- 尝试通过率
- 28.8%
- 输入令牌
- 33,744
- 输出令牌
- 2,596
- 推理令牌
- 0
- 响应时间(平均)
- 1.27s
- 响应时间(总计)
- 22.82s
- 响应时间(最大)
- 3.70s
-
反AI技巧
: 6.6
只有当某个测试的所有运行都通过时,才计为完全通过。
答案错误: 2
响应时间(平均)1.19s
响应时间(最大)2.04s
响应时间(总计)4.75s
-
编程
: 3.7
只有当某个测试的所有运行都通过时,才计为完全通过。
API 错误: 2 答案错误: 1
响应时间(平均)1.30s
响应时间(最大)1.30s
响应时间(总计)1.30s
-
综合
: 1.5
只有当某个测试的所有运行都通过时,才计为完全通过。
答案错误: 1
响应时间(平均)3.70s
响应时间(最大)3.70s
响应时间(总计)3.70s
-
数据解析与提取
: 6.5
只有当某个测试的所有运行都通过时,才计为完全通过。
答案错误: 1
响应时间(平均)979ms
响应时间(最大)1.02s
响应时间(总计)1.96s
-
领域专项
: 3.0
只有当某个测试的所有运行都通过时,才计为完全通过。
答案错误: 3
响应时间(平均)925ms
响应时间(最大)1.16s
响应时间(总计)2.77s
-
通用智能
: 4.3
只有当某个测试的所有运行都通过时,才计为完全通过。
未遵循指令: 1
响应时间(平均)920ms
响应时间(最大)920ms
响应时间(总计)920ms
-
指令遵循
: 9.8
只有当某个测试的所有运行都通过时,才计为完全通过。
没有失败答案。
响应时间(平均)987ms
响应时间(最大)1.13s
响应时间(总计)1.97s
-
谜题求解
: 5.3
只有当某个测试的所有运行都通过时,才计为完全通过。
未遵循指令: 1 答案错误: 1
响应时间(平均)868ms
响应时间(最大)972ms
响应时间(总计)2.60s
-
工具调用
: 3.0
只有当某个测试的所有运行都通过时,才计为完全通过。
无效工具调用: 1
响应时间(平均)2.83s
响应时间(最大)2.83s
响应时间(总计)2.83s
-
常识问答
: 3.0
只有当某个测试的所有运行都通过时,才计为完全通过。
API 错误: 1
响应时间(平均)0ms
响应时间(最大)0ms
响应时间(总计)0ms
|
| #260#260 |
Mercury 2.5 Previewlow
|
5.0… |
Inception |
$0.011
…
|
1.31s… |
只有当某个测试的所有运行都通过时,才计为完全通过。
答案错误: 12 未遵循指令: 2 API 错误: 1 无答案: 1
响应时间(平均)1.31s
响应时间(最大)7.29s
响应时间(总计)28.77s
…
|
- 总测试数
- 22
- 错误测试数
- 16
- 尝试通过率
- 47.0%
- 输入令牌
- 133,525
- 输出令牌
- 7,259
- 推理令牌
- 24,716
- 响应时间(平均)
- 1.31s
- 响应时间(总计)
- 28.77s
- 响应时间(最大)
- 7.29s
-
反AI技巧
: 5.6
只有当某个测试的所有运行都通过时,才计为完全通过。
答案错误: 2 未遵循指令: 1
响应时间(平均)759ms
响应时间(最大)1.10s
响应时间(总计)3.04s
-
编程
: 5.5
只有当某个测试的所有运行都通过时,才计为完全通过。
答案错误: 2
响应时间(平均)972ms
响应时间(最大)1.02s
响应时间(总计)2.92s
-
综合
: 3.0
只有当某个测试的所有运行都通过时,才计为完全通过。
无答案: 1 答案错误: 1
响应时间(平均)4.77s
响应时间(最大)7.29s
响应时间(总计)9.54s
-
数据解析与提取
: 6.3
只有当某个测试的所有运行都通过时,才计为完全通过。
答案错误: 1
响应时间(平均)1.12s
响应时间(最大)1.54s
响应时间(总计)2.24s
-
领域专项
: 4.1
只有当某个测试的所有运行都通过时,才计为完全通过。
答案错误: 3
响应时间(平均)836ms
响应时间(最大)1.06s
响应时间(总计)2.51s
-
通用智能
: 5.0
只有当某个测试的所有运行都通过时,才计为完全通过。
未遵循指令: 1
响应时间(平均)1.05s
响应时间(最大)1.05s
响应时间(总计)1.05s
-
指令遵循
: 6.3
只有当某个测试的所有运行都通过时,才计为完全通过。
答案错误: 1
响应时间(平均)1.60s
响应时间(最大)2.42s
响应时间(总计)3.20s
-
谜题求解
: 8.2
只有当某个测试的所有运行都通过时,才计为完全通过。
答案错误: 1
响应时间(平均)710ms
响应时间(最大)792ms
响应时间(总计)2.13s
-
工具调用
: 2.8
只有当某个测试的所有运行都通过时,才计为完全通过。
API 错误: 1
响应时间(平均)1.57s
响应时间(最大)1.57s
响应时间(总计)1.57s
-
常识问答
: 3.0
只有当某个测试的所有运行都通过时,才计为完全通过。
答案错误: 1
响应时间(平均)591ms
响应时间(最大)591ms
响应时间(总计)591ms
|
| #298#298 |
Granite 4.1 8Bnone
|
4.0… |
IBM Granite |
$0.007
…
|
1.44s… |
只有当某个测试的所有运行都通过时,才计为完全通过。
答案错误: 13 未遵循指令: 4 无效工具调用: 2 额外格式: 1
响应时间(平均)1.44s
响应时间(最大)16.67s
响应时间(总计)31.75s
…
|
- 总测试数
- 22
- 错误测试数
- 20
- 尝试通过率
- 9.1%
- 输入令牌
- 113,836
- 输出令牌
- 5,996
- 推理令牌
- 0
- 响应时间(平均)
- 1.44s
- 响应时间(总计)
- 31.75s
- 响应时间(最大)
- 16.67s
-
反AI技巧
: 4.9
只有当某个测试的所有运行都通过时,才计为完全通过。
答案错误: 2 未遵循指令: 1
响应时间(平均)844ms
响应时间(最大)1.91s
响应时间(总计)3.38s
-
编程
: 4.5
只有当某个测试的所有运行都通过时,才计为完全通过。
额外格式: 1 未遵循指令: 1 答案错误: 1
响应时间(平均)775ms
响应时间(最大)1.07s
响应时间(总计)2.33s
-
综合
: 3.0
只有当某个测试的所有运行都通过时,才计为完全通过。
无效工具调用: 2
响应时间(平均)9.28s
响应时间(最大)16.67s
响应时间(总计)18.55s
-
数据解析与提取
: 3.0
只有当某个测试的所有运行都通过时,才计为完全通过。
答案错误: 2
响应时间(平均)575ms
响应时间(最大)583ms
响应时间(总计)1.15s
-
领域专项
: 3.0
只有当某个测试的所有运行都通过时,才计为完全通过。
答案错误: 3
响应时间(平均)287ms
响应时间(最大)348ms
响应时间(总计)860ms
-
通用智能
: 4.0
只有当某个测试的所有运行都通过时,才计为完全通过。
答案错误: 1
响应时间(平均)499ms
响应时间(最大)499ms
响应时间(总计)499ms
-
指令遵循
: 3.6
只有当某个测试的所有运行都通过时,才计为完全通过。
未遵循指令: 1 答案错误: 1
响应时间(平均)344ms
响应时间(最大)358ms
响应时间(总计)687ms
-
谜题求解
: 3.2
只有当某个测试的所有运行都通过时,才计为完全通过。
答案错误: 2 未遵循指令: 1
响应时间(平均)608ms
响应时间(最大)960ms
响应时间(总计)1.82s
-
工具调用
: 10.0
只有当某个测试的所有运行都通过时,才计为完全通过。
没有失败答案。
响应时间(平均)2.17s
响应时间(最大)2.17s
响应时间(总计)2.17s
-
常识问答
: 3.0
只有当某个测试的所有运行都通过时,才计为完全通过。
答案错误: 1
响应时间(平均)306ms
响应时间(最大)306ms
响应时间(总计)306ms
|
| #236#236 |
GPT-5.6 Lunanone
|
5.4… |
OpenAI |
$0.029
↓
…
|
1.50s… |
只有当某个测试的所有运行都通过时,才计为完全通过。
答案错误: 14 额外格式: 1 无效工具调用: 1
响应时间(平均)1.50s
响应时间(最大)10.57s
响应时间(总计)33.05s
…
|
- 总测试数
- 22
- 错误测试数
- 16
- 尝试通过率
- 36.4%
- 输入令牌
- 101,332
- 输出令牌
- 6,709
- 推理令牌
- 0
- 响应时间(平均)
- 1.50s
- 响应时间(总计)
- 33.05s
- 响应时间(最大)
- 10.57s
-
反AI技巧
: 4.8
只有当某个测试的所有运行都通过时,才计为完全通过。
答案错误: 3
响应时间(平均)901ms
响应时间(最大)1.45s
响应时间(总计)3.60s
-
编程
: 3.8
只有当某个测试的所有运行都通过时,才计为完全通过。
答案错误: 3
响应时间(平均)980ms
响应时间(最大)1.57s
响应时间(总计)2.94s
-
综合
: 3.2
只有当某个测试的所有运行都通过时,才计为完全通过。
无效工具调用: 1 答案错误: 1
响应时间(平均)6.68s
响应时间(最大)10.57s
响应时间(总计)13.35s
-
数据解析与提取
: 10.0
只有当某个测试的所有运行都通过时,才计为完全通过。
没有失败答案。
响应时间(平均)758ms
响应时间(最大)803ms
响应时间(总计)1.52s
-
领域专项
: 3.6
只有当某个测试的所有运行都通过时,才计为完全通过。
答案错误: 3
响应时间(平均)784ms
响应时间(最大)855ms
响应时间(总计)2.35s
-
通用智能
: 5.0
只有当某个测试的所有运行都通过时,才计为完全通过。
答案错误: 1
响应时间(平均)1.00s
响应时间(最大)1.00s
响应时间(总计)1.00s
-
指令遵循
: 7.1
只有当某个测试的所有运行都通过时,才计为完全通过。
答案错误: 1
响应时间(平均)1.23s
响应时间(最大)1.66s
响应时间(总计)2.47s
-
谜题求解
: 5.3
只有当某个测试的所有运行都通过时,才计为完全通过。
额外格式: 1 答案错误: 1
响应时间(平均)790ms
响应时间(最大)865ms
响应时间(总计)2.37s
-
工具调用
: 10.0
只有当某个测试的所有运行都通过时,才计为完全通过。
没有失败答案。
响应时间(平均)2.80s
响应时间(最大)2.80s
响应时间(总计)2.80s
-
常识问答
: 3.0
只有当某个测试的所有运行都通过时,才计为完全通过。
答案错误: 1
响应时间(平均)651ms
响应时间(最大)651ms
响应时间(总计)651ms
|
| #241#241 |
Inkling Smallnone
|
5.3… |
Thinkingmachines |
$0.054
↓
…
|
1.51s… |
只有当某个测试的所有运行都通过时,才计为完全通过。
答案错误: 15 未遵循指令: 1 无效工具调用: 1
响应时间(平均)1.51s
响应时间(最大)12.35s
响应时间(总计)33.21s
…
|
- 总测试数
- 22
- 错误测试数
- 17
- 尝试通过率
- 24.2%
- 输入令牌
- 94,733
- 输出令牌
- 8,770
- 推理令牌
- 0
- 响应时间(平均)
- 1.51s
- 响应时间(总计)
- 33.21s
- 响应时间(最大)
- 12.35s
-
反AI技巧
: 3.1
只有当某个测试的所有运行都通过时,才计为完全通过。
答案错误: 4
响应时间(平均)526ms
响应时间(最大)1.03s
响应时间(总计)2.10s
-
编程
: 3.6
只有当某个测试的所有运行都通过时,才计为完全通过。
答案错误: 3
响应时间(平均)759ms
响应时间(最大)1.52s
响应时间(总计)2.28s
-
综合
: 6.5
只有当某个测试的所有运行都通过时,才计为完全通过。
无效工具调用: 1
响应时间(平均)9.33s
响应时间(最大)12.35s
响应时间(总计)18.66s
-
数据解析与提取
: 10.0
只有当某个测试的所有运行都通过时,才计为完全通过。
没有失败答案。
响应时间(平均)782ms
响应时间(最大)961ms
响应时间(总计)1.56s
-
领域专项
: 5.3
只有当某个测试的所有运行都通过时,才计为完全通过。
答案错误: 2
响应时间(平均)442ms
响应时间(最大)517ms
响应时间(总计)1.33s
-
通用智能
: 5.0
只有当某个测试的所有运行都通过时,才计为完全通过。
答案错误: 1
响应时间(平均)964ms
响应时间(最大)964ms
响应时间(总计)964ms
-
指令遵循
: 6.3
只有当某个测试的所有运行都通过时,才计为完全通过。
答案错误: 1
响应时间(平均)767ms
响应时间(最大)1.02s
响应时间(总计)1.53s
-
谜题求解
: 3.2
只有当某个测试的所有运行都通过时,才计为完全通过。
答案错误: 3
响应时间(平均)665ms
响应时间(最大)734ms
响应时间(总计)2.00s
-
工具调用
: 3.0
只有当某个测试的所有运行都通过时,才计为完全通过。
未遵循指令: 1
响应时间(平均)2.31s
响应时间(最大)2.31s
响应时间(总计)2.31s
-
常识问答
: 3.0
只有当某个测试的所有运行都通过时,才计为完全通过。
答案错误: 1
响应时间(平均)481ms
响应时间(最大)481ms
响应时间(总计)481ms
|
| #242#242 |
Laguna XS 2.1none
|
5.3… |
Poolside |
$0.008
…
|
1.55s… |
只有当某个测试的所有运行都通过时,才计为完全通过。
答案错误: 14 未遵循指令: 1 无效工具调用: 1 超时: 1
响应时间(平均)1.55s
响应时间(最大)19.02s
响应时间(总计)34.01s
…
|
- 总测试数
- 22
- 错误测试数
- 17
- 尝试通过率
- 30.3%
- 输入令牌
- 91,607
- 输出令牌
- 13,377
- 推理令牌
- 0
- 响应时间(平均)
- 1.55s
- 响应时间(总计)
- 34.01s
- 响应时间(最大)
- 19.02s
-
反AI技巧
: 5.3
只有当某个测试的所有运行都通过时,才计为完全通过。
答案错误: 2 未遵循指令: 1
响应时间(平均)755ms
响应时间(最大)2.30s
响应时间(总计)3.02s
-
编程
: 4.3
只有当某个测试的所有运行都通过时,才计为完全通过。
答案错误: 3
响应时间(平均)623ms
响应时间(最大)1.34s
响应时间(总计)1.87s
-
综合
: 3.0
只有当某个测试的所有运行都通过时,才计为完全通过。
无效工具调用: 1 答案错误: 1
响应时间(平均)10.39s
响应时间(最大)19.02s
响应时间(总计)20.78s
-
数据解析与提取
: 10.0
只有当某个测试的所有运行都通过时,才计为完全通过。
没有失败答案。
响应时间(平均)768ms
响应时间(最大)824ms
响应时间(总计)1.54s
-
领域专项
: 5.3
只有当某个测试的所有运行都通过时,才计为完全通过。
答案错误: 2
响应时间(平均)303ms
响应时间(最大)379ms
响应时间(总计)910ms
-
通用智能
: 5.0
只有当某个测试的所有运行都通过时,才计为完全通过。
答案错误: 1
响应时间(平均)529ms
响应时间(最大)529ms
响应时间(总计)529ms
-
指令遵循
: 3.8
只有当某个测试的所有运行都通过时,才计为完全通过。
超时: 1 答案错误: 1
响应时间(平均)364ms
响应时间(最大)373ms
响应时间(总计)728ms
-
谜题求解
: 3.0
只有当某个测试的所有运行都通过时,才计为完全通过。
答案错误: 3
响应时间(平均)1.01s
响应时间(最大)1.92s
响应时间(总计)3.02s
-
工具调用
: 10.0
只有当某个测试的所有运行都通过时,才计为完全通过。
没有失败答案。
响应时间(平均)1.36s
响应时间(最大)1.36s
响应时间(总计)1.36s
-
常识问答
: 3.0
只有当某个测试的所有运行都通过时,才计为完全通过。
答案错误: 1
响应时间(平均)254ms
响应时间(最大)254ms
响应时间(总计)254ms
|
| #168#168 |
Gemini 3.1 Flash Lite Previewnone
|
6.4… |
Google |
$0.052
…
|
1.56s… |
只有当某个测试的所有运行都通过时,才计为完全通过。
答案错误: 7 未遵循指令: 2 无答案: 1
响应时间(平均)1.56s
响应时间(最大)9.27s
响应时间(总计)34.32s
…
|
- 总测试数
- 22
- 错误测试数
- 10
- 尝试通过率
- 57.6%
- 输入令牌
- 120,955
- 输出令牌
- 14,161
- 推理令牌
- 0
- 响应时间(平均)
- 1.56s
- 响应时间(总计)
- 34.32s
- 响应时间(最大)
- 9.27s
-
反AI技巧
: 7.5
只有当某个测试的所有运行都通过时,才计为完全通过。
未遵循指令: 1 答案错误: 1
响应时间(平均)1.04s
响应时间(最大)1.47s
响应时间(总计)4.17s
-
编程
: 5.5
只有当某个测试的所有运行都通过时,才计为完全通过。
答案错误: 2
响应时间(平均)967ms
响应时间(最大)1.47s
响应时间(总计)2.90s
-
综合
: 3.0
只有当某个测试的所有运行都通过时,才计为完全通过。
无答案: 1 答案错误: 1
响应时间(平均)6.23s
响应时间(最大)9.27s
响应时间(总计)12.46s
-
数据解析与提取
: 10.0
只有当某个测试的所有运行都通过时,才计为完全通过。
没有失败答案。
响应时间(平均)1.22s
响应时间(最大)1.33s
响应时间(总计)2.44s
-
领域专项
: 5.3
只有当某个测试的所有运行都通过时,才计为完全通过。
答案错误: 2
响应时间(平均)811ms
响应时间(最大)1.12s
响应时间(总计)2.43s
-
通用智能
: 4.0
只有当某个测试的所有运行都通过时,才计为完全通过。
未遵循指令: 1
响应时间(平均)741ms
响应时间(最大)741ms
响应时间(总计)741ms
-
指令遵循
: 10.0
只有当某个测试的所有运行都通过时,才计为完全通过。
没有失败答案。
响应时间(平均)1.13s
响应时间(最大)1.14s
响应时间(总计)2.27s
-
谜题求解
: 10.0
只有当某个测试的所有运行都通过时,才计为完全通过。
没有失败答案。
响应时间(平均)900ms
响应时间(最大)962ms
响应时间(总计)2.70s
-
工具调用
: 10.0
只有当某个测试的所有运行都通过时,才计为完全通过。
没有失败答案。
响应时间(平均)3.39s
响应时间(最大)3.39s
响应时间(总计)3.39s
-
常识问答
: 3.0
只有当某个测试的所有运行都通过时,才计为完全通过。
答案错误: 1
响应时间(平均)814ms
响应时间(最大)814ms
响应时间(总计)814ms
|
| #207#207 |
GPT-5.4 Mininone
|
5.9… |
OpenAI |
$0.095
…
|
1.58s… |
只有当某个测试的所有运行都通过时,才计为完全通过。
答案错误: 13 未遵循指令: 3
响应时间(平均)1.58s
响应时间(最大)9.92s
响应时间(总计)34.86s
…
|
- 总测试数
- 22
- 错误测试数
- 16
- 尝试通过率
- 31.8%
- 输入令牌
- 79,076
- 输出令牌
- 7,898
- 推理令牌
- 0
- 响应时间(平均)
- 1.58s
- 响应时间(总计)
- 34.86s
- 响应时间(最大)
- 9.92s
-
反AI技巧
: 3.1
只有当某个测试的所有运行都通过时,才计为完全通过。
答案错误: 4
响应时间(平均)929ms
响应时间(最大)1.55s
响应时间(总计)3.72s
-
编程
: 5.5
只有当某个测试的所有运行都通过时,才计为完全通过。
答案错误: 2
响应时间(平均)913ms
响应时间(最大)1.19s
响应时间(总计)2.74s
-
综合
: 6.5
只有当某个测试的所有运行都通过时,才计为完全通过。
答案错误: 1
响应时间(平均)6.22s
响应时间(最大)9.92s
响应时间(总计)12.43s
-
数据解析与提取
: 10.0
只有当某个测试的所有运行都通过时,才计为完全通过。
没有失败答案。
响应时间(平均)1.30s
响应时间(最大)1.58s
响应时间(总计)2.61s
-
领域专项
: 3.6
只有当某个测试的所有运行都通过时,才计为完全通过。
答案错误: 3
响应时间(平均)1.31s
响应时间(最大)1.78s
响应时间(总计)3.93s
-
通用智能
: 4.8
只有当某个测试的所有运行都通过时,才计为完全通过。
未遵循指令: 1
响应时间(平均)1.82s
响应时间(最大)1.82s
响应时间(总计)1.82s
-
指令遵循
: 6.3
只有当某个测试的所有运行都通过时,才计为完全通过。
答案错误: 1
响应时间(平均)728ms
响应时间(最大)731ms
响应时间(总计)1.46s
-
谜题求解
: 5.4
只有当某个测试的所有运行都通过时,才计为完全通过。
未遵循指令: 1 答案错误: 1
响应时间(平均)836ms
响应时间(最大)958ms
响应时间(总计)2.51s
-
工具调用
: 3.0
只有当某个测试的所有运行都通过时,才计为完全通过。
未遵循指令: 1
响应时间(平均)2.32s
响应时间(最大)2.32s
响应时间(总计)2.32s
-
常识问答
: 3.0
只有当某个测试的所有运行都通过时,才计为完全通过。
答案错误: 1
响应时间(平均)1.33s
响应时间(最大)1.33s
响应时间(总计)1.33s
|
| #303#303 |
Grok 4.1 Fastnone已归档模型:该模型将不再更新,也不会在新测试中继续测试。
|
3.8… |
X AI |
$0.008
↓
…
|
1.62s… |
只有当某个测试的所有运行都通过时,才计为完全通过。
答案错误: 13 未遵循指令: 3
响应时间(平均)1.62s
响应时间(最大)5.51s
响应时间(总计)19.48s
…
|
- 总测试数
- 19
- 错误测试数
- 16
- 尝试通过率
- 19.7%
- 输入令牌
- 36,608
- 输出令牌
- 1,723
- 推理令牌
- 0
- 响应时间(平均)
- 1.62s
- 响应时间(总计)
- 19.48s
- 响应时间(最大)
- 5.51s
-
反AI技巧
: 3.2
只有当某个测试的所有运行都通过时,才计为完全通过。
答案错误: 3 未遵循指令: 1
响应时间(平均)1.07s
响应时间(最大)1.73s
响应时间(总计)2.15s
-
编程
: 1.8
只有当某个测试的所有运行都通过时,才计为完全通过。
答案错误: 1
响应时间(平均)1.79s
响应时间(最大)1.79s
响应时间(总计)1.79s
-
综合
: 1.5
只有当某个测试的所有运行都通过时,才计为完全通过。
答案错误: 1
响应时间(平均)3.33s
响应时间(最大)3.33s
响应时间(总计)3.33s
-
数据解析与提取
: 10.0
只有当某个测试的所有运行都通过时,才计为完全通过。
没有失败答案。
响应时间(平均)943ms
响应时间(最大)943ms
响应时间(总计)943ms
-
领域专项
: 5.9
只有当某个测试的所有运行都通过时,才计为完全通过。
答案错误: 2
响应时间(平均)1.06s
响应时间(最大)1.06s
响应时间(总计)1.06s
-
通用智能
: 4.4
只有当某个测试的所有运行都通过时,才计为完全通过。
未遵循指令: 1
响应时间(平均)1.08s
响应时间(最大)1.08s
响应时间(总计)1.08s
-
指令遵循
: 3.0
只有当某个测试的所有运行都通过时,才计为完全通过。
未遵循指令: 1 答案错误: 1
响应时间(平均)685ms
响应时间(最大)685ms
响应时间(总计)685ms
-
谜题求解
: 3.0
只有当某个测试的所有运行都通过时,才计为完全通过。
答案错误: 3
响应时间(平均)1.10s
响应时间(最大)1.36s
响应时间(总计)2.21s
-
工具调用
: 2.8
只有当某个测试的所有运行都通过时,才计为完全通过。
答案错误: 1
响应时间(平均)5.51s
响应时间(最大)5.51s
响应时间(总计)5.51s
-
常识问答
: 3.0
只有当某个测试的所有运行都通过时,才计为完全通过。
答案错误: 1
响应时间(平均)731ms
响应时间(最大)731ms
响应时间(总计)731ms
|
| #197#197 |
GPT-5.6 Terranone
|
6.0… |
OpenAI |
$0.280
↓
…
|
1.66s… |
只有当某个测试的所有运行都通过时,才计为完全通过。
答案错误: 11 未遵循指令: 1 无效工具调用: 1 无答案: 1
响应时间(平均)1.66s
响应时间(最大)10.07s
响应时间(总计)36.54s
…
|
- 总测试数
- 22
- 错误测试数
- 14
- 尝试通过率
- 42.4%
- 输入令牌
- 102,268
- 输出令牌
- 6,221
- 推理令牌
- 0
- 响应时间(平均)
- 1.66s
- 响应时间(总计)
- 36.54s
- 响应时间(最大)
- 10.07s
-
反AI技巧
: 4.8
只有当某个测试的所有运行都通过时,才计为完全通过。
答案错误: 3
响应时间(平均)942ms
响应时间(最大)1.09s
响应时间(总计)3.77s
-
编程
: 5.5
只有当某个测试的所有运行都通过时,才计为完全通过。
答案错误: 2
响应时间(平均)1.00s
响应时间(最大)1.14s
响应时间(总计)3.01s
-
综合
: 2.9
只有当某个测试的所有运行都通过时,才计为完全通过。
无效工具调用: 1 无答案: 1
响应时间(平均)7.02s
响应时间(最大)10.07s
响应时间(总计)14.05s
-
数据解析与提取
: 10.0
只有当某个测试的所有运行都通过时,才计为完全通过。
没有失败答案。
响应时间(平均)1.13s
响应时间(最大)1.27s
响应时间(总计)2.26s
-
领域专项
: 5.3
只有当某个测试的所有运行都通过时,才计为完全通过。
答案错误: 2
响应时间(平均)843ms
响应时间(最大)923ms
响应时间(总计)2.53s
-
通用智能
: 5.0
只有当某个测试的所有运行都通过时,才计为完全通过。
答案错误: 1
响应时间(平均)1.03s
响应时间(最大)1.03s
响应时间(总计)1.03s
-
指令遵循
: 8.5
只有当某个测试的所有运行都通过时,才计为完全通过。
未遵循指令: 1
响应时间(平均)1.15s
响应时间(最大)1.48s
响应时间(总计)2.30s
-
谜题求解
: 5.3
只有当某个测试的所有运行都通过时,才计为完全通过。
答案错误: 2
响应时间(平均)1.23s
响应时间(最大)2.02s
响应时间(总计)3.70s
-
工具调用
: 9.6
只有当某个测试的所有运行都通过时,才计为完全通过。
没有失败答案。
响应时间(平均)3.10s
响应时间(最大)3.10s
响应时间(总计)3.10s
-
常识问答
: 3.0
只有当某个测试的所有运行都通过时,才计为完全通过。
答案错误: 1
响应时间(平均)787ms
响应时间(最大)787ms
响应时间(总计)787ms
|
| #186#186 |
Gemini 3.1 Flash Litenone
|
6.1… |
Google |
$0.046
…
|
1.75s… |
只有当某个测试的所有运行都通过时,才计为完全通过。
答案错误: 11 未遵循指令: 1 无答案: 1
响应时间(平均)1.75s
响应时间(最大)16.25s
响应时间(总计)38.42s
…
|
- 总测试数
- 22
- 错误测试数
- 13
- 尝试通过率
- 50.0%
- 输入令牌
- 118,059
- 输出令牌
- 10,723
- 推理令牌
- 0
- 响应时间(平均)
- 1.75s
- 响应时间(总计)
- 38.42s
- 响应时间(最大)
- 16.25s
-
反AI技巧
: 7.5
只有当某个测试的所有运行都通过时,才计为完全通过。
答案错误: 2
响应时间(平均)1.07s
响应时间(最大)1.91s
响应时间(总计)4.27s
-
编程
: 5.5
只有当某个测试的所有运行都通过时,才计为完全通过。
答案错误: 2
响应时间(平均)938ms
响应时间(最大)1.59s
响应时间(总计)2.81s
-
综合
: 3.0
只有当某个测试的所有运行都通过时,才计为完全通过。
无答案: 1 答案错误: 1
响应时间(平均)9.49s
响应时间(最大)16.25s
响应时间(总计)18.98s
-
数据解析与提取
: 10.0
只有当某个测试的所有运行都通过时,才计为完全通过。
没有失败答案。
响应时间(平均)843ms
响应时间(最大)907ms
响应时间(总计)1.69s
-
领域专项
: 2.9
只有当某个测试的所有运行都通过时,才计为完全通过。
答案错误: 3
响应时间(平均)701ms
响应时间(最大)814ms
响应时间(总计)2.10s
-
通用智能
: 4.0
只有当某个测试的所有运行都通过时,才计为完全通过。
答案错误: 1
响应时间(平均)992ms
响应时间(最大)992ms
响应时间(总计)992ms
-
指令遵循
: 10.0
只有当某个测试的所有运行都通过时,才计为完全通过。
没有失败答案。
响应时间(平均)859ms
响应时间(最大)975ms
响应时间(总计)1.72s
-
谜题求解
: 6.3
只有当某个测试的所有运行都通过时,才计为完全通过。
未遵循指令: 1 答案错误: 1
响应时间(平均)720ms
响应时间(最大)826ms
响应时间(总计)2.16s
-
工具调用
: 10.0
只有当某个测试的所有运行都通过时,才计为完全通过。
没有失败答案。
响应时间(平均)2.97s
响应时间(最大)2.97s
响应时间(总计)2.97s
-
常识问答
: 3.0
只有当某个测试的所有运行都通过时,才计为完全通过。
答案错误: 1
响应时间(平均)733ms
响应时间(最大)733ms
响应时间(总计)733ms
|
| #182#182 |
Gemini 3.1 Flash Liteminimal
|
6.1… |
Google |
$0.047
…
|
1.85s… |
只有当某个测试的所有运行都通过时,才计为完全通过。
答案错误: 8 未遵循指令: 3 无答案: 1
响应时间(平均)1.85s
响应时间(最大)12.97s
响应时间(总计)40.74s
…
|
- 总测试数
- 22
- 错误测试数
- 12
- 尝试通过率
- 51.5%
- 输入令牌
- 119,076
- 输出令牌
- 11,118
- 推理令牌
- 0
- 响应时间(平均)
- 1.85s
- 响应时间(总计)
- 40.74s
- 响应时间(最大)
- 12.97s
-
反AI技巧
: 8.3
只有当某个测试的所有运行都通过时,才计为完全通过。
答案错误: 1
响应时间(平均)1.10s
响应时间(最大)1.65s
响应时间(总计)4.42s
-
编程
: 5.5
只有当某个测试的所有运行都通过时,才计为完全通过。
答案错误: 2
响应时间(平均)831ms
响应时间(最大)1.31s
响应时间(总计)2.49s
-
综合
: 3.0
只有当某个测试的所有运行都通过时,才计为完全通过。
无答案: 1 答案错误: 1
响应时间(平均)7.75s
响应时间(最大)12.97s
响应时间(总计)15.50s
-
数据解析与提取
: 10.0
只有当某个测试的所有运行都通过时,才计为完全通过。
没有失败答案。
响应时间(平均)1.04s
响应时间(最大)1.32s
响应时间(总计)2.07s
-
领域专项
: 2.9
只有当某个测试的所有运行都通过时,才计为完全通过。
答案错误: 3
响应时间(平均)972ms
响应时间(最大)1.16s
响应时间(总计)2.92s
-
通用智能
: 4.0
只有当某个测试的所有运行都通过时,才计为完全通过。
未遵循指令: 1
响应时间(平均)791ms
响应时间(最大)791ms
响应时间(总计)791ms
-
指令遵循
: 10.0
只有当某个测试的所有运行都通过时,才计为完全通过。
没有失败答案。
响应时间(平均)932ms
响应时间(最大)1.00s
响应时间(总计)1.86s
-
谜题求解
: 6.0
只有当某个测试的所有运行都通过时,才计为完全通过。
未遵循指令: 2
响应时间(平均)2.15s
响应时间(最大)4.49s
响应时间(总计)6.45s
-
工具调用
: 10.0
只有当某个测试的所有运行都通过时,才计为完全通过。
没有失败答案。
响应时间(平均)3.51s
响应时间(最大)3.51s
响应时间(总计)3.51s
-
常识问答
: 3.0
只有当某个测试的所有运行都通过时,才计为完全通过。
答案错误: 1
响应时间(平均)724ms
响应时间(最大)724ms
响应时间(总计)724ms
|
| #263#263 |
GPT-4o-mininone
|
5.0… |
OpenAI |
$0.010
…
|
1.92s… |
只有当某个测试的所有运行都通过时,才计为完全通过。
答案错误: 15 未遵循指令: 1 无答案: 1
响应时间(平均)1.92s
响应时间(最大)7.58s
响应时间(总计)30.71s
…
|
- 总测试数
- 22
- 错误测试数
- 17
- 尝试通过率
- 22.7%
- 输入令牌
- 53,145
- 输出令牌
- 2,913
- 推理令牌
- 0
- 响应时间(平均)
- 1.92s
- 响应时间(总计)
- 30.71s
- 响应时间(最大)
- 7.58s
-
反AI技巧
: 4.8
只有当某个测试的所有运行都通过时,才计为完全通过。
答案错误: 3
响应时间(平均)1.34s
响应时间(最大)1.83s
响应时间(总计)2.67s
-
编程
: 3.2
只有当某个测试的所有运行都通过时,才计为完全通过。
答案错误: 3
响应时间(平均)1.63s
响应时间(最大)2.55s
响应时间(总计)4.90s
-
综合
: 3.0
只有当某个测试的所有运行都通过时,才计为完全通过。
无答案: 1 答案错误: 1
响应时间(平均)6.32s
响应时间(最大)7.58s
响应时间(总计)12.64s
-
数据解析与提取
: 10.0
只有当某个测试的所有运行都通过时,才计为完全通过。
没有失败答案。
响应时间(平均)1.27s
响应时间(最大)1.27s
响应时间(总计)1.27s
-
领域专项
: 3.0
只有当某个测试的所有运行都通过时,才计为完全通过。
答案错误: 3
响应时间(平均)743ms
响应时间(最大)848ms
响应时间(总计)1.49s
-
通用智能
: 4.0
只有当某个测试的所有运行都通过时,才计为完全通过。
答案错误: 1
响应时间(平均)909ms
响应时间(最大)909ms
响应时间(总计)909ms
-
指令遵循
: 6.3
只有当某个测试的所有运行都通过时,才计为完全通过。
答案错误: 1
响应时间(平均)1.11s
响应时间(最大)1.11s
响应时间(总计)1.11s
-
谜题求解
: 3.5
只有当某个测试的所有运行都通过时,才计为完全通过。
答案错误: 2 未遵循指令: 1
响应时间(平均)1.21s
响应时间(最大)1.37s
响应时间(总计)2.42s
-
工具调用
: 10.0
只有当某个测试的所有运行都通过时,才计为完全通过。
没有失败答案。
响应时间(平均)2.51s
响应时间(最大)2.51s
响应时间(总计)2.51s
-
常识问答
: 3.0
只有当某个测试的所有运行都通过时,才计为完全通过。
答案错误: 1
响应时间(平均)794ms
响应时间(最大)794ms
响应时间(总计)794ms
|
| #214#214 |
Inkling Smalllow
|
5.7… |
Thinkingmachines |
$0.055
↓
…
|
2.07s… |
只有当某个测试的所有运行都通过时,才计为完全通过。
答案错误: 9 未遵循指令: 2 无效工具调用: 2
响应时间(平均)2.07s
响应时间(最大)5.82s
响应时间(总计)45.64s
…
|
- 总测试数
- 22
- 错误测试数
- 13
- 尝试通过率
- 50.0%
- 输入令牌
- 81,447
- 输出令牌
- 2,715
- 推理令牌
- 11,971
- 响应时间(平均)
- 2.07s
- 响应时间(总计)
- 45.64s
- 响应时间(最大)
- 5.82s
-
反AI技巧
: 9.2
只有当某个测试的所有运行都通过时,才计为完全通过。
未遵循指令: 1
响应时间(平均)1.81s
响应时间(最大)3.73s
响应时间(总计)7.25s
-
编程
: 4.6
只有当某个测试的所有运行都通过时,才计为完全通过。
答案错误: 3
响应时间(平均)3.70s
响应时间(最大)5.82s
响应时间(总计)11.10s
-
综合
: 3.0
只有当某个测试的所有运行都通过时,才计为完全通过。
无效工具调用: 1 答案错误: 1
响应时间(平均)4.08s
响应时间(最大)4.59s
响应时间(总计)8.15s
-
数据解析与提取
: 10.0
只有当某个测试的所有运行都通过时,才计为完全通过。
没有失败答案。
响应时间(平均)1.25s
响应时间(最大)1.32s
响应时间(总计)2.50s
-
领域专项
: 5.3
只有当某个测试的所有运行都通过时,才计为完全通过。
答案错误: 2
响应时间(平均)852ms
响应时间(最大)918ms
响应时间(总计)2.56s
-
通用智能
: 5.3
只有当某个测试的所有运行都通过时,才计为完全通过。
未遵循指令: 1
响应时间(平均)1.42s
响应时间(最大)1.42s
响应时间(总计)1.42s
-
指令遵循
: 9.9
只有当某个测试的所有运行都通过时,才计为完全通过。
没有失败答案。
响应时间(平均)1.89s
响应时间(最大)2.18s
响应时间(总计)3.78s
-
谜题求解
: 5.3
只有当某个测试的所有运行都通过时,才计为完全通过。
答案错误: 2
响应时间(平均)1.56s
响应时间(最大)2.38s
响应时间(总计)4.68s
-
工具调用
: 3.0
只有当某个测试的所有运行都通过时,才计为完全通过。
无效工具调用: 1
响应时间(平均)2.21s
响应时间(最大)2.21s
响应时间(总计)2.21s
-
常识问答
: 3.0
只有当某个测试的所有运行都通过时,才计为完全通过。
答案错误: 1
响应时间(平均)2.00s
响应时间(最大)2.00s
响应时间(总计)2.00s
|
| #209#209 |
GPT-5.4none
|
5.8… |
OpenAI |
$0.397
…
|
2.08s… |
只有当某个测试的所有运行都通过时,才计为完全通过。
答案错误: 14 未遵循指令: 1
响应时间(平均)2.08s
响应时间(最大)15.63s
响应时间(总计)45.75s
…
|
- 总测试数
- 22
- 错误测试数
- 15
- 尝试通过率
- 34.9%
- 输入令牌
- 108,641
- 输出令牌
- 8,339
- 推理令牌
- 0
- 响应时间(平均)
- 2.08s
- 响应时间(总计)
- 45.75s
- 响应时间(最大)
- 15.63s
-
反AI技巧
: 3.2
只有当某个测试的所有运行都通过时,才计为完全通过。
答案错误: 4
响应时间(平均)1.21s
响应时间(最大)2.58s
响应时间(总计)4.85s
-
编程
: 5.5
只有当某个测试的所有运行都通过时,才计为完全通过。
答案错误: 2
响应时间(平均)1.62s
响应时间(最大)2.95s
响应时间(总计)4.85s
-
综合
: 3.0
只有当某个测试的所有运行都通过时,才计为完全通过。
答案错误: 2
响应时间(平均)9.26s
响应时间(最大)15.63s
响应时间(总计)18.52s
-
数据解析与提取
: 10.0
只有当某个测试的所有运行都通过时,才计为完全通过。
没有失败答案。
响应时间(平均)1.04s
响应时间(最大)1.06s
响应时间(总计)2.08s
-
领域专项
: 5.3
只有当某个测试的所有运行都通过时,才计为完全通过。
答案错误: 2
响应时间(平均)1.15s
响应时间(最大)1.54s
响应时间(总计)3.46s
-
通用智能
: 4.4
只有当某个测试的所有运行都通过时,才计为完全通过。
答案错误: 1
响应时间(平均)1.78s
响应时间(最大)1.78s
响应时间(总计)1.78s
-
指令遵循
: 6.5
只有当某个测试的所有运行都通过时,才计为完全通过。
答案错误: 1
响应时间(平均)1.07s
响应时间(最大)1.17s
响应时间(总计)2.15s
-
谜题求解
: 5.6
只有当某个测试的所有运行都通过时,才计为完全通过。
未遵循指令: 1 答案错误: 1
响应时间(平均)1.44s
响应时间(最大)1.82s
响应时间(总计)4.33s
-
工具调用
: 10.0
只有当某个测试的所有运行都通过时,才计为完全通过。
没有失败答案。
响应时间(平均)2.75s
响应时间(最大)2.75s
响应时间(总计)2.75s
-
常识问答
: 3.0
只有当某个测试的所有运行都通过时,才计为完全通过。
答案错误: 1
响应时间(平均)990ms
响应时间(最大)990ms
响应时间(总计)990ms
|
| #127#127 |
GPT-5.6 Solnone
|
7.0… |
OpenAI |
$0.201
↓
…
|
2.17s… |
只有当某个测试的所有运行都通过时,才计为完全通过。
答案错误: 9 未遵循指令: 1
响应时间(平均)2.17s
响应时间(最大)12.81s
响应时间(总计)47.66s
…
|
- 总测试数
- 22
- 错误测试数
- 10
- 尝试通过率
- 63.6%
- 输入令牌
- 78,602
- 输出令牌
- 4,357
- 推理令牌
- 0
- 响应时间(平均)
- 2.17s
- 响应时间(总计)
- 47.66s
- 响应时间(最大)
- 12.81s
-
反AI技巧
: 8.3
只有当某个测试的所有运行都通过时,才计为完全通过。
答案错误: 1
响应时间(平均)1.27s
响应时间(最大)2.37s
响应时间(总计)5.09s
-
编程
: 5.5
只有当某个测试的所有运行都通过时,才计为完全通过。
答案错误: 2
响应时间(平均)1.39s
响应时间(最大)2.12s
响应时间(总计)4.16s
-
综合
: 6.5
只有当某个测试的所有运行都通过时,才计为完全通过。
答案错误: 1
响应时间(平均)8.37s
响应时间(最大)12.81s
响应时间(总计)16.74s
-
数据解析与提取
: 10.0
只有当某个测试的所有运行都通过时,才计为完全通过。
没有失败答案。
响应时间(平均)1.53s
响应时间(最大)1.63s
响应时间(总计)3.05s
-
领域专项
: 5.9
只有当某个测试的所有运行都通过时,才计为完全通过。
答案错误: 2
响应时间(平均)1.44s
响应时间(最大)1.70s
响应时间(总计)4.31s
-
通用智能
: 6.5
只有当某个测试的所有运行都通过时,才计为完全通过。
答案错误: 1
响应时间(平均)1.52s
响应时间(最大)1.52s
响应时间(总计)1.52s
-
指令遵循
: 8.5
只有当某个测试的所有运行都通过时,才计为完全通过。
未遵循指令: 1
响应时间(平均)1.33s
响应时间(最大)1.38s
响应时间(总计)2.66s
-
谜题求解
: 7.7
只有当某个测试的所有运行都通过时,才计为完全通过。
答案错误: 1
响应时间(平均)1.49s
响应时间(最大)2.05s
响应时间(总计)4.47s
-
工具调用
: 10.0
只有当某个测试的所有运行都通过时,才计为完全通过。
没有失败答案。
响应时间(平均)3.70s
响应时间(最大)3.70s
响应时间(总计)3.70s
-
常识问答
: 3.0
只有当某个测试的所有运行都通过时,才计为完全通过。
答案错误: 1
响应时间(平均)1.95s
响应时间(最大)1.95s
响应时间(总计)1.95s
|