#136 Mistral Small 4
none- Cost
- $0.002
- Time
- 10.4s
- Tokens
- 2,370 tok
AI BENCHY 对比
摘要
Mistral Small 4 vs Nemotron 3 Super benchmark 对比:Nemotron 3 Super 平均分领先,为 6.3 vs 5.1。 Mistral Small 4 benchmark 成本更低,为 $0.007 vs $0.021。 Mistral Small 4 更快,为 630ms vs 32.00s,通过率为 27.0% vs 41.3%。
推荐模型: Mistral Small 4 - 它提供了最佳整体取舍:得分有竞争力(5.1),成本低于Nemotron 3 Super,响应时间也较均衡。
基准结果生成自 AI BENCHY 测试套件,时间:: 2026-06-12
| 指标 | Mistral Small 4 Mistral Small 4 none | Nemotron 3 Super Nemotron 3 Super medium 免费可用 |
|---|---|---|
| 分数 | 5.1 | 6.3 |
| 排名 | #136 | #86 |
| 可靠性 | 10.0 | 10.0 |
| 一致性 | 9.5 | 9.2 |
| 测试正确 | ||
| 尝试通过率 | 27.0% | 41.3% |
| 不稳定测试 | 1 | 2 |
| 总运行次数 | 63 | 63 |
| 每个结果成本 | 0.139 | 0.004 |
| 总成本 | $0.007 | $0.021 |
| 输入价格 | $0.150 / 1M | $0.090 / 1M |
| 输出价格 | $0.600 / 1M | $0.450 / 1M |
| 总输入令牌 | 37,309 | 37,527 |
| 输出令牌 | 2,201 | 14,850 |
| 推理令牌 | 0 | 33,754 |
| 响应时间(平均) | 630ms | 32.00s |
| 响应时间(最大) | 1.72s | 232.25s |
| 响应时间(总计) | 13.22s | 607.91s |
Generation showcase
Prompt: Create a detailed SVG illustration of a hamster playing table tennis.
| 反AI技巧 | 分数 | 一致性 | 尝试通过率 | 不稳定测试 | 测试正确 | 响应时间(平均) | 输入令牌 | 输出令牌 | 推理令牌 |
|---|---|---|---|---|---|---|---|---|---|
| Mistral Small 4 | 3.4 | 7.9 | 16.7% | 1 | 395ms | 708 | 182 | 0 | |
| Nemotron 3 Super | 8.3 | 10.0 | 75.0% | 0 | 7.85s | 686 | 748 | 1,305 |
| 编程 | 分数 | 一致性 | 尝试通过率 | 不稳定测试 | 测试正确 | 响应时间(平均) | 输入令牌 | 输出令牌 | 推理令牌 |
|---|---|---|---|---|---|---|---|---|---|
| Mistral Small 4 | 3.7 | 9.7 | 0.0% | 0 | 901ms | 7,636 | 619 | 0 | |
| Nemotron 3 Super | 3.1 | 10.0 | 0.0% | 0 | 147.32s | 2,275 | 797 | 4,424 |
| 综合 | 分数 | 一致性 | 尝试通过率 | 不稳定测试 | 测试正确 | 响应时间(平均) | 输入令牌 | 输出令牌 | 推理令牌 |
|---|---|---|---|---|---|---|---|---|---|
| Mistral Small 4 | 3.0 | 10.0 | 0.0% | 0 | 1.72s | 11,640 | 496 | 0 | |
| Nemotron 3 Super | 10.0 | 10.0 | 100.0% | 0 | 87.80s | 15,561 | 2,021 | 9,996 |
| 数据解析与提取 | 分数 | 一致性 | 尝试通过率 | 不稳定测试 | 测试正确 | 响应时间(平均) | 输入令牌 | 输出令牌 | 推理令牌 |
|---|---|---|---|---|---|---|---|---|---|
| Mistral Small 4 | 10.0 | 10.0 | 100.0% | 0 | 822ms | 7,914 | 261 | 0 | |
| Nemotron 3 Super | 10.0 | 10.0 | 100.0% | 0 | 18.16s | 7,944 | 877 | 2,607 |
| 领域专项 | 分数 | 一致性 | 尝试通过率 | 不稳定测试 | 测试正确 | 响应时间(平均) | 输入令牌 | 输出令牌 | 推理令牌 |
|---|---|---|---|---|---|---|---|---|---|
| Mistral Small 4 | 5.3 | 10.0 | 33.3% | 0 | 367ms | 798 | 28 | 0 | |
| Nemotron 3 Super | 2.9 | 4.4 | 22.2% | 2 | 16.19s | 456 | 5,255 | 6,072 |
| 通用智能 | 分数 | 一致性 | 尝试通过率 | 不稳定测试 | 测试正确 | 响应时间(平均) | 输入令牌 | 输出令牌 | 推理令牌 |
|---|---|---|---|---|---|---|---|---|---|
| Mistral Small 4 | 4.0 | 10.0 | 0.0% | 0 | 729ms | 519 | 205 | 0 | |
| Nemotron 3 Super | 4.1 | 10.0 | 0.0% | 0 | 6.91s | 492 | 105 | 363 |
| 指令遵循 | 分数 | 一致性 | 尝试通过率 | 不稳定测试 | 测试正确 | 响应时间(平均) | 输入令牌 | 输出令牌 | 推理令牌 |
|---|---|---|---|---|---|---|---|---|---|
| Mistral Small 4 | 6.5 | 10.0 | 50.0% | 0 | 380ms | 729 | 69 | 0 | |
| Nemotron 3 Super | 7.3 | 10.0 | 50.0% | 0 | 6.97s | 723 | 956 | 2,383 |
| 谜题求解 | 分数 | 一致性 | 尝试通过率 | 不稳定测试 | 测试正确 | 响应时间(平均) | 输入令牌 | 输出令牌 | 推理令牌 |
|---|---|---|---|---|---|---|---|---|---|
| Mistral Small 4 | 3.1 | 9.9 | 0.0% | 0 | 399ms | 735 | 111 | 0 | |
| Nemotron 3 Super | 3.0 | 10.0 | 0.0% | 0 | 3.15s | 708 | 570 | 1,322 |
| 工具调用 | 分数 | 一致性 | 尝试通过率 | 不稳定测试 | 测试正确 | 响应时间(平均) | 输入令牌 | 输出令牌 | 推理令牌 |
|---|---|---|---|---|---|---|---|---|---|
| Mistral Small 4 | 10.0 | 10.0 | 100.0% | 0 | 1.40s | 6,420 | 213 | 0 | |
| Nemotron 3 Super | 10.0 | 10.0 | 100.0% | 0 | 39.75s | 8,544 | 270 | 1,969 |
| 常识问答 | 分数 | 一致性 | 尝试通过率 | 不稳定测试 | 测试正确 | 响应时间(平均) | 输入令牌 | 输出令牌 | 推理令牌 |
|---|---|---|---|---|---|---|---|---|---|
| Mistral Small 4 | 3.0 | 10.0 | 0.0% | 0 | 397ms | 210 | 17 | 0 | |
| Nemotron 3 Super | 3.0 | 10.0 | 0.0% | 0 | 55.32s | 138 | 3,251 | 3,313 |
切换对比组合