决策模型排名
四项测试,48 个决策,每个模型重复三次。
决策模型如何工作(英文) →| # | 模型 | 准确率 | 尝试次数 | 全对次数 | 每次请求耗时 | 整套费用 | 执行错误 | 路由 | 规则 | 证据 | 注入 |
|---|---|---|---|---|---|---|---|---|---|---|---|
| 1 | Jev 1.13 | 100.00% | 12/12 | 12/12 | 0.38s | $0.00108 | 0 | 100.0% | 100.0% | 100.0% | 100.0% |
| 2 | Kev 4B | 89.58% | 12/12 | 0/12 | 0.98s | $0.00066 | 0 | 91.7% | 91.7% | 91.7% | 83.3% |
| 3 | Solar Decide | 89.58% | 12/12 | 3/12 | 10.09s | $0.00612 | 0 | 100.0% | 91.7% | 91.7% | 75.0% |
| 4 | Tev1 4B Experimental | 87.50% | 12/12 | 3/12 | 0.88s | $0.00370 | 0 | 91.7% | 100.0% | 91.7% | 66.7% |
按正确决策排名,同分时比较费用。一次全对需要 12 个答案全部正确。覆盖不足时不授予排名。
费用包含全部 12 次请求。耗时针对含所有问题的完整请求,各供应商的处理方式可能不同。这些结果与通用排行榜分开。