Classement des modèles de décision
Quatre tests. 48 décisions. Trois répétitions par modèle.
Fonctionnement des modèles de décision (anglais) →| # | Modèle | Exactitude | Tentatives | Tentatives parfaites | Temps / requête | Coût de la série | Erreurs d'exécution | Acheminement | Règles | Preuves | Injection de consignes |
|---|---|---|---|---|---|---|---|---|---|---|---|
| 1 | Jev 1.13 | 100.00% | 12/12 | 12/12 | 0.38s | $0.00108 | 0 | 100.0% | 100.0% | 100.0% | 100.0% |
| 2 | Kev 4B | 89.58% | 12/12 | 0/12 | 0.98s | $0.00066 | 0 | 91.7% | 91.7% | 91.7% | 83.3% |
| 3 | Solar Decide | 89.58% | 12/12 | 3/12 | 10.09s | $0.00612 | 0 | 100.0% | 91.7% | 91.7% | 75.0% |
| 4 | Tev1 4B Experimental | 87.50% | 12/12 | 3/12 | 0.88s | $0.00370 | 0 | 91.7% | 100.0% | 91.7% | 66.7% |
Classement selon les décisions correctes ; le coût départage les égalités. Une tentative parfaite exige 12 réponses correctes. Une couverture incomplète ne reçoit aucun rang.
Le coût couvre les 12 requêtes. Le temps mesure une requête entière avec toutes ses questions. Les fournisseurs peuvent les traiter différemment. Ces résultats sont séparés du classement général.