Perplexity
Lansare: 2026-10-17
Testat la: 2026-10-17 10:59
perplexity/pplx-decider-v1.2::none
27BDensSursă deschisă Rezumat
Decider V1.2 obține 2.6 pe AI BENCHY și este pe #424. Are fiabilitate 9.4, rată de reușită 24.6%, cost total $0.001 și timp mediu de răspuns 517ms.
Date despre model
Documentat la 2026-10-17
- Parametri
- 27B
- Arhitectură
- Dens
- Disponibilitate
- Sursă deschisă
- Licență
- Apache-2.0
2.6
Consistență
4.9
9.4
$0.001
Total tokenuri de ieșire
67
Total tokenuri de intrare
48,363
Preț de intrare
$0.020 / 1M
Preț de ieșire
$0.000 / 1M
Preț citire cache
N/D
Preț scriere cache
N/D
Prețurile de cache se aplică tokenurilor de intrare. Citirea reutilizează prompturi salvate; scrierea le stochează și poate costa în plus. Tokenurile de ieșire folosesc prețul de ieșire.
Teste greșite: 7
Rată de trecere pe încercare: 24.6%
Acoperire benchmark: 36/69 încercări. Adaptoarele oferă variantele de răspuns. Acceptă 12/23 teste. Celelalte teste sunt incompatibile, nu eșuate. Scorul folosește suita completă.
Teste instabile
1
Testele instabile au avut rezultate mixte între rulări (cel puțin un succes și un eșec).
Grafice
Alege primul model, apoi fă clic pe al doilea model pentru a deschide o pagină alăturată.
Scor vs Cost total
Timp de răspuns (mediu)
Scor vs Timp de răspuns (mediu)
Total tokenuri de ieșire
Scor vs Total tokenuri de ieșire
Comparație rapidă
Decider V1.2defaultvsJev 1.13defaultDecider V1.2defaultvsDecider V1.1 27BdefaultDecider V1.2defaultvsd1-ultradefaultDecider V1.2defaultvsDrex v1.5defaultDecider V1.2defaultvsSpan-02defaultDecider V1.2defaultvsGPT-6 Luna DecisionsdefaultDecider V1.2defaultvsCommand A+lowDecider V1.2defaultvsKev 4BdefaultDecider V1.2defaultvsCommand A+noneDecider V1.2defaultvsJev 1.14default
Defalcare pe categorii
| Categorie | Scor | Consistență | Teste corecte |
|---|---|---|---|
| Sarcini agentice | 0.0 | 0.0 | |
| Trucuri anti-AI | 5.8 | 7.5 | |
| Programare | 4.5 | 6.7 | |
| Combinat | 0.0 | 0.0 | |
| Parsare și extragere de date | 6.5 | 10.0 | |
| Specific domeniului | 5.9 | 7.2 | |
| Inteligență generală | 0.0 | 0.0 | |
| Respectarea instrucțiunilor | 1.5 | 5.0 | |
| Rezolvare de puzzle-uri | 1.7 | 3.3 | |
| Apelare instrumente | 0.0 | 0.0 | |
| Cultură generală | 0.0 | 0.0 |