Perplexity
Lançamento: 2026-10-17
Testado em: 2026-10-17 10:59
perplexity/pplx-decider-v1.2::none
27BDensoCódigo aberto Resumo
Decider V1.2 marca 2.6 no AI BENCHY e fica em #424. Tem fiabilidade 9.4, taxa de acerto de 24.6%, custo total de $0.001 e tempo médio de resposta de 517ms.
Dados do modelo
Pesquisado em 2026-10-17
- Parâmetros
- 27B
- Arquitetura
- Denso
- Disponibilidade
- Código aberto
- Licença
- Apache-2.0
2.6
Consistência
4.9
$0.001
Total de tokens de saída
67
Total de tokens de entrada
48,363
Preço de entrada
$0.020 / 1M
Preço de saída
$0.000 / 1M
Preço de leitura do cache
N/D
Preço de escrita no cache
N/D
Os preços de cache aplicam-se aos tokens de entrada. A leitura reutiliza prompts em cache; a escrita armazena-os e pode custar mais. Os tokens de saída usam o preço de saída.
Testes errados: 7
Taxa de acerto por tentativa: 24.6%
Cobertura do benchmark: 36/69 tentativas. Os adaptadores fornecem as opções. Suporta 12/23 testes. Os demais não são compatíveis, não são falhas. A pontuação usa a bateria completa.
Testes instáveis
1
Testes instáveis tiveram resultados mistos entre execuções (pelo menos um acerto e uma falha).
Gráficos
Escolha o primeiro modelo e depois clique em um segundo modelo para abrir uma página lado a lado.
Pontuação vs Custo total
Tempo de resposta (médio)
Pontuação vs Tempo de resposta (médio)
Total de tokens de saída
Pontuação vs Total de tokens de saída
Comparação rápida
Decider V1.2defaultvsJev 1.13defaultDecider V1.2defaultvsDecider V1.1 27BdefaultDecider V1.2defaultvsd1-ultradefaultDecider V1.2defaultvsDrex v1.5defaultDecider V1.2defaultvsSpan-02defaultDecider V1.2defaultvsGPT-6 Luna DecisionsdefaultDecider V1.2defaultvsCommand A+lowDecider V1.2defaultvsKev 4BdefaultDecider V1.2defaultvsCommand A+noneDecider V1.2defaultvsJev 1.14default
Detalhamento por categoria
| Categoria | Pontuação | Consistência | Testes corretos |
|---|---|---|---|
| Tarefas de agentes | 0.0 | 0.0 | |
| Truques anti-IA | 5.8 | 7.5 | |
| Programação | 4.5 | 6.7 | |
| Combinado | 0.0 | 0.0 | |
| Análise e extração de dados | 6.5 | 10.0 | |
| Específico do domínio | 5.9 | 7.2 | |
| Inteligência geral | 0.0 | 0.0 | |
| Seguimento de instruções | 1.5 | 5.0 | |
| Resolução de quebra-cabeças | 1.7 | 3.3 | |
| Chamada de ferramentas | 0.0 | 0.0 | |
| Conhecimentos gerais | 0.0 | 0.0 |