Typesafe
Lançamento: 2026-09-18
Testado em: 2026-10-01 17:52
typesafe/jev-1.13::none
-OutroCódigo fechado Resumo
Jev 1.13 marca 2.6 no AI BENCHY e fica em #441. Tem fiabilidade 10.0, taxa de acerto de 26.1%, custo total de $0.003 e tempo médio de resposta de 698ms.
O que torna Jev 1.13 único: Destaca-se mais em Análise e extração de dados, onde fica em #1, enquanto Programação é a área mais fraca em #13.
Dados do modelo
Pesquisado em 2026-09-18
- Parâmetros
- -
- Arquitetura
- Outro
- Disponibilidade
- Código fechado
- Licença
- -
2.6
Consistência
5.2
10.0
$0.003
Total de tokens de saída
18,927
Total de tokens de entrada
67,092
Preço de entrada
$0.042 / 1M
Preço de saída
$0.000 / 1M
Preço de leitura do cache
N/D
Preço de escrita no cache
N/D
Os preços de cache aplicam-se aos tokens de entrada. A leitura reutiliza prompts em cache; a escrita armazena-os e pode custar mais. Os tokens de saída usam o preço de saída.
Testes errados: 6
Taxa de acerto por tentativa: 26.1%
Cobertura do benchmark: 36/69 tentativas. Os adaptadores fornecem as opções. Suporta 12/23 testes. Os demais não são compatíveis, não são falhas. A pontuação usa a bateria completa.
Testes instáveis
0
Testes instáveis tiveram resultados mistos entre execuções (pelo menos um acerto e uma falha).
Gráficos
Escolha o primeiro modelo e depois clique em um segundo modelo para abrir uma página lado a lado.
Pontuação vs Custo total
Tempo de resposta (médio)
Pontuação vs Tempo de resposta (médio)
Total de tokens de saída
Pontuação vs Total de tokens de saída
Comparação rápida
Jev 1.13defaultvsd1-ultradefaultJev 1.13defaultvsDecider V1.2defaultJev 1.13defaultvsSpan-02defaultJev 1.13defaultvsDecider V1.1 27BdefaultJev 1.13defaultvsCommand A+lowJev 1.13defaultvsDrex v1.5defaultJev 1.13defaultvsCommand A+noneJev 1.13defaultvsGPT-6 Luna DecisionsdefaultJev 1.13defaultvsCommand A+highJev 1.13defaultvsKev 4Bdefault
Detalhamento por categoria
| Categoria | Pontuação | Consistência | Testes corretos |
|---|---|---|---|
| Tarefas de agentes | 0.0 | 0.0 | |
| Truques anti-IA | 4.0 | 7.5 | |
| Programação | 2.2 | 6.7 | |
| Combinado | 0.0 | 0.0 | |
| Análise e extração de dados | 10.0 | 10.0 | |
| Específico do domínio | 7.7 | 10.0 | |
| Inteligência geral | 0.0 | 0.0 | |
| Seguimento de instruções | 1.5 | 5.0 | |
| Resolução de quebra-cabeças | 3.3 | 3.3 | |
| Chamada de ferramentas | 0.0 | 0.0 | |
| Conhecimentos gerais | 0.0 | 0.0 |