Bespoke Labs
Lançamento: 2026-10-16
Testado em: 2026-10-16 00:55
bespokelabs/bespoke-nimble-9b-v3::none
9BDensoPesos disponíveis Resumo
Nimble v3 9B marca 0.8 no AI BENCHY e fica em #430. Tem fiabilidade 10.0, taxa de acerto de 4.4%, custo total de ~$0.001 e tempo médio de resposta de 363ms.
O que torna Nimble v3 9B único: O custo total do benchmark é invulgarmente baixo para este nível de pontuação. É notavelmente rápido em comparação com modelos semelhantes.
Dados do modelo
Pesquisado em 2026-10-16
- Parâmetros
- 9B
- Arquitetura
- Denso
- Disponibilidade
- Pesos disponíveis
- Licença
- CC-BY-NC-4.0
0.8
Consistência
3.0
10.0
~$0.001
Total de tokens de saída
0
Total de tokens de entrada
103,770
Custo de eletricidade estimado do benchmark
~$0.001
Testes errados: 6
Taxa de acerto por tentativa: 4.4%
Cobertura do benchmark: 21/69 tentativas. Os adaptadores fornecem as opções. Suporta 7/23 testes. Os demais não são compatíveis, não são falhas. A pontuação usa a bateria completa.
Testes instáveis
0
Testes instáveis tiveram resultados mistos entre execuções (pelo menos um acerto e uma falha).
Gráficos
Escolha o primeiro modelo e depois clique em um segundo modelo para abrir uma página lado a lado.
Pontuação vs Custo total
Tempo de resposta (médio)
Pontuação vs Tempo de resposta (médio)
Total de tokens de saída
Pontuação vs Total de tokens de saída
Comparação rápida
Nimble v3 9BdefaultvsTev1 4B ExperimentaldefaultNimble v3 9BdefaultvsSolar DecidedefaultNimble v3 9BdefaultvsMicrosoft-Decision-1defaultNimble v3 9BdefaultvsSolar Decide FlashdefaultNimble v3 9BdefaultvsGemini 3 Flash PreviewhighNimble v3 9BdefaultvsD1defaultNimble v3 9BdefaultvsClef OmnidefaultNimble v3 9BdefaultvsClassify-1defaultNimble v3 9BdefaultvsJev 1.14defaultNimble v3 9BdefaultvsKev 4Bdefault
Detalhamento por categoria
| Categoria | Pontuação | Consistência | Testes corretos |
|---|---|---|---|
| Tarefas de agentes | 0.0 | 0.0 | |
| Truques anti-IA | 2.5 | 2.5 | |
| Programação | 0.0 | 0.0 | |
| Combinado | 0.0 | 0.0 | |
| Análise e extração de dados | 3.0 | 10.0 | |
| Específico do domínio | 2.0 | 6.7 | |
| Inteligência geral | 0.0 | 0.0 | |
| Seguimento de instruções | 1.5 | 5.0 | |
| Resolução de quebra-cabeças | 1.7 | 3.3 | |
| Chamada de ferramentas | 0.0 | 0.0 | |
| Conhecimentos gerais | 0.0 | 0.0 |