#121 Mistral Small 4
medium- Cost
- $0.006
- Time
- 47.9s
- Tokens
- 9,857 tok
Resumo
Mistral Small 4 marca 5.4 no AI BENCHY e fica em #121. Tem fiabilidade 10.0, taxa de acerto de 45.0%, custo total de $0.056 e tempo médio de resposta de 8.33s.
O que torna Mistral Small 4 único: Destaca-se mais em Truques anti-IA, onde fica em #2, enquanto Análise e extração de dados é a área mais fraca em #9. Usa uma quantidade invulgarmente alta de tokens de raciocínio, o que pode explicar execuções mais lentas ou caras.
5.4
Consistência
7.1
10.0
$0.056
Total de tokens de saída
89,683
Total de tokens de entrada
0
Preço de entrada
$0.150 / 1M
Preço de saída
$0.600 / 1M
Testes instáveis
7
Testes instáveis tiveram resultados mistos entre execuções (pelo menos um acerto e uma falha).
Generation showcase
Prompt: Create a detailed SVG illustration of a hamster playing table tennis.
Histórico de execuções
| Testado em | Pontuação | Confiabilidade | Testes corretos | Custo total | Comparar |
|---|---|---|---|---|---|
| 2026-06-04 13:43 Novo teste adicionado | 5.3 | 10.0 | $0.068 | Comparar | |
| 2026-05-22 00:16 Suite alterada | 5.4 | 10.0 | $0.056 | Execução atual | |
| 2026-04-11 01:44 Primeira execução registrada | 5.7 | N/D | $0.034 | Comparar |
Esta execução usou uma suite de benchmark diferente. Considere as mudanças na suite ao analisar a evolução histórica.
Comparação de execuções
| Execução | Pontuação | Consistência | Confiabilidade | Testes corretos | Testes instáveis | Total de tokens de saída | Total de tokens de entrada | Custo total | Tempo de resposta (médio) |
|---|---|---|---|---|---|---|---|---|---|
| 2026-05-22 00:16 · Suite alterada | 5.4 | 7.1 | 10.0 | 5/20 | 7 | 89,683 | 0 | $0.056 | 8.33s |
| 2026-06-04 13:43 · Novo teste adicionado | 5.3 | 6.9 | 10.0 | 5/21 | 8 | 108,862 | 42,576 | $0.068 | 9.40s |
| Diferença | +0.1 | +0.2 | 0.0 | 0 | -1 | -19179 | -42576 | -$0.012 | -1070ms |
Estas duas execuções usaram suites de benchmark diferentes, então as diferenças refletem tanto mudanças do modelo quanto da suite.
Escolha o primeiro modelo e depois clique em um segundo modelo para abrir uma página lado a lado.
| Categoria | Pontuação | Consistência | Testes corretos |
|---|---|---|---|
| Truques anti-IA | 5.6 | 3.8 | |
| Programação | 5.1 | 6.8 | |
| Combinado | 3.0 | 10.0 | |
| Análise e extração de dados | 7.3 | 5.9 | |
| Específico do domínio | 5.3 | 7.2 | |
| Inteligência geral | 4.8 | 10.0 | |
| Seguimento de instruções | 7.3 | 5.8 | |
| Resolução de quebra-cabeças | 3.4 | 9.7 | |
| Chamada de ferramentas | 10.0 | 10.0 | |
| Conhecimentos gerais | 3.0 | 10.0 |