#15 Gemma 4 31B
medium- Custo
- $0.002
- Tempo
- 45.7s
- Tokens
- 2,696 tok
Resumo
Gemma 4 31B marca 8.3 no AI BENCHY e fica em #15. Tem fiabilidade N/D, taxa de acerto de 79.6%, custo total de $0.018 e tempo médio de resposta de 24.88s.
O que torna Gemma 4 31B único: Destaca-se mais em Específico do domínio, onde fica em #2, enquanto Programação é a área mais fraca em #18. O custo total do benchmark é invulgarmente baixo para este nível de pontuação.
Pesquisado em 2026-08-12
8.3
Consistência
9.2
$0.018
Total de tokens de saída
40,684
Total de tokens de entrada
0
Preço de entrada
$0.130 / 1M
Preço de saída
$0.380 / 1M
Testes instáveis
2
Testes instáveis tiveram resultados mistos entre execuções (pelo menos um acerto e uma falha).
24.88s
Tempo de resposta (máx.): 70.97s
Tempo de resposta (total): 398.13s
Prompt: Create a detailed SVG illustration of a hamster playing table tennis.
Histórico de execuções
| Testado em | Pontuação | Confiabilidade | Testes corretos | Custo total | Comparar |
|---|---|---|---|---|---|
| 2026-08-14 02:55 Novo teste | 6.2 | 10.0 | $0.101 ↓ | Comparar | |
| 2026-07-16 23:24 Novo teste adicionado | 6.3 | 10.0 | $0.163 ↑ | Comparar | |
| 2026-06-04 14:27 Novo teste adicionado | 7.9 | 8.9 | $0.035 ↓ | Comparar | |
| 2026-05-22 00:35 Suite alterada | 8.0 | 6.7 | $0.029 | Comparar | |
| 2026-04-14 00:56 Primeira execução registrada | 8.3 | N/D | $0.018 | Execução atual |
Comparação de execuções
| Execução | Cobertura do benchmark | Pontuação | Consistência | Confiabilidade | Testes corretos | Testes instáveis | Total de tokens de saída | Total de tokens de entrada | Custo total | Tempo de resposta (médio) |
|---|---|---|---|---|---|---|---|---|---|---|
| 2026-04-14 00:56 · Primeira execução registrada | 54/54 tentativas | 8.3 | 9.2 | N/D | 13/18 | 2 | 40,684 | 0 | $0.018 | 24.88s |
| 2026-08-14 02:55 · Novo teste | 66/66 tentativas | 6.2 | 8.7 | 10.0 | 13/22 | 3 | 267,421 | 94,969 | $0.101 | 78.59s |
| Diferença | — | +2.2 | +0.5 | 0 | -1 | -226737 | -94969 | -$0.083 | -53709ms |
A cobertura do benchmark é diferente: 54/54 tentativas (Meta: 3 repetições por teste) contra 66/66 tentativas (Meta: 3 repetições por teste). Totais e métricas sensíveis a repetições não são diretamente comparáveis.
Estas duas execuções usaram suites de benchmark diferentes, então as diferenças refletem tanto mudanças do modelo quanto da suite.
Escolha o primeiro modelo e depois clique em um segundo modelo para abrir uma página lado a lado.
| Categoria | Pontuação | Consistência | Testes corretos |
|---|---|---|---|
| Truques anti-IA | 10.0 | 10.0 | |
| Programação | 4.7 | 1.6 | |
| Combinado | 3.0 | 10.0 | |
| Análise e extração de dados | 10.0 | 10.0 | |
| Específico do domínio | 7.7 | 10.0 | |
| Inteligência geral | 10.0 | 10.0 | |
| Seguimento de instruções | 10.0 | 10.0 | |
| Resolução de quebra-cabeças | 8.8 | 7.9 | |
| Chamada de ferramentas | 3.0 | 10.0 |