AI BENCHY
AD
Track all your projects in one dashboard. Get 📊stats, 🔥heatmaps and 👀recordings in one self-hosted dashboard.
uxwizz.com
#15

Gemma 4 31B

Google Lançamento: 2026-04-02 Testado em: 2026-04-14 00:56 google/gemma-4-31b-it::medium
30.7BDensoCódigo aberto
(medium) (none)

Resumo

Gemma 4 31B marca 8.3 no AI BENCHY e fica em #15. Tem fiabilidade N/D, taxa de acerto de 79.6%, custo total de $0.018 e tempo médio de resposta de 24.88s.

O que torna Gemma 4 31B único: Destaca-se mais em Específico do domínio, onde fica em #2, enquanto Programação é a área mais fraca em #18. O custo total do benchmark é invulgarmente baixo para este nível de pontuação.

Dados do modelo

Pesquisado em 2026-08-12

Divulgado
Parâmetros
30.7B
Arquitetura
Denso
Disponibilidade
Código aberto
Licença
Apache-2.0

Consistência

9.2

Confiabilidade

N/D

Total de tokens de saída

40,684

Total de tokens de entrada

0

Preço de entrada

$0.130 / 1M

Preço de saída

$0.380 / 1M

Testes corretos

Testes errados: 5

Taxa de acerto por tentativa: 79.6%

Testes instáveis

2

Testes instáveis tiveram resultados mistos entre execuções (pelo menos um acerto e uma falha).

Tempo de resposta (médio)

24.88s

Tempo de resposta (máx.): 70.97s

Tempo de resposta (total): 398.13s

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#15 Gemma 4 31B

medium
Custo
$0.002
Tempo
45.7s
Tokens
2,696 tok

Histórico de execuções

Testado em Pontuação Confiabilidade Testes corretos Custo total Comparar
2026-08-14 02:55 Novo teste 6.2 10.0 $0.101 Comparar
2026-07-16 23:24 Novo teste adicionado 6.3 10.0 $0.163 Comparar
2026-06-04 14:27 Novo teste adicionado 7.9 8.9 $0.035 Comparar
2026-05-22 00:35 Suite alterada 8.0 6.7 $0.029 Comparar
2026-04-14 00:56 Primeira execução registrada 8.3 N/D $0.018 Execução atual

Comparação de execuções

ExecuçãoCobertura do benchmarkPontuaçãoConsistênciaConfiabilidadeTestes corretosTestes instáveisTotal de tokens de saídaTotal de tokens de entradaCusto totalTempo de resposta (médio)
2026-04-14 00:56 · Primeira execução registrada54/54 tentativas8.39.2N/D13/18240,6840$0.01824.88s
2026-06-04 14:27 · Novo teste adicionado63/63 tentativas7.99.18.914/21288,08217,957$0.03556.55s
Diferença+0.5+0.1-10-47398-17957-$0.017-31664ms

A cobertura do benchmark é diferente: 54/54 tentativas (Meta: 3 repetições por teste) contra 63/63 tentativas (Meta: 3 repetições por teste). Totais e métricas sensíveis a repetições não são diretamente comparáveis.

Estas duas execuções usaram suites de benchmark diferentes, então as diferenças refletem tanto mudanças do modelo quanto da suite.

Gráficos

Escolha o primeiro modelo e depois clique em um segundo modelo para abrir uma página lado a lado.

Total de tokens de saída

Pontuação vs Total de tokens de saída

Comparação rápida

Detalhamento por categoria

Categoria Pontuação Consistência Testes corretos
Truques anti-IA 10.0 10.0
Programação 4.7 1.6
Combinado 3.0 10.0
Análise e extração de dados 10.0 10.0
Específico do domínio 7.7 10.0
Inteligência geral 10.0 10.0
Seguimento de instruções 10.0 10.0
Resolução de quebra-cabeças 8.8 7.9
Chamada de ferramentas 3.0 10.0

Modelos comparados