AI BENCHY
Advertise here
#53

Gemma 4 31B

Google Lançamento: 2026-04-02 Testado em: 2026-04-14 00:56 google/gemma-4-31b-it::none
30.7BDensoCódigo aberto
(medium) (none)

Resumo

Gemma 4 31B marca 6.9 no AI BENCHY e fica em #53. Tem fiabilidade N/D, taxa de acerto de 55.6%, custo total de $0.003 e tempo médio de resposta de 4.02s.

O que torna Gemma 4 31B único: Destaca-se mais em Específico do domínio, onde fica em #1, enquanto Truques anti-IA é a área mais fraca em #18. O custo total do benchmark é invulgarmente baixo para este nível de pontuação. É notavelmente rápido em comparação com modelos semelhantes.

Dados do modelo

Pesquisado em 2026-08-12

Divulgado
Parâmetros
30.7B
Arquitetura
Denso
Disponibilidade
Código aberto
Licença
Apache-2.0

Consistência

10.0

Confiabilidade

N/D

Total de tokens de saída

1,359

Total de tokens de entrada

0

Preço de entrada

$0.130 / 1M

Preço de saída

$0.380 / 1M

Testes corretos

Testes errados: 8

Taxa de acerto por tentativa: 55.6%

Testes instáveis

0

Testes instáveis tiveram resultados mistos entre execuções (pelo menos um acerto e uma falha).

Tempo de resposta (médio)

4.02s

Tempo de resposta (máx.): 26.13s

Tempo de resposta (total): 64.33s

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#53 Gemma 4 31B

none
Custo
$0.001
Tempo
12.8s
Tokens
795 tok

Histórico de execuções

Testado em Pontuação Confiabilidade Testes corretos Custo total Comparar
2026-08-14 02:51 Novo teste 6.1 10.0 $0.018 Comparar
2026-07-16 23:02 Novo teste adicionado 6.2 10.0 $0.035 Comparar
2026-06-04 14:04 Novo teste adicionado 6.5 10.0 $0.004 Comparar
2026-05-22 00:30 Suite alterada 6.7 10.0 $0.003 Comparar
2026-04-14 00:56 Primeira execução registrada 6.9 N/D $0.003 Execução atual

Comparação de execuções

ExecuçãoCobertura do benchmarkPontuaçãoConsistênciaConfiabilidadeTestes corretosTestes instáveisTotal de tokens de saídaTotal de tokens de entradaCusto totalTempo de resposta (médio)
2026-04-14 00:56 · Primeira execução registrada54/54 tentativas6.910.0N/D10/1801,3590$0.0034.02s
2026-06-04 14:04 · Novo teste adicionado63/63 tentativas6.510.010.010/2101,40720,911$0.0044.05s
Diferença+0.30.000-48-20911-$0.001-26ms

A cobertura do benchmark é diferente: 54/54 tentativas (Meta: 3 repetições por teste) contra 63/63 tentativas (Meta: 3 repetições por teste). Totais e métricas sensíveis a repetições não são diretamente comparáveis.

Estas duas execuções usaram suites de benchmark diferentes, então as diferenças refletem tanto mudanças do modelo quanto da suite.

Gráficos

Escolha o primeiro modelo e depois clique em um segundo modelo para abrir uma página lado a lado.

Total de tokens de saída

Pontuação vs Total de tokens de saída

Comparação rápida

Detalhamento por categoria

Categoria Pontuação Consistência Testes corretos
Truques anti-IA 6.5 10.0
Programação 10.0 10.0
Combinado 3.0 10.0
Análise e extração de dados 10.0 10.0
Específico do domínio 7.7 10.0
Inteligência geral 10.0 10.0
Seguimento de instruções 6.5 10.0
Resolução de quebra-cabeças 5.5 10.0
Chamada de ferramentas 3.0 10.0

Modelos comparados