Navegação
AI BENCHY
Advertise here

AI BENCHY Compare

Google: Gemma 4 26B A4B vs Mistral: Mistral Small 4

Resumo

Comparação benchmark Gemma 4 26B A4B vs Mistral Small 4: Gemma 4 26B A4B lidera na pontuação média com 5.5 vs 5.1. Gemma 4 26B A4B tem menor custo de benchmark com $0.004 vs $0.068. Gemma 4 26B A4B é mais rápido com 5.91s vs 9.40s, com taxas de acerto de 44.4% vs 44.4%.

Modelo recomendado: Gemma 4 26B A4B - Tem a melhor pontuação aqui (5.5) e custa cerca de 22.4x menos que Mistral Small 4.

Benchmarks gerados a partir das suítes de teste do AI BENCHY em: 2026-06-12

Métrica Gemma 4 26B A4B Gemma 4 26B A4B none Lançamento: 2026-04-03 Disponível grátis Mistral Small 4 Mistral Small 4 medium Lançamento: 2026-03-16
Pontuação 5.5 5.1
Posição #125 #138
Confiabilidade 10.0 10.0
Consistência 9.2 6.9
Testes corretos
Taxa de acerto por tentativa 44.4% 44.4%
Testes instáveis 2 8
Execuções totais 63 63
Custo por resultado 0.068 1.344
Custo total $0.004 $0.068
Preço de entrada $0.060 / 1M $0.150 / 1M
Preço de saída $0.330 / 1M $0.600 / 1M
Total de tokens de entrada 40,038 42,576
Tokens de saída 1,824 24,184
Tokens de raciocínio 0 84,678
Tempo de resposta (médio) 5.91s 9.40s
Tempo de resposta (máx.) 57.10s 59.15s
Tempo de resposta (total) 124.05s 197.39s

Generation showcase

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#125 Gemma 4 26B A4B

none
Cost
$0.001
Time
39.5s
Tokens
790 tok

#138 Mistral Small 4

medium
Cost
$0.006
Time
47.9s
Tokens
9,857 tok

Melhores modelos por pontuação

Pontuação vs custo total

Tempo de resposta (médio)

Pontuação vs Tempo de resposta (médio)

Total de tokens de saída

Pontuação vs Total de tokens de saída

Detalhamento por categoria

Truques anti-IA Pontuação Consistência Taxa de acerto por tentativa Testes instáveis Testes corretos Tempo de resposta (médio) Tokens de entrada Tokens de saída Tokens de raciocínio
Gemma 4 26B A4B 8.3 10.0 75.0% 0 1.28s 852 230 0
Mistral Small 4 5.6 3.8 66.7% 3 2.67s 708 4,055 4,778
Programação Pontuação Consistência Taxa de acerto por tentativa Testes instáveis Testes corretos Tempo de resposta (médio) Tokens de entrada Tokens de saída Tokens de raciocínio
Gemma 4 26B A4B 3.7 7.2 22.2% 1 4.16s 7,736 476 0
Mistral Small 4 4.4 5.1 33.3% 2 39.98s 7,636 11,635 54,715
Combinado Pontuação Consistência Taxa de acerto por tentativa Testes instáveis Testes corretos Tempo de resposta (médio) Tokens de entrada Tokens de saída Tokens de raciocínio
Gemma 4 26B A4B 3.0 10.0 0.0% 0 30.53s 13,650 309 0
Mistral Small 4 3.0 10.0 0.0% 0 25.25s 18,706 2,612 10,700
Análise e extração de dados Pontuação Consistência Taxa de acerto por tentativa Testes instáveis Testes corretos Tempo de resposta (médio) Tokens de entrada Tokens de saída Tokens de raciocínio
Gemma 4 26B A4B 10.0 10.0 100.0% 0 1.70s 8,352 285 0
Mistral Small 4 7.3 5.9 83.3% 1 1.23s 6,171 335 723
Específico do domínio Pontuação Consistência Taxa de acerto por tentativa Testes instáveis Testes corretos Tempo de resposta (médio) Tokens de entrada Tokens de saída Tokens de raciocínio
Gemma 4 26B A4B 3.6 7.2 22.2% 1 2.49s 903 27 0
Mistral Small 4 5.3 7.2 44.4% 1 6.11s 742 2,621 6,904
Inteligência geral Pontuação Consistência Taxa de acerto por tentativa Testes instáveis Testes corretos Tempo de resposta (médio) Tokens de entrada Tokens de saída Tokens de raciocínio
Gemma 4 26B A4B 4.0 10.0 0.0% 0 3.54s 576 85 0
Mistral Small 4 4.8 10.0 0.0% 0 2.05s 519 821 828
Seguimento de instruções Pontuação Consistência Taxa de acerto por tentativa Testes instáveis Testes corretos Tempo de resposta (médio) Tokens de entrada Tokens de saída Tokens de raciocínio
Gemma 4 26B A4B 6.3 10.0 50.0% 0 690ms 795 75 0
Mistral Small 4 7.3 5.8 83.3% 1 1.38s 729 540 1,031
Resolução de quebra-cabeças Pontuação Consistência Taxa de acerto por tentativa Testes instáveis Testes corretos Tempo de resposta (médio) Tokens de entrada Tokens de saída Tokens de raciocínio
Gemma 4 26B A4B 6.2 10.0 33.3% 0 744ms 828 114 0
Mistral Small 4 3.4 9.7 0.0% 0 2.17s 735 1,226 2,632
Chamada de ferramentas Pontuação Consistência Taxa de acerto por tentativa Testes instáveis Testes corretos Tempo de resposta (médio) Tokens de entrada Tokens de saída Tokens de raciocínio
Gemma 4 26B A4B 10.0 10.0 100.0% 0 57.10s 6,123 210 0
Mistral Small 4 10.0 10.0 100.0% 0 3.50s 6,420 321 810
Conhecimentos gerais Pontuação Consistência Taxa de acerto por tentativa Testes instáveis Testes corretos Tempo de resposta (médio) Tokens de entrada Tokens de saída Tokens de raciocínio
Gemma 4 26B A4B 3.0 10.0 0.0% 0 778ms 223 13 0
Mistral Small 4 3.0 10.0 0.0% 0 5.92s 210 18 1,557

Comparação rápida

Trocar par de comparação