Navegação
AI BENCHY
Your ad here

AI BENCHY Compare

Google: Gemini 3.1 Pro Preview vs Mistral: Mistral Small 4

Benchmarks gerados a partir das suítes de teste do AI BENCHY em: 2026-05-01

Métrica Gemini 3.1 Pro Preview Gemini 3.1 Pro Preview medium Lançamento: 2026-02-19 Mistral Small 4 Mistral Small 4 medium Lançamento: 2026-03-16
Pontuação 9.6 5.7
Posição #2 #99
Confiabilidade N/D N/D
Consistência 10.0 6.8
Testes corretos
Taxa de acerto por tentativa 94.4% 50.0%
Testes instáveis 0 7
Execuções totais 54 54
Custo por resultado 3.400 0.674
Custo total $0.578 $0.034
Preço de entrada $2.000 / 1M $0.150 / 1M
Preço de saída $12.000 / 1M $0.600 / 1M
Tokens de saída 1,932 15,084
Tokens de raciocínio 40,542 39,408
Tempo de resposta (médio) 15.96s 5.64s
Tempo de resposta (máx.) 40.61s 30.49s
Tempo de resposta (total) 175.52s 101.52s

Melhores modelos por pontuação

Pontuação vs custo total

Tempo de resposta (médio)

Pontuação vs Tempo de resposta (médio)

Total de tokens de saída

Pontuação vs Total de tokens de saída

Detalhamento por categoria

Truques anti-IA Pontuação Consistência Taxa de acerto por tentativa Testes instáveis Testes corretos Tempo de resposta (médio) Tokens de saída Tokens de raciocínio
Gemini 3.1 Pro Preview 10.0 10.0 100.0% 0 7.90s 112 3,218
Mistral Small 4 5.6 3.8 66.7% 3 2.67s 4,055 4,778
Programação Pontuação Consistência Taxa de acerto por tentativa Testes instáveis Testes corretos Tempo de resposta (médio) Tokens de saída Tokens de raciocínio
Gemini 3.1 Pro Preview 10.0 10.0 100.0% 0 19.88s 405 4,201
Mistral Small 4 6.7 3.5 66.7% 1 30.49s 2,796 11,296
Combinado Pontuação Consistência Taxa de acerto por tentativa Testes instáveis Testes corretos Tempo de resposta (médio) Tokens de saída Tokens de raciocínio
Gemini 3.1 Pro Preview 9.5 10.0 100.0% 0 40.61s 432 9,281
Mistral Small 4 3.0 10.0 0.0% 0 25.25s 2,612 10,700
Análise e extração de dados Pontuação Consistência Taxa de acerto por tentativa Testes instáveis Testes corretos Tempo de resposta (médio) Tokens de saída Tokens de raciocínio
Gemini 3.1 Pro Preview 10.0 10.0 100.0% 0 7.72s 279 3,904
Mistral Small 4 7.3 5.9 83.3% 1 1.23s 335 723
Específico do domínio Pontuação Consistência Taxa de acerto por tentativa Testes instáveis Testes corretos Tempo de resposta (médio) Tokens de saída Tokens de raciocínio
Gemini 3.1 Pro Preview 7.7 10.0 66.7% 0 32.73s 18 12,424
Mistral Small 4 5.3 7.2 44.4% 1 6.11s 2,621 6,904
Inteligência geral Pontuação Consistência Taxa de acerto por tentativa Testes instáveis Testes corretos Tempo de resposta (médio) Tokens de saída Tokens de raciocínio
Gemini 3.1 Pro Preview 10.0 10.0 100.0% 0 11.77s 108 1,179
Mistral Small 4 4.8 10.0 0.0% 0 2.05s 821 828
Seguimento de instruções Pontuação Consistência Taxa de acerto por tentativa Testes instáveis Testes corretos Tempo de resposta (médio) Tokens de saída Tokens de raciocínio
Gemini 3.1 Pro Preview 10.0 10.0 100.0% 0 9.56s 72 2,236
Mistral Small 4 7.3 5.8 83.3% 1 1.38s 540 1,031
Resolução de quebra-cabeças Pontuação Consistência Taxa de acerto por tentativa Testes instáveis Testes corretos Tempo de resposta (médio) Tokens de saída Tokens de raciocínio
Gemini 3.1 Pro Preview 10.0 10.0 100.0% 0 7.15s 232 3,117
Mistral Small 4 3.4 9.7 0.0% 0 2.00s 983 2,338
Chamada de ferramentas Pontuação Consistência Taxa de acerto por tentativa Testes instáveis Testes corretos Tempo de resposta (médio) Tokens de saída Tokens de raciocínio
Gemini 3.1 Pro Preview 10.0 10.0 100.0% 0 23.15s 274 982
Mistral Small 4 10.0 10.0 100.0% 0 3.50s 321 810

Comparação rápida

Trocar par de comparação