Navegação
AI BENCHY
Advertise here

AI BENCHY Compare

Google: Gemini 3.5 Flash vs Mistral: Mistral Small 4

Resumo

Comparação benchmark Gemini 3.5 Flash vs Mistral Small 4: Gemini 3.5 Flash lidera na pontuação média com 9.8 vs 5.1. Mistral Small 4 tem menor custo de benchmark com $0.007 vs $1.115. Mistral Small 4 é mais rápido com 630ms vs 8.84s, com taxas de acerto de 96.8% vs 27.0%.

Modelo recomendado: Mistral Small 4 - Oferece o melhor compromisso geral: pontuação competitiva (5.1), custo menor que Gemini 3.5 Flash e tempo de resposta equilibrado.

Benchmarks gerados a partir das suítes de teste do AI BENCHY em: 2026-06-12

Métrica Gemini 3.5 Flash Gemini 3.5 Flash high Lançamento: 2026-05-19 Mistral Small 4 Mistral Small 4 none Lançamento: 2026-03-16
Pontuação 9.8 5.1
Posição #1 #136
Confiabilidade 10.0 10.0
Consistência 9.6 9.5
Testes corretos
Taxa de acerto por tentativa 96.8% 27.0%
Testes instáveis 1 1
Execuções totais 63 63
Custo por resultado 5.575 0.139
Custo total $1.115 $0.007
Preço de entrada $1.500 / 1M $0.150 / 1M
Preço de saída $9.000 / 1M $0.600 / 1M
Total de tokens de entrada 37,594 37,309
Tokens de saída 1,975 2,201
Tokens de raciocínio 115,638 0
Tempo de resposta (médio) 8.84s 630ms
Tempo de resposta (máx.) 34.82s 1.72s
Tempo de resposta (total) 185.57s 13.22s

Generation showcase

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#1 Gemini 3.5 Flash

high
Cost
$0.208
Time
118.2s
Tokens
23,158 tok

#136 Mistral Small 4

none
Cost
$0.002
Time
10.4s
Tokens
2,370 tok

Melhores modelos por pontuação

Pontuação vs custo total

Tempo de resposta (médio)

Pontuação vs Tempo de resposta (médio)

Total de tokens de saída

Pontuação vs Total de tokens de saída

Detalhamento por categoria

Truques anti-IA Pontuação Consistência Taxa de acerto por tentativa Testes instáveis Testes corretos Tempo de resposta (médio) Tokens de entrada Tokens de saída Tokens de raciocínio
Gemini 3.5 Flash 10.0 10.0 100.0% 0 2.57s 492 174 4,997
Mistral Small 4 3.4 7.9 16.7% 1 395ms 708 182 0
Programação Pontuação Consistência Taxa de acerto por tentativa Testes instáveis Testes corretos Tempo de resposta (médio) Tokens de entrada Tokens de saída Tokens de raciocínio
Gemini 3.5 Flash 10.0 10.0 100.0% 0 22.96s 8,118 456 47,129
Mistral Small 4 3.7 9.7 0.0% 0 901ms 7,636 619 0
Combinado Pontuação Consistência Taxa de acerto por tentativa Testes instáveis Testes corretos Tempo de resposta (médio) Tokens de entrada Tokens de saída Tokens de raciocínio
Gemini 3.5 Flash 10.0 10.0 100.0% 0 22.37s 12,873 351 16,323
Mistral Small 4 3.0 10.0 0.0% 0 1.72s 11,640 496 0
Análise e extração de dados Pontuação Consistência Taxa de acerto por tentativa Testes instáveis Testes corretos Tempo de resposta (médio) Tokens de entrada Tokens de saída Tokens de raciocínio
Gemini 3.5 Flash 10.0 10.0 100.0% 0 6.43s 7,548 279 8,466
Mistral Small 4 10.0 10.0 100.0% 0 822ms 7,914 261 0
Específico do domínio Pontuação Consistência Taxa de acerto por tentativa Testes instáveis Testes corretos Tempo de resposta (médio) Tokens de entrada Tokens de saída Tokens de raciocínio
Gemini 3.5 Flash 7.6 7.2 77.8% 1 14.09s 633 12 24,721
Mistral Small 4 5.3 10.0 33.3% 0 367ms 798 28 0
Inteligência geral Pontuação Consistência Taxa de acerto por tentativa Testes instáveis Testes corretos Tempo de resposta (médio) Tokens de entrada Tokens de saída Tokens de raciocínio
Gemini 3.5 Flash 10.0 10.0 100.0% 0 3.63s 486 115 1,650
Mistral Small 4 4.0 10.0 0.0% 0 729ms 519 205 0
Seguimento de instruções Pontuação Consistência Taxa de acerto por tentativa Testes instáveis Testes corretos Tempo de resposta (médio) Tokens de entrada Tokens de saída Tokens de raciocínio
Gemini 3.5 Flash 10.0 10.0 100.0% 0 3.35s 615 70 3,799
Mistral Small 4 6.5 10.0 50.0% 0 380ms 729 69 0
Resolução de quebra-cabeças Pontuação Consistência Taxa de acerto por tentativa Testes instáveis Testes corretos Tempo de resposta (médio) Tokens de entrada Tokens de saída Tokens de raciocínio
Gemini 3.5 Flash 10.0 10.0 100.0% 0 3.23s 558 241 4,940
Mistral Small 4 3.1 9.9 0.0% 0 399ms 735 111 0
Chamada de ferramentas Pontuação Consistência Taxa de acerto por tentativa Testes instáveis Testes corretos Tempo de resposta (médio) Tokens de entrada Tokens de saída Tokens de raciocínio
Gemini 3.5 Flash 9.8 10.0 100.0% 0 4.96s 6,115 265 1,608
Mistral Small 4 10.0 10.0 100.0% 0 1.40s 6,420 213 0
Conhecimentos gerais Pontuação Consistência Taxa de acerto por tentativa Testes instáveis Testes corretos Tempo de resposta (médio) Tokens de entrada Tokens de saída Tokens de raciocínio
Gemini 3.5 Flash 10.0 10.0 100.0% 0 3.94s 156 12 2,005
Mistral Small 4 3.0 10.0 0.0% 0 397ms 210 17 0

Comparação rápida

Trocar par de comparação