Navegação
AI BENCHY
Advertise here

AI BENCHY Compare

Google: Gemma 4 26B A4B vs Inception: Mercury 2

Resumo

Comparação benchmark Gemma 4 26B A4B vs Mercury 2: Gemma 4 26B A4B lidera na pontuação média com 5.5 vs 4.6. Gemma 4 26B A4B tem menor custo de benchmark com $0.004 vs $0.011. Mercury 2 é mais rápido com 653ms vs 5.91s, com taxas de acerto de 44.4% vs 23.8%.

Modelo recomendado: Gemma 4 26B A4B - Tem a melhor pontuação aqui (5.5) e custa cerca de 3.4x menos que Mercury 2.

Benchmarks gerados a partir das suítes de teste do AI BENCHY em: 2026-06-18

Métrica Gemma 4 26B A4B Gemma 4 26B A4B none Lançamento: 2026-04-03 Disponível grátis Mercury 2 Mercury 2 none Lançamento: 2026-02-24
Pontuação 5.5 4.6
Posição #121 #151
Confiabilidade 10.0 10.0
Consistência 9.2 9.2
Testes corretos
Taxa de acerto por tentativa 44.4% 23.8%
Testes instáveis 2 2
Execuções totais 63 63
Custo por resultado 0.068 0.259
Custo total $0.004 $0.011
Preço de entrada $0.060 / 1M $0.250 / 1M
Preço de saída $0.330 / 1M $0.750 / 1M
Total de tokens de entrada 40,038 28,113
Tokens de saída 1,824 4,439
Tokens de raciocínio 0 0
Tempo de resposta (médio) 5.91s 653ms
Tempo de resposta (máx.) 57.10s 1.43s
Tempo de resposta (total) 124.05s 13.72s

Geração showcase

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#121 Gemma 4 26B A4B

none
Custo
$0.001
Tempo
39.5s
Tokens
790 tok

#151 Mercury 2

none
Custo
$0.002
Tempo
1.8s
Tokens
1,514 tok

Melhores modelos por pontuação

Pontuação vs custo total

Tempo de resposta (médio)

Pontuação vs Tempo de resposta (médio)

Total de tokens de saída

Pontuação vs Total de tokens de saída

Detalhamento por categoria

Truques anti-IA Pontuação Consistência Taxa de acerto por tentativa Testes instáveis Testes corretos Tempo de resposta (médio) Tokens de entrada Tokens de saída Tokens de raciocínio
Gemma 4 26B A4B 8.3 10.0 75.0% 0 1.28s 852 230 0
Mercury 2 3.0 10.0 0.0% 0 483ms 631 286 0
Programação Pontuação Consistência Taxa de acerto por tentativa Testes instáveis Testes corretos Tempo de resposta (médio) Tokens de entrada Tokens de saída Tokens de raciocínio
Gemma 4 26B A4B 3.7 7.2 22.2% 1 4.16s 7,736 476 0
Mercury 2 3.4 9.6 0.0% 0 1.03s 7,229 3,088 0
Combinado Pontuação Consistência Taxa de acerto por tentativa Testes instáveis Testes corretos Tempo de resposta (médio) Tokens de entrada Tokens de saída Tokens de raciocínio
Gemma 4 26B A4B 3.0 10.0 0.0% 0 30.53s 13,650 309 0
Mercury 2 3.0 10.0 0.0% 0 606ms 4,821 131 0
Análise e extração de dados Pontuação Consistência Taxa de acerto por tentativa Testes instáveis Testes corretos Tempo de resposta (médio) Tokens de entrada Tokens de saída Tokens de raciocínio
Gemma 4 26B A4B 10.0 10.0 100.0% 0 1.70s 8,352 285 0
Mercury 2 7.3 5.9 83.3% 1 667ms 6,362 180 0
Específico do domínio Pontuação Consistência Taxa de acerto por tentativa Testes instáveis Testes corretos Tempo de resposta (médio) Tokens de entrada Tokens de saída Tokens de raciocínio
Gemma 4 26B A4B 3.6 7.2 22.2% 1 2.49s 903 27 0
Mercury 2 5.3 7.2 44.4% 1 534ms 784 46 0
Inteligência geral Pontuação Consistência Taxa de acerto por tentativa Testes instáveis Testes corretos Tempo de resposta (médio) Tokens de entrada Tokens de saída Tokens de raciocínio
Gemma 4 26B A4B 4.0 10.0 0.0% 0 3.54s 576 85 0
Mercury 2 4.8 10.0 0.0% 0 628ms 495 159 0
Seguimento de instruções Pontuação Consistência Taxa de acerto por tentativa Testes instáveis Testes corretos Tempo de resposta (médio) Tokens de entrada Tokens de saída Tokens de raciocínio
Gemma 4 26B A4B 6.3 10.0 50.0% 0 690ms 795 75 0
Mercury 2 6.5 10.0 50.0% 0 551ms 691 82 0
Resolução de quebra-cabeças Pontuação Consistência Taxa de acerto por tentativa Testes instáveis Testes corretos Tempo de resposta (médio) Tokens de entrada Tokens de saída Tokens de raciocínio
Gemma 4 26B A4B 6.2 10.0 33.3% 0 744ms 828 114 0
Mercury 2 3.1 10.0 0.0% 0 535ms 694 251 0
Chamada de ferramentas Pontuação Consistência Taxa de acerto por tentativa Testes instáveis Testes corretos Tempo de resposta (médio) Tokens de entrada Tokens de saída Tokens de raciocínio
Gemma 4 26B A4B 10.0 10.0 100.0% 0 57.10s 6,123 210 0
Mercury 2 10.0 10.0 100.0% 0 1.27s 6,193 197 0
Conhecimentos gerais Pontuação Consistência Taxa de acerto por tentativa Testes instáveis Testes corretos Tempo de resposta (médio) Tokens de entrada Tokens de saída Tokens de raciocínio
Gemma 4 26B A4B 3.0 10.0 0.0% 0 778ms 223 13 0
Mercury 2 3.0 10.0 0.0% 0 548ms 213 19 0

Comparação rápida

Trocar par de comparação

Mercury 2nonevsQwen3 Coder NextmediumMercury 2nonevsMiniMax M2.5mediumGemma 4 26B A4BnoneDisponível grátisvsMiniMax M2.7mediumCobuddymediumvsMercury 2noneMercury 2nonevsGLM 4.7 FlashmediumNorth Mini CodemediumDisponível grátisvsGemma 4 26B A4BnoneDisponível grátisGemma 4 26B A4BnoneDisponível grátisvsMistral Small 4mediumMercury 2nonevsMistral Small 4mediumCobuddymediumvsGemma 4 26B A4BnoneDisponível grátisMercury 2nonevsMiniMax M2.7mediumGemma 4 26B A4BnoneDisponível grátisvsMiniMax M2.5mediumGemma 4 26B A4BnoneDisponível grátisvsQwen3 Coder Nextmedium