AI BENCHY
Advertise here
#157

Mercury 2.5 Preview

Inception Lançamento: 2026-09-02 Testado em: 2026-09-02 02:06 inception/mercury-2.5-preview::high
~100BOutroCódigo fechadoEstimado
(high) (medium) (low) (none)

Resumo

Mercury 2.5 Preview marca 6.6 no AI BENCHY e fica em #157. Tem fiabilidade 10.0, taxa de acerto de 65.2%, custo total de $0.030 e tempo médio de resposta de 4.01s.

O que torna Mercury 2.5 Preview único: Destaca-se mais em Inteligência geral, onde fica em #4, enquanto Específico do domínio é a área mais fraca em #13.

Dados do modelo

Pesquisado em 2026-09-02

Estimado
Parâmetros
~100B
Arquitetura
Outro
Disponibilidade
Código fechado
Licença
-

Melhor estimativa com base em evidências públicas; o fornecedor não divulgou todos os valores.

Fonte dos parâmetros Fonte da disponibilidade

Pontuação

6.6

Consistência

8.2

Confiabilidade

10.0

Custo total (preço atual)

$0.030

Total de tokens de saída

163,505

Total de tokens de entrada

115,759

Preço de entrada

$0.040 / 1M

Preço de saída

$0.150 / 1M

Testes corretos

Testes errados: 10

Taxa de acerto por tentativa: 65.2%

Testes instáveis

5

Testes instáveis tiveram resultados mistos entre execuções (pelo menos um acerto e uma falha).

Tempo de resposta (médio)

4.01s

Tempo de resposta (máx.): 17.71s

Tempo de resposta (total): 88.25s

Resposta incorreta: 6 Não seguiu as instruções: 2 Erro de API: 1 Chamada de ferramenta inválida: 1

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#157 Mercury 2.5 Preview

high
Custo
$0.001
Tempo
4.5s
Tokens
3,851 tok

Gráficos

Escolha o primeiro modelo e depois clique em um segundo modelo para abrir uma página lado a lado.

Total de tokens de saída

Pontuação vs Total de tokens de saída

Comparação rápida

Mercury 2.5 PreviewhighvsQwen3.6 35B A3BmediumMercury 2.5 PreviewhighvsQwen3.5 Plus 2026-02-15noneMercury 2.5 PreviewhighvsGemini 3.1 Flash LitelowMercury 2.5 PreviewhighvsQwen3.6 27BmediumMercury 2.5 PreviewhighvsInkling SmallmediumMercury 2.5 PreviewhighvsLaguna XS 2.1mediumDisponível grátisMercury 2.5 PreviewhighvsGemini 3.1 Flash Lite PreviewlowMercury 2.5 PreviewhighvsGemini 3.1 Flash Lite PreviewnoneMercury 2.5 PreviewhighvsQwen3.5-27BnoneMercury 2.5 PreviewhighvsQwen3.6 Max Previewnone

Detalhamento por categoria

Categoria Pontuação Consistência Testes corretos
Truques anti-IA 10.0 10.0
Programação 6.7 7.8
Combinado 3.8 1.6
Análise e extração de dados 10.0 10.0
Específico do domínio 2.9 4.4
Inteligência geral 5.1 10.0
Seguimento de instruções 9.8 10.0
Resolução de quebra-cabeças 10.0 10.0
Chamada de ferramentas 3.0 10.0
Conhecimentos gerais 3.0 10.0

Modelos comparados