AI BENCHY
Advertise here
#254

Mercury 2.5 Preview

Inception Lançamento: 2026-09-02 Testado em: 2026-09-02 02:04 inception/mercury-2.5-preview::low
~100BOutroCódigo fechadoEstimado

Resumo

Mercury 2.5 Preview marca 5.0 no AI BENCHY e fica em #254. Tem fiabilidade 10.0, taxa de acerto de 47.0%, custo total de $0.011 e tempo médio de resposta de 1.31s.

O que torna Mercury 2.5 Preview único: Destaca-se mais em Resolução de quebra-cabeças, onde fica em #1, enquanto Chamada de ferramentas é a área mais fraca em #15. É notavelmente rápido em comparação com modelos semelhantes.

Dados do modelo

Pesquisado em 2026-09-02

Estimado
Parâmetros
~100B
Arquitetura
Outro
Disponibilidade
Código fechado
Licença
-

Melhor estimativa com base em evidências públicas; o fornecedor não divulgou todos os valores.

Consistência

7.0

Total de tokens de saída

31,975

Total de tokens de entrada

133,525

Preço de entrada

$0.040 / 1M

Preço de saída

$0.150 / 1M

Testes corretos

Testes errados: 16

Taxa de acerto por tentativa: 47.0%

Testes instáveis

8

Testes instáveis tiveram resultados mistos entre execuções (pelo menos um acerto e uma falha).

Tempo de resposta (médio)

1.31s

Tempo de resposta (máx.): 7.29s

Tempo de resposta (total): 28.77s

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#254 Mercury 2.5 Preview

low
Custo
$0.001
Tempo
1.5s
Tokens
1,169 tok

Gráficos

Escolha o primeiro modelo e depois clique em um segundo modelo para abrir uma página lado a lado.

Total de tokens de saída

Pontuação vs Total de tokens de saída

Comparação rápida

Detalhamento por categoria

Categoria Pontuação Consistência Testes corretos
Truques anti-IA 5.6 3.8
Programação 5.5 10.0
Combinado 3.0 10.0
Análise e extração de dados 6.3 5.8
Específico do domínio 4.1 4.4
Inteligência geral 5.0 10.0
Seguimento de instruções 6.3 10.0
Resolução de quebra-cabeças 8.2 7.2
Chamada de ferramentas 2.8 1.6
Conhecimentos gerais 3.0 10.0

Modelos comparados