AI BENCHY
AD
Track all your projects in one dashboard. Get 📊stats, 🔥heatmaps and 👀recordings in one self-hosted dashboard.
uxwizz.com
#91

Mercury 2.5 Preview

Inception Lançamento: 2026-09-02 Testado em: 2026-09-02 02:06 inception/mercury-2.5-preview::medium
~100BOutroCódigo fechadoEstimado
(high) (medium) (low) (none)

Resumo

Mercury 2.5 Preview marca 7.5 no AI BENCHY e fica em #91. Tem fiabilidade 10.0, taxa de acerto de 69.7%, custo total de $0.024 e tempo médio de resposta de 3.58s.

O que torna Mercury 2.5 Preview único: Destaca-se mais em Truques anti-IA, onde fica em #1, enquanto Chamada de ferramentas é a área mais fraca em #16. O custo total do benchmark é invulgarmente baixo para este nível de pontuação. É notavelmente rápido em comparação com modelos semelhantes.

Dados do modelo

Pesquisado em 2026-09-02

Estimado
Parâmetros
~100B
Arquitetura
Outro
Disponibilidade
Código fechado
Licença
-

Melhor estimativa com base em evidências públicas; o fornecedor não divulgou todos os valores.

Consistência

9.6

Total de tokens de saída

127,034

Total de tokens de entrada

112,713

Preço de entrada

$0.040 / 1M

Preço de saída

$0.150 / 1M

Testes corretos

Testes errados: 7

Taxa de acerto por tentativa: 69.7%

Testes instáveis

1

Testes instáveis tiveram resultados mistos entre execuções (pelo menos um acerto e uma falha).

Tempo de resposta (médio)

3.58s

Tempo de resposta (máx.): 17.84s

Tempo de resposta (total): 78.66s

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#91 Mercury 2.5 Preview

medium
Custo
$0.001
Tempo
2.7s
Tokens
2,241 tok

Gráficos

Escolha o primeiro modelo e depois clique em um segundo modelo para abrir uma página lado a lado.

Total de tokens de saída

Pontuação vs Total de tokens de saída

Comparação rápida

Detalhamento por categoria

Categoria Pontuação Consistência Testes corretos
Truques anti-IA 10.0 10.0
Programação 7.8 10.0
Combinado 6.5 10.0
Análise e extração de dados 10.0 10.0
Específico do domínio 5.3 7.2
Inteligência geral 5.0 10.0
Seguimento de instruções 9.8 10.0
Resolução de quebra-cabeças 10.0 10.0
Chamada de ferramentas 3.0 10.0
Conhecimentos gerais 3.0 10.0

Modelos comparados