#143 Mercury 2
none- Custo
- $0.002
- Tempo
- 1.8s
- Tokens
- 1,514 tok
Resumo
Mercury 2 marca 4.6 no AI BENCHY e fica em #143. Tem fiabilidade 10.0, taxa de acerto de 25.0%, custo total de $0.009 e tempo médio de resposta de 614ms.
O que torna Mercury 2 único: Destaca-se mais em Inteligência geral, onde fica em #3, enquanto Truques anti-IA é a área mais fraca em #13. É notavelmente rápido em comparação com modelos semelhantes.
4.6
Consistência
9.1
10.0
$0.009
Total de tokens de saída
2,984
Total de tokens de entrada
0
Preço de entrada
$0.250 / 1M
Preço de saída
$0.750 / 1M
Testes instáveis
2
Testes instáveis tiveram resultados mistos entre execuções (pelo menos um acerto e uma falha).
Geração showcase
Prompt: Create a detailed SVG illustration of a hamster playing table tennis.
Histórico de execuções
| Testado em | Pontuação | Confiabilidade | Testes corretos | Custo total | Comparar |
|---|---|---|---|---|---|
| 2026-06-04 14:27 Novo teste adicionado | 4.5 | 10.0 | $0.011 | Comparar | |
| 2026-05-22 00:39 Suite alterada | 4.6 | 10.0 | $0.009 | Execução atual | |
| 2026-04-11 01:44 Primeira execução registrada | 4.8 | N/D | $0.007 | Comparar |
Esta execução usou uma suite de benchmark diferente. Considere as mudanças na suite ao analisar a evolução histórica.
Comparação de execuções
| Execução | Pontuação | Consistência | Confiabilidade | Testes corretos | Testes instáveis | Total de tokens de saída | Total de tokens de entrada | Custo total | Tempo de resposta (médio) |
|---|---|---|---|---|---|---|---|---|---|
| 2026-05-22 00:39 · Suite alterada | 4.6 | 9.1 | 10.0 | 4/20 | 2 | 2,984 | 0 | $0.009 | 614ms |
| 2026-06-04 14:27 · Novo teste adicionado | 4.5 | 9.2 | 10.0 | 4/21 | 2 | 4,439 | 28,113 | $0.011 | 653ms |
| Diferença | +0.1 | -0.1 | 0.0 | 0 | 0 | -1455 | -28113 | -$0.002 | -39ms |
Estas duas execuções usaram suites de benchmark diferentes, então as diferenças refletem tanto mudanças do modelo quanto da suite.
Escolha o primeiro modelo e depois clique em um segundo modelo para abrir uma página lado a lado.
| Categoria | Pontuação | Consistência | Testes corretos |
|---|---|---|---|
| Truques anti-IA | 3.0 | 10.0 | |
| Programação | 3.5 | 9.4 | |
| Combinado | 3.0 | 10.0 | |
| Análise e extração de dados | 7.3 | 5.9 | |
| Específico do domínio | 5.3 | 7.2 | |
| Inteligência geral | 4.8 | 10.0 | |
| Seguimento de instruções | 6.5 | 10.0 | |
| Resolução de quebra-cabeças | 3.1 | 10.0 | |
| Chamada de ferramentas | 10.0 | 10.0 | |
| Conhecimentos gerais | 3.0 | 10.0 |