AI BENCHY Compare

Inception: Mercury 2 vs Owl Alpha

Benchmarks gerados a partir das suítes de teste do AI BENCHY em: 2026-06-03

Métrica	Mercury 2 Mercury 2 none Lançamento: 2026-02-24	Owl Alpha Owl Alpha medium Lançamento: 2026-04-30

Métrica	Mercury 2 Mercury 2 none Lançamento: 2026-02-24	Owl Alpha Owl Alpha medium Lançamento: 2026-04-30
Pontuação	4.6	5.8
Posição	#153	#107
Confiabilidade	10.0	10.0
Consistência	9.1	9.6
Testes corretos
Taxa de acerto por tentativa	25.0%	41.7%
Testes instáveis	2	1
Execuções totais	60	60
Custo por resultado	0.216	0.000
Custo total	$0.009	$0.000
Preço de entrada	$0.250 / 1M	$0.000 / 1M
Preço de saída	$0.750 / 1M	$0.000 / 1M
Total de tokens de entrada	25,515	40,601
Tokens de saída	3,001	2,965
Tokens de raciocínio	0	0
Tempo de resposta (médio)	614ms	11.64s
Tempo de resposta (máx.)	1.27s	58.63s
Tempo de resposta (total)	12.28s	232.83s

Melhores modelos por pontuação

Pontuação vs custo total

Tempo de resposta (médio)

Pontuação vs Tempo de resposta (médio)

Total de tokens de saída

Pontuação vs Total de tokens de saída

Detalhamento por categoria

Truques anti-IA	Pontuação	Consistência	Taxa de acerto por tentativa	Testes instáveis	Testes corretos	Tempo de resposta (médio)	Tokens de entrada	Tokens de saída	Tokens de raciocínio
Mercury 2	3.0	10.0	0.0%	0		483ms	631	286	0
Owl Alpha	4.8	10.0	25.0%	0		3.97s	1,596	87	0

Programação	Pontuação	Consistência	Taxa de acerto por tentativa	Testes instáveis	Testes corretos	Tempo de resposta (médio)	Tokens de entrada	Tokens de saída	Tokens de raciocínio
Mercury 2	3.5	9.4	0.0%	0		831ms	4,631	1,650	0
Owl Alpha	6.6	10.0	50.0%	0		19.08s	3,872	1,754	0

Combinado	Pontuação	Consistência	Taxa de acerto por tentativa	Testes instáveis	Testes corretos	Tempo de resposta (médio)	Tokens de entrada	Tokens de saída	Tokens de raciocínio
Mercury 2	3.0	10.0	0.0%	0		606ms	4,821	131	0
Owl Alpha	3.0	10.0	0.0%	0		10.01s	14,259	315	0

Análise e extração de dados	Pontuação	Consistência	Taxa de acerto por tentativa	Testes instáveis	Testes corretos	Tempo de resposta (médio)	Tokens de entrada	Tokens de saída	Tokens de raciocínio
Mercury 2	7.3	5.9	83.3%	1		667ms	6,362	180	0
Owl Alpha	10.0	10.0	100.0%	0		21.64s	8,157	246	0

Específico do domínio	Pontuação	Consistência	Taxa de acerto por tentativa	Testes instáveis	Testes corretos	Tempo de resposta (médio)	Tokens de entrada	Tokens de saída	Tokens de raciocínio
Mercury 2	5.3	7.2	44.4%	1		534ms	784	46	0
Owl Alpha	5.3	10.0	33.3%	0		8.58s	1,458	28	0

Inteligência geral	Pontuação	Consistência	Taxa de acerto por tentativa	Testes instáveis	Testes corretos	Tempo de resposta (médio)	Tokens de entrada	Tokens de saída	Tokens de raciocínio
Mercury 2	4.8	10.0	0.0%	0		628ms	495	159	0
Owl Alpha	4.3	10.0	0.0%	0		58.63s	732	98	0

Seguimento de instruções	Pontuação	Consistência	Taxa de acerto por tentativa	Testes instáveis	Testes corretos	Tempo de resposta (médio)	Tokens de entrada	Tokens de saída	Tokens de raciocínio
Mercury 2	6.5	10.0	50.0%	0		551ms	691	82	0
Owl Alpha	6.5	10.0	50.0%	0		10.15s	1,161	57	0

Resolução de quebra-cabeças	Pontuação	Consistência	Taxa de acerto por tentativa	Testes instáveis	Testes corretos	Tempo de resposta (médio)	Tokens de entrada	Tokens de saída	Tokens de raciocínio
Mercury 2	3.1	10.0	0.0%	0		535ms	694	251	0
Owl Alpha	5.3	7.2	44.4%	1		3.40s	1,392	135	0

Chamada de ferramentas	Pontuação	Consistência	Taxa de acerto por tentativa	Testes instáveis	Testes corretos	Tempo de resposta (médio)	Tokens de entrada	Tokens de saída	Tokens de raciocínio
Mercury 2	10.0	10.0	100.0%	0		1.27s	6,193	197	0
Owl Alpha	10.0	10.0	100.0%	0		8.26s	7,524	228	0

Conhecimentos gerais	Pontuação	Consistência	Taxa de acerto por tentativa	Testes instáveis	Testes corretos	Tempo de resposta (médio)	Tokens de entrada	Tokens de saída	Tokens de raciocínio
Mercury 2	3.0	10.0	0.0%	0		548ms	213	19	0
Owl Alpha	3.0	10.0	0.0%	0		2.38s	450	17	0

Comparação rápida

Trocar par de comparação

Owl AlphamediumvsGLM 5.1none DeepSeek V4 PrononevsOwl Alphamedium Owl AlphamediumvsQwen3.5 Plus 2026-04-20none Seed-2.0-LitenonevsOwl Alphamedium Owl AlphamediumvsQwen3.5-35B-A3Bnone Owl AlphamediumvsGLM 5V Turbonone Owl AlphamediumvsQwen3.5-27Bnone Owl AlphamediumvsQwen3.6 27Bnone Owl AlphamediumvsQwen3.5-Flashnone Mercury 2nonevsQwen3 Coder Nextmedium Owl AlphamediumvsMimo V2 PROnone Mercury 2nonevsGLM 4.7 Flashmedium