Navegação
Advertise here

Ember-1 (low) vs Qwen3.5-27B (medium)

A pontuação média está praticamente empatada em 7.5 vs 7.5. Ember-1 (low) tem menor custo de benchmark com $0.662 vs $0.982. Ember-1 (low) é mais rápido com 30.98s vs 113.28s, com taxas de acerto de 66.7% vs 75.8%.

Benchmarks gerados a partir das suítes de teste do AI BENCHY em: 2026-09-28

Modelos comparados

Posição
#120
Total de tokens de saída
37,467
Tempo de resposta (médio)
30.98s
Custo total
$0.662
Posição
#124
Total de tokens de saída
614,909
Tempo de resposta (médio)
113.28s
Custo total
$0.982
Modelo recomendado Ember-1 (low)

Tem a melhor pontuação aqui (7.5) e responde cerca de 3.7x mais rápido que Qwen3.5-27B (medium).

Comparação detalhada

Métrica Ember-1 Ember-1 low Lançamento: 2026-09-28 Qwen3.5-27B Qwen3.5-27B medium Lançamento: 2026-02-24
Pontuação 7.5 7.5
Posição #120 #124
Confiabilidade 8.1 10.0
Consistência 8.5 7.8
Tentativas 66/66 66/66
Testes corretos
Taxa de acerto por tentativa 66.7% 75.8%
Testes instáveis 4 6
Execuções totais 66 66
Custo por resultado 5.085 8.217
Custo total $0.662 $0.982
Preço de entrada $3.000 / 1M $0.195 / 1M
Preço de saída $15.000 / 1M $1.560 / 1M
Total de tokens de entrada 33,011 111,644
Tokens de saída 4,780 16,113
Tokens de raciocínio 32,687 598,796
Tempo de resposta (médio) 30.98s 113.28s
Tempo de resposta (máx.) 93.10s 1026.43s
Tempo de resposta (total) 681.50s 2492.26s
Parâmetros ~2.8T no total (~104B ativos) 27B
Disponibilidade Código fechado Código aberto

Geração showcase de modelos

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#120 Ember-1

low
Custo
$0.016
Tempo
24.2s
Tokens
1,165 tok

#124 Qwen3.5-27B

medium
Custo
$0.008
Tempo
62.0s
Tokens
3,099 tok

Melhores modelos por pontuação

Pontuação vs custo total

Tempo de resposta (médio)

Pontuação vs Tempo de resposta (médio)

Total de tokens de saída

Pontuação vs Total de tokens de saída

Detalhamento por categoria

Programação Pontuação Consistência Taxa de acerto por tentativa Testes instáveis Testes corretos Tempo de resposta (médio) Tokens de entrada Tokens de saída Tokens de raciocínio
Ember-1 10.0 10.0 100.0% 0 37.91s 8,097 2,518 13,142
Qwen3.5-27B 6.2 7.1 55.6% 1 160.69s 7,895 6,381 89,388

Comparação rápida

Trocar par de comparação