- Posição
- #273
- Total de tokens de saída
- 1,818,271
- Tempo de resposta (médio)
- 140.39s
- Custo total
- $0.000
North Mini Code (medium) vs Ember-1
A pontuação média está praticamente empatada em 5.4 vs 5.4. North Mini Code (medium) tem menor custo de benchmark com $0.000 vs $0.786. Ember-1 é mais rápido com 22.65s vs 140.39s, com taxas de acerto de 42.0% vs 43.5%.
Modelos comparados
- Posição
- #277
- Total de tokens de saída
- 11,832
- Tempo de resposta (médio)
- 22.65s
- Custo total
- $0.786
Modelo recomendado
Ember-1
Tem a melhor pontuação aqui (5.4) e responde cerca de 6.2x mais rápido que North Mini Code (medium).
Comparação detalhada
| Métrica | North Mini Code North Mini Code medium Disponível grátis | Ember-1 Ember-1 none |
|---|---|---|
| Pontuação | 5.4 | 5.4 |
| Posição | #273 | #277 |
| Confiabilidade | 8.9 | 8.8 |
| Consistência | 8.6 | 8.6 |
| Tentativas | 61/69 | 69/69 |
| Testes corretos | ||
| Taxa de acerto por tentativa | 42.0% | 43.5% |
| Testes instáveis | 4 | 4 |
| Execuções totais | 61 | 69 |
| Custo por resultado | 0.000 | 9.817 |
| Custo total | $0.000 | $0.786 |
| Preço de entrada | $0.000 / 1M | $3.000 / 1M |
| Preço de saída | $0.000 / 1M | $15.000 / 1M |
| Total de tokens de entrada | 166,347 | 202,617 |
| Tokens de saída | 423,884 | 11,832 |
| Tokens de raciocínio | 1,394,387 | 0 |
| Tempo de resposta (médio) | 140.39s | 22.65s |
| Tempo de resposta (máx.) | 786.72s | 93.12s |
| Tempo de resposta (total) | 3229.07s | 520.91s |
| Parâmetros | 30B no total (3B ativos) | ~2.8T no total (~104B ativos) |
| Disponibilidade | Código aberto | Código fechado |
Geração showcase de modelos
Hamster playing table tennis
Prompt: Create a detailed SVG illustration of a hamster playing table tennis.
#273 North Mini Code
medium- Custo
- $0.000
- Tempo
- 51.8s
- Tokens
- 12,460 tok
#277 Ember-1
none- Custo
- $0.156
- Tempo
- 224.6s
- Tokens
- 10,555 tok
Melhores modelos por pontuação
Pontuação vs custo total
Tempo de resposta (médio)
Pontuação vs Tempo de resposta (médio)
Total de tokens de saída
Pontuação vs Total de tokens de saída
Detalhamento por categoria
| Tarefas de agentes | Pontuação | Consistência | Taxa de acerto por tentativa | Testes instáveis | Testes corretos | Tempo de resposta (médio) | Tokens de entrada | Tokens de saída | Tokens de raciocínio |
|---|---|---|---|---|---|---|---|---|---|
| North Mini Code | 3.9 | 9.6 | 0.0% | 0 | 105.20s | 84,605 | 0 | 53,480 | |
| Ember-1 | 6.1 | 3.1 | 66.7% | 1 | 92.87s | 175,191 | 9,168 | 0 |
| Truques anti-IA | Pontuação | Consistência | Taxa de acerto por tentativa | Testes instáveis | Testes corretos | Tempo de resposta (médio) | Tokens de entrada | Tokens de saída | Tokens de raciocínio |
|---|---|---|---|---|---|---|---|---|---|
| North Mini Code | 8.4 | 10.0 | 75.0% | 0 | 64.79s | 324 | 64,441 | 68,535 | |
| Ember-1 | 5.2 | 7.9 | 41.7% | 1 | 22.37s | 796 | 867 | 0 |
| Programação | Pontuação | Consistência | Taxa de acerto por tentativa | Testes instáveis | Testes corretos | Tempo de resposta (médio) | Tokens de entrada | Tokens de saída | Tokens de raciocínio |
|---|---|---|---|---|---|---|---|---|---|
| North Mini Code | 4.5 | 4.9 | 33.3% | 2 | 320.43s | 7,119 | 219,891 | 561,569 | |
| Ember-1 | 5.5 | 10.0 | 33.3% | 0 | 1.94s | 7,485 | 393 | 0 |
| Combinado | Pontuação | Consistência | Taxa de acerto por tentativa | Testes instáveis | Testes corretos | Tempo de resposta (médio) | Tokens de entrada | Tokens de saída | Tokens de raciocínio |
|---|---|---|---|---|---|---|---|---|---|
| North Mini Code | 2.9 | 5.8 | 16.7% | 1 | 554.89s | 63,682 | 0 | 472,040 | |
| Ember-1 | 3.0 | 10.0 | 0.0% | 0 | 49.01s | 12,162 | 327 | 0 |
| Análise e extração de dados | Pontuação | Consistência | Taxa de acerto por tentativa | Testes instáveis | Testes corretos | Tempo de resposta (médio) | Tokens de entrada | Tokens de saída | Tokens de raciocínio |
|---|---|---|---|---|---|---|---|---|---|
| North Mini Code | 10.0 | 10.0 | 100.0% | 0 | 24.06s | 6,819 | 240 | 2,659 | |
| Ember-1 | 6.4 | 5.9 | 66.7% | 1 | 35.25s | 4,017 | 161 | 0 |
| Específico do domínio | Pontuação | Consistência | Taxa de acerto por tentativa | Testes instáveis | Testes corretos | Tempo de resposta (médio) | Tokens de entrada | Tokens de saída | Tokens de raciocínio |
|---|---|---|---|---|---|---|---|---|---|
| North Mini Code | 2.9 | 7.2 | 11.1% | 1 | 107.19s | 550 | 7,595 | 102,957 | |
| Ember-1 | 5.3 | 10.0 | 33.3% | 0 | 21.61s | 804 | 68 | 0 |
| Inteligência geral | Pontuação | Consistência | Taxa de acerto por tentativa | Testes instáveis | Testes corretos | Tempo de resposta (médio) | Tokens de entrada | Tokens de saída | Tokens de raciocínio |
|---|---|---|---|---|---|---|---|---|---|
| North Mini Code | 5.1 | 10.0 | 0.0% | 0 | 25.08s | 444 | 1,546 | 1,635 | |
| Ember-1 | 5.0 | 10.0 | 0.0% | 0 | 2.28s | 540 | 160 | 0 |
| Seguimento de instruções | Pontuação | Consistência | Taxa de acerto por tentativa | Testes instáveis | Testes corretos | Tempo de resposta (médio) | Tokens de entrada | Tokens de saída | Tokens de raciocínio |
|---|---|---|---|---|---|---|---|---|---|
| North Mini Code | 9.8 | 10.0 | 100.0% | 0 | 15.43s | 379 | 909 | 1,339 | |
| Ember-1 | 6.4 | 5.8 | 66.7% | 1 | 31.00s | 509 | 81 | 0 |
| Resolução de quebra-cabeças | Pontuação | Consistência | Taxa de acerto por tentativa | Testes instáveis | Testes corretos | Tempo de resposta (médio) | Tokens de entrada | Tokens de saída | Tokens de raciocínio |
|---|---|---|---|---|---|---|---|---|---|
| North Mini Code | 3.3 | 10.0 | 0.0% | 0 | 19.70s | 543 | 2,215 | 2,485 | |
| Ember-1 | 10.0 | 10.0 | 100.0% | 0 | 2.54s | 840 | 569 | 0 |
| Chamada de ferramentas | Pontuação | Consistência | Taxa de acerto por tentativa | Testes instáveis | Testes corretos | Tempo de resposta (médio) | Tokens de entrada | Tokens de saída | Tokens de raciocínio |
|---|---|---|---|---|---|---|---|---|---|
| North Mini Code | 10.0 | 10.0 | 100.0% | 0 | 3.93s | 1,776 | 41 | 563 | |
| Ember-1 | 3.0 | 10.0 | 0.0% | 0 | 26.44s | 0 | 0 | 0 |
| Conhecimentos gerais | Pontuação | Consistência | Taxa de acerto por tentativa | Testes instáveis | Testes corretos | Tempo de resposta (médio) | Tokens de entrada | Tokens de saída | Tokens de raciocínio |
|---|---|---|---|---|---|---|---|---|---|
| North Mini Code | 3.0 | 10.0 | 0.0% | 0 | 305.02s | 106 | 127,006 | 127,125 | |
| Ember-1 | 3.0 | 10.0 | 0.0% | 0 | 1.05s | 273 | 38 | 0 |
Comparação rápida
Trocar par de comparação
Ember-1nonevsStep 3.5 FlashmediumNorth Mini CodemediumDisponível grátisvsHy4 previewlowNorth Mini CodemediumDisponível grátisvsQwen3.8 27BnoneDisponível grátisNorth Mini CodemediumDisponível grátisvsMiMo-V2.6-FlashnoneEmber-1nonevsHy4 previewlowEmber-1nonevsGranite 4.2 8BlowSeed-2.0-CodenonevsNorth Mini CodemediumDisponível grátisNorth Mini CodemediumDisponível grátisvsGPT-5.6 LunanoneNorth Mini CodemediumDisponível grátisvsGemma 4 26B A4BnoneDisponível grátisNorth Mini CodemediumDisponível grátisvsGranite 4.2 8BlowNorth Mini CodemediumDisponível grátisvsGPT-6 LunanoneNorth Mini CodemediumDisponível grátisvsGemini 2.5 Flashnone