Navegação
Advertise here

Seed-2.0-Code vs Mistral Small 4 (medium)

Seed-2.0-Code lidera na pontuação média com 5.3 vs 5.1. Mistral Small 4 (medium) tem menor custo de benchmark com $0.097 vs $0.151. Mistral Small 4 (medium) é mais rápido com 10.80s vs 14.67s, com taxas de acerto de 36.4% vs 43.9%.

Benchmarks gerados a partir das suítes de teste do AI BENCHY em: 2026-09-24

Modelos comparados

Posição
#288
Total de tokens de saída
23,433
Tempo de resposta (médio)
14.67s
Custo total
$0.151
Posição
#297
Total de tokens de saída
133,597
Tempo de resposta (médio)
10.80s
Custo total
$0.097
Modelo recomendado Mistral Small 4 (medium)

A pontuação fica perto da melhor aqui (5.1 vs 5.3) e custa cerca de 1.6x menos que Seed-2.0-Code.

Comparação detalhada

Métrica Seed-2.0-Code Seed-2.0-Code none Lançamento: 2026-08-12 Mistral Small 4 Mistral Small 4 medium Lançamento: 2026-03-16
Pontuação 5.3 5.1
Posição #288 #297
Confiabilidade 8.6 10.0
Consistência 8.1 7.0
Tentativas 66/66 66/66
Testes corretos
Taxa de acerto por tentativa 36.4% 43.9%
Testes instáveis 5 8
Execuções totais 66 66
Custo por resultado 2.503 1.923
Custo total $0.151 $0.097
Preço de entrada $0.500 / 1M $0.150 / 1M
Preço de saída $3.000 / 1M $0.600 / 1M
Total de tokens de entrada 159,749 140,559
Tokens de saída 23,433 40,268
Tokens de raciocínio 0 93,329
Tempo de resposta (médio) 14.67s 10.80s
Tempo de resposta (máx.) 132.84s 59.15s
Tempo de resposta (total) 322.71s 237.60s
Parâmetros ~200B no total (~20B ativos) 119B no total (6B ativos)
Disponibilidade Código fechado Código aberto

Geração showcase de modelos

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#288 Seed-2.0-Code

none
Custo
$0.030
Tempo
140.6s
Tokens
9,924 tok

#297 Mistral Small 4

medium
Custo
$0.006
Tempo
47.9s
Tokens
9,857 tok

Melhores modelos por pontuação

Pontuação vs custo total

Tempo de resposta (médio)

Pontuação vs Tempo de resposta (médio)

Total de tokens de saída

Pontuação vs Total de tokens de saída

Detalhamento por categoria

Programação Pontuação Consistência Taxa de acerto por tentativa Testes instáveis Testes corretos Tempo de resposta (médio) Tokens de entrada Tokens de saída Tokens de raciocínio
Seed-2.0-Code 3.6 9.8 0.0% 0 13.42s 7,230 505 0
Mistral Small 4 4.4 5.1 33.3% 2 39.98s 7,636 11,635 54,715

Comparação rápida

Trocar par de comparação