AI BENCHY
Advertise here
#44

Seed-2.0-Mini

Bytedance Seed Lançamento: 2026-02-14 Testado em: 2026-04-11 01:44 bytedance-seed/seed-2.0-mini::medium
~50B no total (~5B ativos)MoECódigo fechadoEstimado

Resumo

Seed-2.0-Mini marca 7.5 no AI BENCHY e fica em #44. Tem fiabilidade N/D, taxa de acerto de 66.7%, custo total de $0.037 e tempo médio de resposta de 69.70s.

O que torna Seed-2.0-Mini único: Destaca-se mais em Seguimento de instruções, onde fica em #1, enquanto Truques anti-IA é a área mais fraca em #17. O custo total do benchmark é invulgarmente baixo para este nível de pontuação.

Dados do modelo

Pesquisado em 2026-08-12

Estimado
Parâmetros
~50B no total (~5B ativos)
Arquitetura
MoE
Disponibilidade
Código fechado
Licença
-

Melhor estimativa com base em evidências públicas; o fornecedor não divulgou todos os valores.

Consistência

9.2

Confiabilidade

N/D

Total de tokens de saída

81,657

Total de tokens de entrada

0

Preço de entrada

$0.100 / 1M

Preço de saída

$0.400 / 1M

Testes corretos

Testes errados: 7

Taxa de acerto por tentativa: 66.7%

Testes instáveis

2

Testes instáveis tiveram resultados mistos entre execuções (pelo menos um acerto e uma falha).

Tempo de resposta (médio)

69.70s

Tempo de resposta (máx.): 262.83s

Tempo de resposta (total): 1045.47s

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#44 Seed-2.0-Mini

medium
Custo
$0.002
Tempo
161.7s
Tokens
4,379 tok

Histórico de execuções

Testado em Pontuação Confiabilidade Testes corretos Custo total Comparar
2026-08-14 03:01 Novo teste 7.0 8.7 $0.116 Comparar
2026-07-16 23:23 Novo teste adicionado 7.0 8.5 $0.101 Comparar
2026-06-04 14:36 Novo teste adicionado 6.9 6.7 $0.044 Comparar
2026-05-22 00:44 Suite alterada 7.1 5.0 $0.044 Comparar
2026-04-11 01:44 Primeira execução registrada 7.5 N/D $0.037 Execução atual

Comparação de execuções

ExecuçãoCobertura do benchmarkPontuaçãoConsistênciaConfiabilidadeTestes corretosTestes instáveisTotal de tokens de saídaTotal de tokens de entradaCusto totalTempo de resposta (médio)
2026-04-11 01:44 · Primeira execução registrada54/54 tentativas7.59.2N/D11/18281,6570$0.03769.70s
2026-07-16 23:23 · Novo teste adicionado66/66 tentativas7.08.98.511/223220,634125,467$0.10192.53s
Diferença+0.5+0.30-1-138977-125467-$0.065-22830ms

A cobertura do benchmark é diferente: 54/54 tentativas (Meta: 3 repetições por teste) contra 66/66 tentativas (Meta: 3 repetições por teste). Totais e métricas sensíveis a repetições não são diretamente comparáveis.

Estas duas execuções usaram suites de benchmark diferentes, então as diferenças refletem tanto mudanças do modelo quanto da suite.

Gráficos

Escolha o primeiro modelo e depois clique em um segundo modelo para abrir uma página lado a lado.

Total de tokens de saída

Pontuação vs Total de tokens de saída

Comparação rápida

Detalhamento por categoria

Categoria Pontuação Consistência Testes corretos
Truques anti-IA 6.6 10.0
Programação 10.0 10.0
Combinado 10.0 10.0
Análise e extração de dados 10.0 10.0
Específico do domínio 3.0 10.0
Inteligência geral 5.1 3.4
Seguimento de instruções 10.0 10.0
Resolução de quebra-cabeças 8.2 7.2
Chamada de ferramentas 10.0 10.0

Modelos comparados