Navegação
AI BENCHY
AD
Track all your projects in one dashboard. Get 📊stats, 🔥heatmaps and 👀recordings in one self-hosted dashboard.
uxwizz.com

AI BENCHY Compare

ByteDance Seed: Seed-2.0-Lite vs StepFun: Step 3.7 Flash

Resumo

Comparação benchmark Seed-2.0-Lite vs Step 3.7 Flash: Seed-2.0-Lite lidera na pontuação média com 8.2 vs 7.3. Seed-2.0-Lite tem menor custo de benchmark com $0.175 vs $0.341. Step 3.7 Flash é mais rápido com 15.74s vs 47.07s, com taxas de acerto de 76.2% vs 68.3%.

Modelo recomendado: Seed-2.0-Lite - Tem a melhor pontuação aqui (8.2) e custa cerca de 1.9x menos que Step 3.7 Flash.

Benchmarks gerados a partir das suítes de teste do AI BENCHY em: 2026-06-10

Métrica Seed-2.0-Lite Seed-2.0-Lite medium Lançamento: 2026-02-14 Step 3.7 Flash Step 3.7 Flash low Lançamento: 2026-05-29
Pontuação 8.2 7.3
Posição #20 #58
Confiabilidade 10.0 10.0
Consistência 9.0 8.4
Testes corretos
Taxa de acerto por tentativa 76.2% 68.3%
Testes instáveis 3 4
Execuções totais 63 63
Custo por resultado 1.250 2.840
Custo total $0.175 $0.341
Preço de entrada $0.250 / 1M $0.200 / 1M
Preço de saída $2.000 / 1M $1.150 / 1M
Total de tokens de entrada 46,740 40,101
Tokens de saída 3,230 289,325
Tokens de raciocínio 78,406 0
Tempo de resposta (médio) 47.07s 15.74s
Tempo de resposta (máx.) 254.92s 124.75s
Tempo de resposta (total) 988.37s 330.63s

Generation showcase

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#20 Seed-2.0-Lite

medium
Cost
$0.005
Time
86.7s
Tokens
2,354 tok

#58 Step 3.7 Flash

low
Invalid SVG
Cost
$0.004
Time
25.3s
Tokens
3,072 tok

Melhores modelos por pontuação

Pontuação vs custo total

Tempo de resposta (médio)

Pontuação vs Tempo de resposta (médio)

Total de tokens de saída

Pontuação vs Total de tokens de saída

Detalhamento por categoria

Truques anti-IA Pontuação Consistência Taxa de acerto por tentativa Testes instáveis Testes corretos Tempo de resposta (médio) Tokens de entrada Tokens de saída Tokens de raciocínio
Seed-2.0-Lite 8.3 10.0 75.0% 0 17.99s 942 996 7,142
Step 3.7 Flash 8.7 7.9 91.7% 1 4.02s 756 10,896 0
Programação Pontuação Consistência Taxa de acerto por tentativa Testes instáveis Testes corretos Tempo de resposta (médio) Tokens de entrada Tokens de saída Tokens de raciocínio
Seed-2.0-Lite 8.0 9.8 66.7% 0 156.74s 8,247 458 31,890
Step 3.7 Flash 8.2 7.2 88.9% 1 9.46s 7,437 18,685 0
Combinado Pontuação Consistência Taxa de acerto por tentativa Testes instáveis Testes corretos Tempo de resposta (médio) Tokens de entrada Tokens de saída Tokens de raciocínio
Seed-2.0-Lite 10.0 10.0 100.0% 0 37.67s 16,254 506 4,299
Step 3.7 Flash 10.0 10.0 100.0% 0 7.98s 13,683 6,426 0
Análise e extração de dados Pontuação Consistência Taxa de acerto por tentativa Testes instáveis Testes corretos Tempo de resposta (médio) Tokens de entrada Tokens de saída Tokens de raciocínio
Seed-2.0-Lite 10.0 10.0 100.0% 0 9.07s 8,562 246 1,742
Step 3.7 Flash 7.3 5.8 83.3% 1 2.29s 7,398 2,667 0
Específico do domínio Pontuação Consistência Taxa de acerto por tentativa Testes instáveis Testes corretos Tempo de resposta (médio) Tokens de entrada Tokens de saída Tokens de raciocínio
Seed-2.0-Lite 5.9 7.2 55.6% 1 88.74s 843 15 23,897
Step 3.7 Flash 5.3 7.2 44.4% 1 43.31s 828 104,487 0
Inteligência geral Pontuação Consistência Taxa de acerto por tentativa Testes instáveis Testes corretos Tempo de resposta (médio) Tokens de entrada Tokens de saída Tokens de raciocínio
Seed-2.0-Lite 6.7 3.6 66.7% 1 18.25s 582 304 1,620
Step 3.7 Flash 3.4 9.3 0.0% 0 7.00s 525 4,604 0
Seguimento de instruções Pontuação Consistência Taxa de acerto por tentativa Testes instáveis Testes corretos Tempo de resposta (médio) Tokens de entrada Tokens de saída Tokens de raciocínio
Seed-2.0-Lite 10.0 10.0 100.0% 0 7.26s 834 71 1,480
Step 3.7 Flash 9.8 10.0 100.0% 0 1.58s 735 1,857 0
Resolução de quebra-cabeças Pontuação Consistência Taxa de acerto por tentativa Testes instáveis Testes corretos Tempo de resposta (médio) Tokens de entrada Tokens de saída Tokens de raciocínio
Seed-2.0-Lite 9.0 7.9 88.9% 1 10.23s 894 403 3,285
Step 3.7 Flash 5.5 9.9 33.3% 0 1.84s 756 3,564 0
Chamada de ferramentas Pontuação Consistência Taxa de acerto por tentativa Testes instáveis Testes corretos Tempo de resposta (médio) Tokens de entrada Tokens de saída Tokens de raciocínio
Seed-2.0-Lite 10.0 10.0 100.0% 0 12.38s 9,306 222 1,011
Step 3.7 Flash 10.0 10.0 100.0% 0 3.25s 7,746 1,360 0
Conhecimentos gerais Pontuação Consistência Taxa de acerto por tentativa Testes instáveis Testes corretos Tempo de resposta (médio) Tokens de entrada Tokens de saída Tokens de raciocínio
Seed-2.0-Lite 3.0 10.0 0.0% 0 48.32s 276 9 2,040
Step 3.7 Flash 3.0 10.0 0.0% 0 124.75s 237 134,779 0

Comparação rápida

Trocar par de comparação