Navigation
AI BENCHY
AD
Track all your projects in one dashboard. Get 📊stats, 🔥heatmaps and 👀recordings in one self-hosted dashboard.
uxwizz.com

AI BENCHY Compare

ByteDance Seed: Seed-2.0-Lite vs StepFun: Step 3.7 Flash

Résumé

Le score moyen est pratiquement à égalité avec 8.5 vs 8.5. Seed-2.0-Lite (medium) a le coût de benchmark le plus bas avec $0.175 vs $0.376. Step 3.7 Flash (medium) est plus rapide avec 20.35s vs 47.07s, avec des taux de réussite de 76.2% vs 73.0%.

Modèle recommandéSeed-2.0-Lite (medium)Il obtient le meilleur score ici (8.5) tout en coûtant environ 2.1x moins que Step 3.7 Flash (medium).

Benchmarks générés à partir des suites de tests AI BENCHY le: 2026-07-14

Métrique Seed-2.0-Lite Seed-2.0-Lite medium Sortie: 2026-02-14 Step 3.7 Flash Step 3.7 Flash medium Sortie: 2026-05-29
Score 8.5 8.5
Rang #21 #23
Fiabilité 10.0 9.9
Cohérence 9.0 9.3
Tests corrects
Taux de réussite par tentative 76.2% 73.0%
Tests instables 3 2
Exécutions totales 63 61
Coût par résultat 1.250 2.686
Coût total $0.175 $0.376
Prix d'entrée $0.250 / 1M $0.200 / 1M
Prix de sortie $2.000 / 1M $1.150 / 1M
Total des jetons d'entrée 46,740 39,981
Jetons de sortie 3,230 319,958
Jetons de raisonnement 78,406 0
Temps de réponse (moy.) 47.07s 20.35s
Temps de réponse (max) 254.92s 113.98s
Temps de réponse (total) 988.37s 427.42s

Génération showcase

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#21 Seed-2.0-Lite

medium
Coût
$0.005
Temps
86.7s
Tokens
2,354 tok

#23 Step 3.7 Flash

medium
Coût
$0.006
Temps
46.2s
Tokens
4,466 tok

Meilleurs modèles par score

Score vs coût total

Temps de réponse (moy.)

Score vs Temps de réponse (moy.)

Total des jetons de sortie

Score vs Total des jetons de sortie

Répartition par catégorie

Programmation Score Cohérence Taux de réussite par tentative Tests instables Tests corrects Temps de réponse (moy.) Jetons d'entrée Jetons de sortie Jetons de raisonnement
Seed-2.0-Lite 8.0 9.8 66.7% 0 156.74s 8,247 458 31,890
Step 3.7 Flash 8.8 7.8 88.9% 1 27.42s 7,437 44,797 0

Comparaison rapide

Changer la paire de comparaison