Navigation
Advertise here

Seed-2.0-Code vs Ember-1

Seed-2.0-Code mène au score moyen avec 5.3 vs 5.2. Ember-1 a le coût de benchmark le plus bas avec $0.123 vs $0.151. Seed-2.0-Code est plus rapide avec 14.67s vs 19.46s, avec des taux de réussite de 36.4% vs 42.4%.

Benchmarks générés à partir des suites de tests AI BENCHY le: 2026-09-28

Modèles comparés

Rang
#291
Total des jetons de sortie
23,433
Temps de réponse (moy.)
14.67s
Coût total
$0.151
Rang
#297
Total des jetons de sortie
2,664
Temps de réponse (moy.)
19.46s
Coût total
$0.123
Modèle recommandé Seed-2.0-Code

Il obtient le meilleur score de cette comparaison (5.3) et le meilleur équilibre global entre coût et temps de réponse sur les 2 modèles.

Comparaison détaillée

Métrique Seed-2.0-Code Seed-2.0-Code none Sortie: 2026-08-12 Ember-1 Ember-1 none Sortie: 2026-09-28
Score 5.3 5.2
Rang #291 #297
Fiabilité 8.6 8.1
Cohérence 8.1 8.9
Tentatives 66/66 66/66
Tests corrects
Taux de réussite par tentative 36.4% 42.4%
Tests instables 5 3
Exécutions totales 66 66
Coût par résultat 2.503 1.528
Coût total $0.151 $0.123
Prix d'entrée $0.500 / 1M $3.000 / 1M
Prix de sortie $3.000 / 1M $15.000 / 1M
Total des jetons d'entrée 159,749 27,426
Jetons de sortie 23,433 2,664
Jetons de raisonnement 0 0
Temps de réponse (moy.) 14.67s 19.46s
Temps de réponse (max) 132.84s 93.12s
Temps de réponse (total) 322.71s 428.04s
Paramètres ~200B au total (~20B actifs) ~2.8T au total (~104B actifs)
Disponibilité Source fermée Source fermée

Génération showcase de modèles

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#291 Seed-2.0-Code

none
Coût
$0.030
Temps
140.6s
Tokens
9,924 tok

#297 Ember-1

none
Coût
$0.156
Temps
224.6s
Tokens
10,555 tok

Meilleurs modèles par score

Score vs coût total

Temps de réponse (moy.)

Score vs Temps de réponse (moy.)

Total des jetons de sortie

Score vs Total des jetons de sortie

Répartition par catégorie

Programmation Score Cohérence Taux de réussite par tentative Tests instables Tests corrects Temps de réponse (moy.) Jetons d'entrée Jetons de sortie Jetons de raisonnement
Seed-2.0-Code 3.6 9.8 0.0% 0 13.42s 7,230 505 0
Ember-1 5.5 10.0 33.3% 0 1.94s 7,485 393 0

Comparaison rapide

Changer la paire de comparaison