Navigation
Advertise here

Ember-1 (max) vs LongCat 2.0 (low)

Ember-1 (max) mène au score moyen avec 6.7 vs 6.6. LongCat 2.0 (low) a le coût de benchmark le plus bas avec $0.495 vs $3.264. Ember-1 (max) est plus rapide avec 97.34s vs 115.00s, avec des taux de réussite de 59.4% vs 55.1%.

Benchmarks générés à partir des suites de tests AI BENCHY le: 2026-10-01

Modèles comparés

Rang
#181
Total des jetons de sortie
186,901
Temps de réponse (moy.)
97.34s
Coût total
$3.264
Rang
#188
Total des jetons de sortie
346,225
Temps de réponse (moy.)
115.00s
Coût total
$0.495
Modèle recommandé LongCat 2.0 (low)

Son score reste proche du meilleur score ici (6.6 vs 6.7) tout en coûtant environ 6.6x moins que Ember-1 (max).

Comparaison détaillée

Métrique Ember-1 Ember-1 max Sortie: 2026-09-28 LongCat 2.0 LongCat 2.0 low Sortie: 2026-07-20
Score 6.7 6.6
Rang #181 #188
Fiabilité 8.3 9.9
Cohérence 7.8 8.3
Tentatives 69/69 69/69
Tests corrects
Taux de réussite par tentative 59.4% 55.1%
Tests instables 6 5
Exécutions totales 69 69
Coût par résultat 29.671 4.942
Coût total $3.264 $0.495
Prix d'entrée $3.000 / 1M $0.300 / 1M
Prix de sortie $15.000 / 1M $1.200 / 1M
Total des jetons d'entrée 153,399 262,387
Jetons de sortie 7,803 7,344
Jetons de raisonnement 179,098 338,881
Temps de réponse (moy.) 97.34s 115.00s
Temps de réponse (max) 587.08s 560.39s
Temps de réponse (total) 2238.73s 2645.11s
Paramètres ~2.8T au total (~104B actifs) 1.6T au total (48B actifs)
Disponibilité Source fermée Open source

Génération showcase de modèles

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#181 Ember-1

max
Coût
$0.163
Temps
229.4s
Tokens
11,002 tok

#188 LongCat 2.0

low
Coût
$0.024
Temps
428.0s
Tokens
19,557 tok

Meilleurs modèles par score

Score vs coût total

Temps de réponse (moy.)

Score vs Temps de réponse (moy.)

Total des jetons de sortie

Score vs Total des jetons de sortie

Répartition par catégorie

Programmation Score Cohérence Taux de réussite par tentative Tests instables Tests corrects Temps de réponse (moy.) Jetons d'entrée Jetons de sortie Jetons de raisonnement
Ember-1 5.2 4.4 55.6% 2 105.09s 3,362 1,149 27,957
LongCat 2.0 6.6 4.6 77.8% 2 479.30s 6,544 461 206,627

Comparaison rapide

Changer la paire de comparaison