Navigation
Advertise here

ERNIE-Light-DT-1.0 (low) vs Beam 1.0 501B A23B (low)

Le score moyen est pratiquement à égalité avec 6.4 vs 6.4. Beam 1.0 501B A23B (low) a le coût de benchmark le plus bas avec $0.432 vs $0.489. Beam 1.0 501B A23B (low) est plus rapide avec 4.89s vs 8.91s, avec des taux de réussite de 65.2% vs 60.9%.

Benchmarks générés à partir des suites de tests AI BENCHY le: 2026-11-13

Modèles comparés

Rang
#288
Total des jetons de sortie
43,895
Temps de réponse (moy.)
8.91s
Coût total
$0.489
Rang
#285
Total des jetons de sortie
71,250
Temps de réponse (moy.)
4.89s
Coût total
$0.432
Modèle recommandé Beam 1.0 501B A23B (low)

Il obtient le meilleur score ici (6.4) et répond environ 1.8x plus vite que ERNIE-Light-DT-1.0 (low).

Comparaison détaillée

Métrique ERNIE-Light-DT-1.0 ERNIE-Light-DT-1.0 low Sortie: 2026-11-12 Beam 1.0 501B A23B Beam 1.0 501B A23B low Sortie: 2026-10-17
Score 6.4 6.4
Rang #288 #285
Fiabilité 9.3 10.0
Cohérence 7.0 8.0
Tentatives 69/69 69/69
Tests corrects
Taux de réussite par tentative 65.2% 60.9%
Tests instables 9 6
Exécutions totales 69 69
Coût par résultat 4.441 3.926
Coût total $0.489 $0.432
Prix d'entrée $1.130 / 1M $1.000 / 1M
Prix de sortie $3.941 / 1M $3.000 / 1M
Prix de lecture du cache $0.113 / 1M $0.100 / 1M
Prix d’écriture du cache N/D N/D
Total des jetons d'entrée 279,234 218,076
Jetons de sortie 13,328 4,863
Jetons de raisonnement 30,567 66,387
Temps de réponse (moy.) 8.91s 4.89s
Temps de réponse (max) 96.92s 29.49s
Temps de réponse (total) 204.98s 112.55s
Paramètres ~320B au total (~18B actifs) 501B au total (23B actifs)
Disponibilité Source fermée Open source

Les prix du cache concernent les tokens d’entrée. La lecture réutilise les prompts en cache ; l’écriture les stocke et peut coûter plus cher. Les tokens de sortie utilisent le prix de sortie.

Génération showcase de modèles

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#288 ERNIE-Light-DT-1.0

low
Coût
$0.005
Temps
7.7s
Tokens
1,177 tok

#285 Beam 1.0 501B A23B

low
Coût
$0.006
Temps
12.0s
Tokens
4,777 tok

Meilleurs modèles par score

Score vs coût total

Temps de réponse (moy.)

Score vs Temps de réponse (moy.)

Total des jetons de sortie

Score vs Total des jetons de sortie

Répartition par catégorie

Programmation Score Cohérence Taux de réussite par tentative Tests instables Tests corrects Temps de réponse (moy.) Jetons d'entrée Jetons de sortie Jetons de raisonnement
ERNIE-Light-DT-1.0 5.7 4.8 55.6% 2 5.33s 7,317 468 4,231
Beam 1.0 501B A23B 10.0 10.0 100.0% 0 7.29s 7,791 569 17,401

Changer la paire de comparaison