Navigation
AD
Track all your projects in one dashboard. Get 📊stats, 🔥heatmaps and 👀recordings in one self-hosted dashboard.
uxwizz.com

Ember-1 vs Mistral Small 4

Le score moyen est pratiquement à égalité avec 5.2 vs 5.1. Mistral Small 4 a le coût de benchmark le plus bas avec $0.022 vs $0.123. Mistral Small 4 est plus rapide avec 1.20s vs 19.46s, avec des taux de réussite de 42.4% vs 25.8%.

Benchmarks générés à partir des suites de tests AI BENCHY le: 2026-09-28

Modèles comparés

Rang
#297
Total des jetons de sortie
2,664
Temps de réponse (moy.)
19.46s
Coût total
$0.123
Rang
#300
Total des jetons de sortie
9,812
Temps de réponse (moy.)
1.20s
Coût total
$0.022
Modèle recommandé Mistral Small 4

Il obtient le meilleur score ici (5.1) tout en coûtant environ 5.7x moins que Ember-1.

Comparaison détaillée

Métrique Ember-1 Ember-1 none Sortie: 2026-09-28 Mistral Small 4 Mistral Small 4 none Sortie: 2026-03-16
Score 5.2 5.1
Rang #297 #300
Fiabilité 8.1 10.0
Cohérence 8.9 9.6
Tentatives 66/66 66/66
Tests corrects
Taux de réussite par tentative 42.4% 25.8%
Tests instables 3 1
Exécutions totales 66 66
Coût par résultat 1.528 0.432
Coût total $0.123 $0.022
Prix d'entrée $3.000 / 1M $0.150 / 1M
Prix de sortie $15.000 / 1M $0.600 / 1M
Total des jetons d'entrée 27,426 104,717
Jetons de sortie 2,664 9,812
Jetons de raisonnement 0 0
Temps de réponse (moy.) 19.46s 1.20s
Temps de réponse (max) 93.12s 13.16s
Temps de réponse (total) 428.04s 26.41s
Paramètres ~2.8T au total (~104B actifs) 119B au total (6B actifs)
Disponibilité Source fermée Open source

Génération showcase de modèles

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#297 Ember-1

none
Coût
$0.156
Temps
224.6s
Tokens
10,555 tok

#300 Mistral Small 4

none
Coût
$0.002
Temps
10.4s
Tokens
2,370 tok

Meilleurs modèles par score

Score vs coût total

Temps de réponse (moy.)

Score vs Temps de réponse (moy.)

Total des jetons de sortie

Score vs Total des jetons de sortie

Répartition par catégorie

Programmation Score Cohérence Taux de réussite par tentative Tests instables Tests corrects Temps de réponse (moy.) Jetons d'entrée Jetons de sortie Jetons de raisonnement
Ember-1 5.5 10.0 33.3% 0 1.94s 7,485 393 0
Mistral Small 4 3.7 9.7 0.0% 0 901ms 7,636 619 0

Comparaison rapide

Changer la paire de comparaison