Navigation
AI BENCHY
AD
Track all your projects in one dashboard. Get 📊stats, 🔥heatmaps and 👀recordings in one self-hosted dashboard.
uxwizz.com

AI BENCHY Compare

Nemotron 3 Ultra 550b A55b vs StepFun: Step 3.7 Flash

Résumé

Comparaison benchmark Nemotron 3 Ultra 550b A55b vs Step 3.7 Flash : Step 3.7 Flash mène au score moyen avec 8.5 vs 8.1. Nemotron 3 Ultra 550b A55b a le coût de benchmark le plus bas avec $0.177 vs $0.376. Nemotron 3 Ultra 550b A55b est plus rapide avec 15.05s vs 20.35s, avec des taux de réussite de 69.8% vs 73.0%.

Modèle recommandé: Nemotron 3 Ultra 550b A55b - Son score reste proche du meilleur score ici (8.1 vs 8.5) tout en coûtant environ 2.1x moins que Step 3.7 Flash.

Benchmarks générés à partir des suites de tests AI BENCHY le: 2026-06-12

Métrique Nemotron 3 Ultra 550b A55b Nemotron 3 Ultra 550b A55b medium Sortie: 2026-06-04 Disponible gratuitement Step 3.7 Flash Step 3.7 Flash medium Sortie: 2026-05-29
Score 8.1 8.5
Rang #29 #23
Fiabilité 9.7 9.9
Cohérence 8.8 9.3
Tests corrects
Taux de réussite par tentative 69.8% 73.0%
Tests instables 3 2
Exécutions totales 63 61
Coût par résultat 0.000 2.686
Coût total $0.177 $0.376
Prix d'entrée $0.500 / 1M $0.200 / 1M
Prix de sortie $2.500 / 1M $1.150 / 1M
Total des jetons d'entrée 46,813 39,981
Jetons de sortie 18,002 319,958
Jetons de raisonnement 53,091 0
Temps de réponse (moy.) 15.05s 20.35s
Temps de réponse (max) 43.93s 113.98s
Temps de réponse (total) 316.09s 427.42s

Generation showcase

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#29 Nemotron 3 Ultra 550b A55b

medium
No showcase result has been generated for this model yet.
Cost
$0.000
Time
-
Tokens
0 tok

#23 Step 3.7 Flash

medium
Cost
$0.006
Time
46.2s
Tokens
4,466 tok

Meilleurs modèles par score

Score vs coût total

Temps de réponse (moy.)

Score vs Temps de réponse (moy.)

Total des jetons de sortie

Score vs Total des jetons de sortie

Répartition par catégorie

Astuces anti-IA Score Cohérence Taux de réussite par tentative Tests instables Tests corrects Temps de réponse (moy.) Jetons d'entrée Jetons de sortie Jetons de raisonnement
Nemotron 3 Ultra 550b A55b 10.0 10.0 100.0% 0 8.62s 780 835 1,485
Step 3.7 Flash 8.7 7.9 91.7% 1 9.65s 756 32,185 0
Programmation Score Cohérence Taux de réussite par tentative Tests instables Tests corrects Temps de réponse (moy.) Jetons d'entrée Jetons de sortie Jetons de raisonnement
Nemotron 3 Ultra 550b A55b 8.4 7.4 88.9% 1 26.53s 7,686 2,854 17,725
Step 3.7 Flash 8.8 7.8 88.9% 1 27.42s 7,437 44,797 0
Combiné Score Cohérence Taux de réussite par tentative Tests instables Tests corrects Temps de réponse (moy.) Jetons d'entrée Jetons de sortie Jetons de raisonnement
Nemotron 3 Ultra 550b A55b 9.8 10.0 100.0% 0 43.93s 17,574 1,040 3,590
Step 3.7 Flash 10.0 10.0 100.0% 0 9.06s 13,683 7,106 0
Analyse et extraction des données Score Cohérence Taux de réussite par tentative Tests instables Tests corrects Temps de réponse (moy.) Jetons d'entrée Jetons de sortie Jetons de raisonnement
Nemotron 3 Ultra 550b A55b 10.0 10.0 100.0% 0 5.68s 7,989 473 1,285
Step 3.7 Flash 10.0 10.0 100.0% 0 2.75s 7,398 3,020 0
Spécifique au domaine Score Cohérence Taux de réussite par tentative Tests instables Tests corrects Temps de réponse (moy.) Jetons d'entrée Jetons de sortie Jetons de raisonnement
Nemotron 3 Ultra 550b A55b 3.5 4.4 33.3% 2 24.90s 858 11,169 16,249
Step 3.7 Flash 7.7 10.0 66.7% 0 48.27s 708 70,347 0
Intelligence générale Score Cohérence Taux de réussite par tentative Tests instables Tests corrects Temps de réponse (moy.) Jetons d'entrée Jetons de sortie Jetons de raisonnement
Nemotron 3 Ultra 550b A55b 3.7 9.5 0.0% 0 2.52s 360 70 235
Step 3.7 Flash 4.0 10.0 0.0% 0 6.85s 525 3,987 0
Suivi des instructions Score Cohérence Taux de réussite par tentative Tests instables Tests corrects Temps de réponse (moy.) Jetons d'entrée Jetons de sortie Jetons de raisonnement
Nemotron 3 Ultra 550b A55b 9.8 10.0 100.0% 0 6.35s 765 182 1,243
Step 3.7 Flash 9.8 10.0 100.0% 0 1.83s 735 2,166 0
Résolution d'énigmes Score Cohérence Taux de réussite par tentative Tests instables Tests corrects Temps de réponse (moy.) Jetons d'entrée Jetons de sortie Jetons de raisonnement
Nemotron 3 Ultra 550b A55b 5.5 9.9 33.3% 0 3.54s 792 771 2,055
Step 3.7 Flash 5.7 9.9 33.3% 0 6.19s 756 15,071 0
Appel d'outils Score Cohérence Taux de réussite par tentative Tests instables Tests corrects Temps de réponse (moy.) Jetons d'entrée Jetons de sortie Jetons de raisonnement
Nemotron 3 Ultra 550b A55b 10.0 10.0 100.0% 0 7.72s 9,781 304 984
Step 3.7 Flash 10.0 10.0 100.0% 0 4.16s 7,746 2,115 0
Culture générale Score Cohérence Taux de réussite par tentative Tests instables Tests corrects Temps de réponse (moy.) Jetons d'entrée Jetons de sortie Jetons de raisonnement
Nemotron 3 Ultra 550b A55b 3.0 10.0 0.0% 0 38.47s 228 304 8,240
Step 3.7 Flash 3.0 10.0 0.0% 0 113.98s 237 139,164 0

Comparaison rapide

Changer la paire de comparaison