Navigation
AI BENCHY
Advertise here

AI BENCHY Compare

Nemotron 3 Ultra 550b A55b vs StepFun: Step 3.5 Flash

Benchmarks générés à partir des suites de tests AI BENCHY le: 2026-06-04

Métrique Nemotron 3 Ultra 550b A55b Nemotron 3 Ultra 550b A55b medium Sortie: 2026-06-04 Disponible gratuitement Step 3.5 Flash Step 3.5 Flash medium Sortie: 2026-02-01
Score 7.5 7.2
Rang #41 #62
Fiabilité 9.7 10.0
Cohérence 8.8 9.4
Tests corrects
Taux de réussite par tentative 69.8% 56.7%
Tests instables 3 1
Exécutions totales 63 60
Coût par résultat 0.000 0.198
Coût total $0.000 $0.070
Prix d'entrée $0.000 / 1M $0.090 / 1M
Prix de sortie $0.000 / 1M $0.300 / 1M
Total des jetons d'entrée 46,813 34,431
Jetons de sortie 18,002 91,587
Jetons de raisonnement 53,091 195,973
Temps de réponse (moy.) 15.05s 72.53s
Temps de réponse (max) 43.93s 453.94s
Temps de réponse (total) 316.09s 1015.47s

Meilleurs modèles par score

Score vs coût total

Temps de réponse (moy.)

Score vs Temps de réponse (moy.)

Total des jetons de sortie

Score vs Total des jetons de sortie

Répartition par catégorie

Astuces anti-IA Score Cohérence Taux de réussite par tentative Tests instables Tests corrects Temps de réponse (moy.) Jetons d'entrée Jetons de sortie Jetons de raisonnement
Nemotron 3 Ultra 550b A55b 10.0 10.0 100.0% 0 8.62s 780 835 1,485
Step 3.5 Flash 10.0 10.0 100.0% 0 40.57s 694 20,391 24,176
Programmation Score Cohérence Taux de réussite par tentative Tests instables Tests corrects Temps de réponse (moy.) Jetons d'entrée Jetons de sortie Jetons de raisonnement
Nemotron 3 Ultra 550b A55b 8.4 7.4 88.9% 1 26.53s 7,686 2,854 17,725
Step 3.5 Flash 3.5 7.8 0.0% 0 258.38s 2,211 13,207 22,429
Combiné Score Cohérence Taux de réussite par tentative Tests instables Tests corrects Temps de réponse (moy.) Jetons d'entrée Jetons de sortie Jetons de raisonnement
Nemotron 3 Ultra 550b A55b 9.8 10.0 100.0% 0 43.93s 17,574 1,040 3,590
Step 3.5 Flash 10.0 10.0 100.0% 0 29.57s 13,638 1,176 12,984
Analyse et extraction des données Score Cohérence Taux de réussite par tentative Tests instables Tests corrects Temps de réponse (moy.) Jetons d'entrée Jetons de sortie Jetons de raisonnement
Nemotron 3 Ultra 550b A55b 10.0 10.0 100.0% 0 5.68s 7,989 473 1,285
Step 3.5 Flash 10.0 10.0 100.0% 0 15.01s 7,368 600 13,886
Spécifique au domaine Score Cohérence Taux de réussite par tentative Tests instables Tests corrects Temps de réponse (moy.) Jetons d'entrée Jetons de sortie Jetons de raisonnement
Nemotron 3 Ultra 550b A55b 3.5 4.4 33.3% 2 24.90s 858 11,169 16,249
Step 3.5 Flash 5.3 7.2 44.4% 1 170.45s 673 45,350 90,436
Intelligence générale Score Cohérence Taux de réussite par tentative Tests instables Tests corrects Temps de réponse (moy.) Jetons d'entrée Jetons de sortie Jetons de raisonnement
Nemotron 3 Ultra 550b A55b 3.7 9.5 0.0% 0 2.52s 360 70 235
Step 3.5 Flash 5.5 10.0 0.0% 0 22.39s 509 240 3,506
Suivi des instructions Score Cohérence Taux de réussite par tentative Tests instables Tests corrects Temps de réponse (moy.) Jetons d'entrée Jetons de sortie Jetons de raisonnement
Nemotron 3 Ultra 550b A55b 9.8 10.0 100.0% 0 6.35s 765 182 1,243
Step 3.5 Flash 8.3 10.0 50.0% 0 4.78s 705 2,364 3,521
Résolution d'énigmes Score Cohérence Taux de réussite par tentative Tests instables Tests corrects Temps de réponse (moy.) Jetons d'entrée Jetons de sortie Jetons de raisonnement
Nemotron 3 Ultra 550b A55b 5.5 9.9 33.3% 0 3.54s 792 771 2,055
Step 3.5 Flash 5.3 10.0 33.3% 0 7.22s 711 5,630 10,861
Appel d'outils Score Cohérence Taux de réussite par tentative Tests instables Tests corrects Temps de réponse (moy.) Jetons d'entrée Jetons de sortie Jetons de raisonnement
Nemotron 3 Ultra 550b A55b 10.0 10.0 100.0% 0 7.72s 9,781 304 984
Step 3.5 Flash 10.0 10.0 100.0% 0 11.91s 7,701 275 3,802
Culture générale Score Cohérence Taux de réussite par tentative Tests instables Tests corrects Temps de réponse (moy.) Jetons d'entrée Jetons de sortie Jetons de raisonnement
Nemotron 3 Ultra 550b A55b 3.0 10.0 0.0% 0 38.47s 228 304 8,240
Step 3.5 Flash 3.0 10.0 0.0% 0 108.45s 221 2,354 10,372

Comparaison rapide

Changer la paire de comparaison