AI BENCHY Compare

Mistral: Mistral Small 4 vs StepFun: Step 3.5 Flash

Benchmarks générés à partir des suites de tests AI BENCHY le: 2026-04-11

Métrique	Mistral Small 4 Mistral Small 4 medium Sortie: 2026-03-16	Step 3.5 Flash Step 3.5 Flash none Sortie: 2026-02-01

Métrique	Mistral Small 4 Mistral Small 4 medium Sortie: 2026-03-16	Step 3.5 Flash Step 3.5 Flash none Sortie: 2026-02-01
Score	5.7	3.0
Rang	#69	#93
Cohérence	6.8	10.0
Tests corrects
Taux de réussite par tentative	50.0%	0.0%
Tests instables	7	0
Exécutions totales	54	3
Coût par résultat	0.674	0.000
Coût total	$0.034	$0.000
Prix d'entrée	$0.150 / 1M	$0.100 / 1M
Prix de sortie	$0.600 / 1M	$0.300 / 1M
Jetons de sortie	15,084	0
Jetons de raisonnement	39,408	0
Temps de réponse (moy.)	5.64s	0ms
Temps de réponse (max)	30.49s	0ms
Temps de réponse (total)	101.52s	0ms

Meilleurs modèles par score

Score vs coût total

Temps de réponse (moy.)

Score vs Temps de réponse (moy.)

Total des jetons de sortie

Score vs Total des jetons de sortie

Répartition par catégorie

Astuces anti-IA	Score	Cohérence	Taux de réussite par tentative	Tests instables	Tests corrects	Temps de réponse (moy.)	Jetons de sortie	Jetons de raisonnement
Mistral Small 4	5.6	3.8	66.7%	3		2.67s	4,055	4,778
Step 3.5 Flash	-	-	-	-	-	-	-	-

Programmation	Score	Cohérence	Taux de réussite par tentative	Tests instables	Tests corrects	Temps de réponse (moy.)	Jetons de sortie	Jetons de raisonnement
Mistral Small 4	6.7	3.5	66.7%	1		30.49s	2,796	11,296
Step 3.5 Flash	3.0	10.0	0.0%	0		0ms	0	0

Combiné	Score	Cohérence	Taux de réussite par tentative	Tests instables	Tests corrects	Temps de réponse (moy.)	Jetons de sortie	Jetons de raisonnement
Mistral Small 4	3.0	10.0	0.0%	0		25.25s	2,612	10,700
Step 3.5 Flash	-	-	-	-	-	-	-	-

Analyse et extraction des données	Score	Cohérence	Taux de réussite par tentative	Tests instables	Tests corrects	Temps de réponse (moy.)	Jetons de sortie	Jetons de raisonnement
Mistral Small 4	7.3	5.9	83.3%	1		1.23s	335	723
Step 3.5 Flash	-	-	-	-	-	-	-	-

Spécifique au domaine	Score	Cohérence	Taux de réussite par tentative	Tests instables	Tests corrects	Temps de réponse (moy.)	Jetons de sortie	Jetons de raisonnement
Mistral Small 4	5.3	7.2	44.4%	1		6.11s	2,621	6,904
Step 3.5 Flash	-	-	-	-	-	-	-	-

Intelligence générale	Score	Cohérence	Taux de réussite par tentative	Tests instables	Tests corrects	Temps de réponse (moy.)	Jetons de sortie	Jetons de raisonnement
Mistral Small 4	4.8	10.0	0.0%	0		2.05s	821	828
Step 3.5 Flash	-	-	-	-	-	-	-	-

Suivi des instructions	Score	Cohérence	Taux de réussite par tentative	Tests instables	Tests corrects	Temps de réponse (moy.)	Jetons de sortie	Jetons de raisonnement
Mistral Small 4	7.3	5.8	83.3%	1		1.38s	540	1,031
Step 3.5 Flash	-	-	-	-	-	-	-	-

Résolution d'énigmes	Score	Cohérence	Taux de réussite par tentative	Tests instables	Tests corrects	Temps de réponse (moy.)	Jetons de sortie	Jetons de raisonnement
Mistral Small 4	3.4	9.7	0.0%	0		2.00s	983	2,338
Step 3.5 Flash	-	-	-	-	-	-	-	-

Appel d'outils	Score	Cohérence	Taux de réussite par tentative	Tests instables	Tests corrects	Temps de réponse (moy.)	Jetons de sortie	Jetons de raisonnement
Mistral Small 4	10.0	10.0	100.0%	0		3.50s	321	810
Step 3.5 Flash	-	-	-	-	-	-	-	-

Comparaison rapide

Changer la paire de comparaison

Mistral Small 4mediumvsQwen3.5-122B-A10Bnone Mistral Small 4mediumvsGLM 4.7 Flashnone Mistral Small 4mediumvsGLM 5.1none Mistral Small 4mediumvsKimi K2.5none Mistral Small 4mediumvsGLM 5 Turbonone Mistral Small 4mediumvsQwen3.5-27Bnone Mistral Small 4mediumvsGPT-5.4none Trinity Large PreviewnoneDisponible gratuitementvsMistral Small 4medium Mistral Small 4mediumvsMiMo-V2-Pronone Mistral Small 4mediumvsGrok 4.20none Mistral Small 4mediumvsgpt-oss-120bnoneDisponible gratuitement DeepSeek V3.2nonevsMistral Small 4medium