AI BENCHY Compare

IBM: Granite 4.1 8B vs Mistral: Mistral Small 4

Benchmarks générés à partir des suites de tests AI BENCHY le: 2026-05-01

Métrique	Granite 4.1 8B Granite 4.1 8B none Sortie: 2026-05-01	Mistral Small 4 Mistral Small 4 medium Sortie: 2026-03-16

Métrique	Granite 4.1 8B Granite 4.1 8B none Sortie: 2026-05-01	Mistral Small 4 Mistral Small 4 medium Sortie: 2026-03-16
Score	4.3	5.7
Rang	#135	#99
Fiabilité	10.0	N/D
Cohérence	10.0	6.8
Tests corrects
Taux de réussite par tentative	11.1%	50.0%
Tests instables	0	7
Exécutions totales	54	54
Coût par résultat	0.110	0.674
Coût total	$0.003	$0.034
Prix d'entrée	$0.050 / 1M	$0.150 / 1M
Prix de sortie	$0.100 / 1M	$0.600 / 1M
Jetons de sortie	2,712	15,084
Jetons de raisonnement	0	39,408
Temps de réponse (moy.)	767ms	5.64s
Temps de réponse (max)	2.17s	30.49s
Temps de réponse (total)	13.81s	101.52s

Meilleurs modèles par score

Score vs coût total

Temps de réponse (moy.)

Score vs Temps de réponse (moy.)

Total des jetons de sortie

Score vs Total des jetons de sortie

Répartition par catégorie

Astuces anti-IA	Score	Cohérence	Taux de réussite par tentative	Tests instables	Tests corrects	Temps de réponse (moy.)	Jetons de sortie	Jetons de raisonnement
Granite 4.1 8B	4.9	10.0	25.0%	0		844ms	903	0
Mistral Small 4	5.6	3.8	66.7%	3		2.67s	4,055	4,778

Programmation	Score	Cohérence	Taux de réussite par tentative	Tests instables	Tests corrects	Temps de réponse (moy.)	Jetons de sortie	Jetons de raisonnement
Granite 4.1 8B	6.9	10.0	0.0%	0		1.07s	339	0
Mistral Small 4	6.7	3.5	66.7%	1		30.49s	2,796	11,296

Combiné	Score	Cohérence	Taux de réussite par tentative	Tests instables	Tests corrects	Temps de réponse (moy.)	Jetons de sortie	Jetons de raisonnement
Granite 4.1 8B	3.0	10.0	0.0%	0		1.88s	396	0
Mistral Small 4	3.0	10.0	0.0%	0		25.25s	2,612	10,700

Analyse et extraction des données	Score	Cohérence	Taux de réussite par tentative	Tests instables	Tests corrects	Temps de réponse (moy.)	Jetons de sortie	Jetons de raisonnement
Granite 4.1 8B	3.0	10.0	0.0%	0		575ms	195	0
Mistral Small 4	7.3	5.9	83.3%	1		1.23s	335	723

Spécifique au domaine	Score	Cohérence	Taux de réussite par tentative	Tests instables	Tests corrects	Temps de réponse (moy.)	Jetons de sortie	Jetons de raisonnement
Granite 4.1 8B	3.0	10.0	0.0%	0		357ms	24	0
Mistral Small 4	5.3	7.2	44.4%	1		6.11s	2,621	6,904

Intelligence générale	Score	Cohérence	Taux de réussite par tentative	Tests instables	Tests corrects	Temps de réponse (moy.)	Jetons de sortie	Jetons de raisonnement
Granite 4.1 8B	4.0	10.0	0.0%	0		499ms	115	0
Mistral Small 4	4.8	10.0	0.0%	0		2.05s	821	828

Suivi des instructions	Score	Cohérence	Taux de réussite par tentative	Tests instables	Tests corrects	Temps de réponse (moy.)	Jetons de sortie	Jetons de raisonnement
Granite 4.1 8B	3.6	9.9	0.0%	0		344ms	66	0
Mistral Small 4	7.3	5.8	83.3%	1		1.38s	540	1,031

Résolution d'énigmes	Score	Cohérence	Taux de réussite par tentative	Tests instables	Tests corrects	Temps de réponse (moy.)	Jetons de sortie	Jetons de raisonnement
Granite 4.1 8B	3.7	10.0	0.0%	0		635ms	431	0
Mistral Small 4	3.4	9.7	0.0%	0		2.00s	983	2,338

Appel d'outils	Score	Cohérence	Taux de réussite par tentative	Tests instables	Tests corrects	Temps de réponse (moy.)	Jetons de sortie	Jetons de raisonnement
Granite 4.1 8B	10.0	10.0	100.0%	0		2.17s	243	0
Mistral Small 4	10.0	10.0	100.0%	0		3.50s	321	810

Comparaison rapide

Changer la paire de comparaison

Mistral Small 4mediumvsGLM 4.7 Flashnone Granite 4.1 8BnonevsQwen3.5-9Bmedium Mistral Small 4mediumvsKimi K2.5none Mistral Small 4mediumvsGLM 5.1none Mistral Small 4mediumvsQwen3.6 Flashnone Mistral Small 4mediumvsGLM 5 Turbonone Mistral Small 4mediumvsMiMo-V2.5-Pronone Mistral Small 4mediumvsQwen3.5 Plus 2026-04-20none Mistral Small 4mediumvsKimi K2.6none Mistral Small 4mediumvsGPT-5.4none Mistral Small 4mediumvsQwen3.5-122B-A10Bnone Mistral Small 4mediumvsGrok 4.20none