AI BENCHY Compare

Mistral: Mistral Small 4 vs OpenAI: GPT-4o-mini

Benchmarks générés à partir des suites de tests AI BENCHY le: 2026-03-17

Métrique	Mistral Small 4 Mistral Small 4 none Sortie: 2026-03-16	GPT-4o-mini GPT-4o-mini none Sortie: 2024-07-18

Métrique	Mistral Small 4 Mistral Small 4 none Sortie: 2026-03-16	GPT-4o-mini GPT-4o-mini none Sortie: 2024-07-18
Rang	#61	#63
Score	5.3	5.0
Cohérence	9.5	10.0
Coût par résultat	0.108	0.115
Coût total	$0.006	$0.005
Tests corrects
Taux de réussite par tentative	33.3%	23.5%
Tests instables	1	0
Exécutions totales	51	51
Jetons de sortie	1,624	1,600
Jetons de raisonnement	0	0
Temps de réponse (moy.)	629ms	1.94s
Temps de réponse (max)	1.72s	7.58s
Temps de réponse (total)	10.70s	19.44s

Meilleurs modèles par score

Score vs coût total

Temps de réponse (moy.)

Score vs Temps de réponse (moy.)

Total des jetons de sortie

Score vs Total des jetons de sortie

Répartition par catégorie

Astuces anti-IA	Score	Cohérence	Taux de réussite par tentative	Tests instables	Tests corrects	Temps de réponse (moy.)	Jetons de sortie	Jetons de raisonnement
Mistral Small 4	3.4	7.9	16.7%	1		395ms	182	0
GPT-4o-mini	4.8	10.0	25.0%	0		1.34s	186	0

Combiné	Score	Cohérence	Taux de réussite par tentative	Tests instables	Tests corrects	Temps de réponse (moy.)	Jetons de sortie	Jetons de raisonnement
Mistral Small 4	3.0	10.0	0.0%	0		1.72s	496	0
GPT-4o-mini	3.0	10.0	0.0%	0		7.58s	568	0

Analyse et extraction des données	Score	Cohérence	Taux de réussite par tentative	Tests instables	Tests corrects	Temps de réponse (moy.)	Jetons de sortie	Jetons de raisonnement
Mistral Small 4	10.0	10.0	100.0%	0		822ms	261	0
GPT-4o-mini	10.0	10.0	100.0%	0		1.27s	183	0

Spécifique au domaine	Score	Cohérence	Taux de réussite par tentative	Tests instables	Tests corrects	Temps de réponse (moy.)	Jetons de sortie	Jetons de raisonnement
Mistral Small 4	5.3	10.0	33.3%	0		367ms	28	0
GPT-4o-mini	3.0	10.0	0.0%	0		637ms	15	0

Intelligence générale	Score	Cohérence	Taux de réussite par tentative	Tests instables	Tests corrects	Temps de réponse (moy.)	Jetons de sortie	Jetons de raisonnement
Mistral Small 4	4.0	10.0	0.0%	0		729ms	205	0
GPT-4o-mini	4.0	10.0	0.0%	0		909ms	66	0

Suivi des instructions	Score	Cohérence	Taux de réussite par tentative	Tests instables	Tests corrects	Temps de réponse (moy.)	Jetons de sortie	Jetons de raisonnement
Mistral Small 4	6.5	10.0	50.0%	0		380ms	69	0
GPT-4o-mini	4.8	10.0	0.0%	0		1.27s	69	0

Puzzle Solving	Score	Cohérence	Taux de réussite par tentative	Tests instables	Tests corrects	Temps de réponse (moy.)	Jetons de sortie	Jetons de raisonnement
Mistral Small 4	3.1	9.9	0.0%	0		589ms	170	0
GPT-4o-mini	3.7	10.0	0.0%	0		1.30s	308	0

Appel d'outils	Score	Cohérence	Taux de réussite par tentative	Tests instables	Tests corrects	Temps de réponse (moy.)	Jetons de sortie	Jetons de raisonnement
Mistral Small 4	10.0	10.0	100.0%	0		1.40s	213	0
GPT-4o-mini	10.0	10.0	100.0%	0		2.51s	205	0

Comparaison rapide

Changer la paire de comparaison

GPT-4o-mininonevsQwen3 Coder Nextmedium GPT-4o-mininonevsGLM 4.7 Flashmedium Mistral Small 4nonevsQwen3 Coder Nextmedium Mistral Small 4mediumvsGPT-4o-mininone GPT-4o-mininonevsQwen3.5-9Bmedium Mistral Small 4nonevsGLM 4.7 Flashmedium MiniMax M2.5mediumDisponible gratuitementvsMistral Small 4none Mistral Small 4nonevsgpt-oss-120bmediumDisponible gratuitement Mistral Small 4nonevsQwen3.5-9Bmedium MiniMax M2.5mediumDisponible gratuitementvsGPT-4o-mininone Mistral Small 4nonevsGrok 4.20 Multi-Agent Betamedium Mistral Small 4nonevsGPT-5 Nanomedium