AI BENCHY Compare

Google: Gemini 3.1 Flash Lite vs Mistral: Mistral Small 4

Résumé

Comparaison benchmark Gemini 3.1 Flash Lite vs Mistral Small 4 : Gemini 3.1 Flash Lite mène au score moyen avec 6.1 vs 5.1. Mistral Small 4 a le coût de benchmark le plus bas avec $0.007 vs $0.013. Mistral Small 4 est plus rapide avec 630ms vs 1.33s, avec des taux de réussite de 54.0% vs 27.0%.

Modèle recommandé: Mistral Small 4 - Il offre le meilleur compromis global: score compétitif (5.1), coût inférieur à Gemini 3.1 Flash Lite et temps de réponse équilibré.

Benchmarks générés à partir des suites de tests AI BENCHY le: 2026-06-12

Métrique	Gemini 3.1 Flash Lite Gemini 3.1 Flash Lite minimal Sortie: 2026-05-08	Mistral Small 4 Mistral Small 4 none Sortie: 2026-03-16

Métrique	Gemini 3.1 Flash Lite Gemini 3.1 Flash Lite minimal Sortie: 2026-05-08	Mistral Small 4 Mistral Small 4 none Sortie: 2026-03-16
Score	6.1	5.1
Rang	#95	#136
Fiabilité	10.0	10.0
Cohérence	8.8	9.5
Tests corrects
Taux de réussite par tentative	54.0%	27.0%
Tests instables	3	1
Exécutions totales	63	63
Coût par résultat	0.130	0.139
Coût total	$0.013	$0.007
Prix d'entrée	$0.250 / 1M	$0.150 / 1M
Prix de sortie	$1.500 / 1M	$0.600 / 1M
Total des jetons d'entrée	36,973	37,309
Jetons de sortie	2,487	2,201
Jetons de raisonnement	0	0
Temps de réponse (moy.)	1.33s	630ms
Temps de réponse (max)	4.49s	1.72s
Temps de réponse (total)	27.91s	13.22s

Generation showcase

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#95 Gemini 3.1 Flash Lite

minimal

Cost: $0.001
Time: 3.7s
Tokens: 635 tok

#136 Mistral Small 4

none

Cost: $0.002
Time: 10.4s
Tokens: 2,370 tok

Meilleurs modèles par score

Score vs coût total

Temps de réponse (moy.)

Score vs Temps de réponse (moy.)

Total des jetons de sortie

Score vs Total des jetons de sortie

Répartition par catégorie

Astuces anti-IA	Score	Cohérence	Taux de réussite par tentative	Tests instables	Tests corrects	Temps de réponse (moy.)	Jetons d'entrée	Jetons de sortie	Jetons de raisonnement
Gemini 3.1 Flash Lite	8.3	10.0	75.0%	0		1.10s	500	639	0
Mistral Small 4	3.4	7.9	16.7%	1		395ms	708	182	0

Programmation	Score	Cohérence	Taux de réussite par tentative	Tests instables	Tests corrects	Temps de réponse (moy.)	Jetons d'entrée	Jetons de sortie	Jetons de raisonnement
Gemini 3.1 Flash Lite	5.5	10.0	33.3%	0		831ms	8,126	666	0
Mistral Small 4	3.7	9.7	0.0%	0		901ms	7,636	619	0

Combiné	Score	Cohérence	Taux de réussite par tentative	Tests instables	Tests corrects	Temps de réponse (moy.)	Jetons d'entrée	Jetons de sortie	Jetons de raisonnement
Gemini 3.1 Flash Lite	3.0	10.0	0.0%	0		2.53s	12,870	357	0
Mistral Small 4	3.0	10.0	0.0%	0		1.72s	11,640	496	0

Analyse et extraction des données	Score	Cohérence	Taux de réussite par tentative	Tests instables	Tests corrects	Temps de réponse (moy.)	Jetons d'entrée	Jetons de sortie	Jetons de raisonnement
Gemini 3.1 Flash Lite	10.0	10.0	100.0%	0		1.04s	7,552	279	0
Mistral Small 4	10.0	10.0	100.0%	0		822ms	7,914	261	0

Spécifique au domaine	Score	Cohérence	Taux de réussite par tentative	Tests instables	Tests corrects	Temps de réponse (moy.)	Jetons d'entrée	Jetons de sortie	Jetons de raisonnement
Gemini 3.1 Flash Lite	2.9	7.2	11.1%	1		1.02s	641	15	0
Mistral Small 4	5.3	10.0	33.3%	0		367ms	798	28	0

Intelligence générale	Score	Cohérence	Taux de réussite par tentative	Tests instables	Tests corrects	Temps de réponse (moy.)	Jetons d'entrée	Jetons de sortie	Jetons de raisonnement
Gemini 3.1 Flash Lite	4.0	10.0	0.0%	0		791ms	490	63	0
Mistral Small 4	4.0	10.0	0.0%	0		729ms	519	205	0

Suivi des instructions	Score	Cohérence	Taux de réussite par tentative	Tests instables	Tests corrects	Temps de réponse (moy.)	Jetons d'entrée	Jetons de sortie	Jetons de raisonnement
Gemini 3.1 Flash Lite	10.0	10.0	100.0%	0		932ms	615	72	0
Mistral Small 4	6.5	10.0	50.0%	0		380ms	729	69	0

Résolution d'énigmes	Score	Cohérence	Taux de réussite par tentative	Tests instables	Tests corrects	Temps de réponse (moy.)	Jetons d'entrée	Jetons de sortie	Jetons de raisonnement
Gemini 3.1 Flash Lite	6.0	4.6	66.7%	2		2.15s	564	153	0
Mistral Small 4	3.1	9.9	0.0%	0		399ms	735	111	0

Appel d'outils	Score	Cohérence	Taux de réussite par tentative	Tests instables	Tests corrects	Temps de réponse (moy.)	Jetons d'entrée	Jetons de sortie	Jetons de raisonnement
Gemini 3.1 Flash Lite	10.0	10.0	100.0%	0		3.51s	5,457	234	0
Mistral Small 4	10.0	10.0	100.0%	0		1.40s	6,420	213	0

Culture générale	Score	Cohérence	Taux de réussite par tentative	Tests instables	Tests corrects	Temps de réponse (moy.)	Jetons d'entrée	Jetons de sortie	Jetons de raisonnement
Gemini 3.1 Flash Lite	3.0	10.0	0.0%	0		724ms	158	9	0
Mistral Small 4	3.0	10.0	0.0%	0		397ms	210	17	0

Comparaison rapide

Changer la paire de comparaison