Mercury 2.5 (low) vs Mistral Small 4 (medium)

Modèles comparés

Modèle recommandé Mercury 2.5 (low)

Il obtient le meilleur score ici (5.1) tout en coûtant environ 9.1x moins que Mistral Small 4 (medium).

Métrique	Mercury 2.5 Mercury 2.5 low Sortie: 2026-09-08	Mistral Small 4 Mistral Small 4 medium Sortie: 2026-03-16

Métrique	Mercury 2.5 Mercury 2.5 low Sortie: 2026-09-08	Mistral Small 4 Mistral Small 4 medium Sortie: 2026-03-16
Score	5.1	5.1
Rang	#265	#262
Fiabilité	9.8	10.0
Cohérence	8.1	7.0
Tentatives	66/66	66/66
Tests corrects
Taux de réussite par tentative	39.4%	43.9%
Tests instables	5	8
Exécutions totales	66	66
Coût par résultat	0.177	1.923
Coût total	$0.011	$0.097
Prix d'entrée	$0.040 / 1M	$0.150 / 1M
Prix de sortie	$0.150 / 1M	$0.600 / 1M
Total des jetons d'entrée	138,020	140,559
Jetons de sortie	6,083	40,268
Jetons de raisonnement	27,636	93,329
Temps de réponse (moy.)	1.35s	10.80s
Temps de réponse (max)	7.48s	59.15s
Temps de réponse (total)	29.74s	237.60s
Paramètres	~100B	119B au total (6B actifs)
Disponibilité	Source fermée	Open source

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

low

medium

Catégorie:

Astuces anti-IA	Score	Cohérence	Taux de réussite par tentative	Tests instables	Tests corrects	Temps de réponse (moy.)	Jetons d'entrée	Jetons de sortie	Jetons de raisonnement
Mercury 2.5	6.9	7.9	66.7%	1		799ms	772	209	2,969
Mistral Small 4	5.6	3.8	66.7%	3		2.67s	708	4,055	4,778

Programmation	Score	Cohérence	Taux de réussite par tentative	Tests instables	Tests corrects	Temps de réponse (moy.)	Jetons d'entrée	Jetons de sortie	Jetons de raisonnement
Mercury 2.5	5.5	10.0	33.3%	0		972ms	7,909	521	2,269
Mistral Small 4	4.4	5.1	33.3%	2		39.98s	7,636	11,635	54,715

Combiné	Score	Cohérence	Taux de réussite par tentative	Tests instables	Tests corrects	Temps de réponse (moy.)	Jetons d'entrée	Jetons de sortie	Jetons de raisonnement
Mercury 2.5	3.0	10.0	0.0%	0		5.16s	107,683	3,750	11,351
Mistral Small 4	3.0	10.0	0.0%	0		32.40s	116,624	17,890	18,384

Analyse et extraction des données	Score	Cohérence	Taux de réussite par tentative	Tests instables	Tests corrects	Temps de réponse (moy.)	Jetons d'entrée	Jetons de sortie	Jetons de raisonnement
Mercury 2.5	6.5	10.0	50.0%	0		1.06s	8,322	739	1,499
Mistral Small 4	7.3	5.9	83.3%	1		1.23s	6,171	335	723

Spécifique au domaine	Score	Cohérence	Taux de réussite par tentative	Tests instables	Tests corrects	Temps de réponse (moy.)	Jetons d'entrée	Jetons de sortie	Jetons de raisonnement
Mercury 2.5	3.6	7.2	22.2%	1		846ms	851	57	2,265
Mistral Small 4	5.9	7.2	55.6%	1		6.33s	807	3,427	7,871

Intelligence générale	Score	Cohérence	Taux de réussite par tentative	Tests instables	Tests corrects	Temps de réponse (moy.)	Jetons d'entrée	Jetons de sortie	Jetons de raisonnement
Mercury 2.5	4.4	9.9	0.0%	0		819ms	525	99	748
Mistral Small 4	4.8	10.0	0.0%	0		2.05s	519	821	828

Suivi des instructions	Score	Cohérence	Taux de réussite par tentative	Tests instables	Tests corrects	Temps de réponse (moy.)	Jetons d'entrée	Jetons de sortie	Jetons de raisonnement
Mercury 2.5	2.9	6.0	16.7%	1		972ms	518	48	1,026
Mistral Small 4	7.3	5.8	83.3%	1		1.38s	729	540	1,031

Résolution d'énigmes	Score	Cohérence	Taux de réussite par tentative	Tests instables	Tests corrects	Temps de réponse (moy.)	Jetons d'entrée	Jetons de sortie	Jetons de raisonnement
Mercury 2.5	5.9	4.5	66.7%	2		792ms	768	249	2,214
Mistral Small 4	3.4	9.7	0.0%	0		2.17s	735	1,226	2,632

Appel d'outils	Score	Cohérence	Taux de réussite par tentative	Tests instables	Tests corrects	Temps de réponse (moy.)	Jetons d'entrée	Jetons de sortie	Jetons de raisonnement
Mercury 2.5	9.8	10.0	100.0%	0		2.72s	10,440	388	2,537
Mistral Small 4	10.0	10.0	100.0%	0		3.50s	6,420	321	810

Culture générale	Score	Cohérence	Taux de réussite par tentative	Tests instables	Tests corrects	Temps de réponse (moy.)	Jetons d'entrée	Jetons de sortie	Jetons de raisonnement
Mercury 2.5	3.0	10.0	0.0%	0		782ms	232	23	758
Mistral Small 4	3.0	10.0	0.0%	0		5.92s	210	18	1,557

Changer la paire de comparaison