Navigation
AI BENCHY
Your ad here

AI BENCHY Compare

Inception: Mercury 2 vs Mistral: Mistral Small 4

Benchmarks générés à partir des suites de tests AI BENCHY le: 2026-03-17

Métrique Mercury 2 Mercury 2 medium Sortie: 2026-02-24 Mistral Small 4 Mistral Small 4 none Sortie: 2026-03-16
Rang #42 #61
Score 6.3 5.3
Cohérence 8.5 9.5
Coût par résultat 0.634 0.108
Coût total $0.045 $0.006
Tests corrects
Taux de réussite par tentative 51.0% 33.3%
Tests instables 3 1
Exécutions totales 51 51
Jetons de sortie 3,723 1,624
Jetons de raisonnement 46,120 0
Temps de réponse (moy.) 2.25s 629ms
Temps de réponse (max) 14.63s 1.72s
Temps de réponse (total) 35.99s 10.70s

Meilleurs modèles par score

Score vs coût total

Temps de réponse (moy.)

Score vs Temps de réponse (moy.)

Total des jetons de sortie

Score vs Total des jetons de sortie

Répartition par catégorie

Astuces anti-IA Score Cohérence Taux de réussite par tentative Tests instables Tests corrects Temps de réponse (moy.) Jetons de sortie Jetons de raisonnement
Mercury 2 6.9 9.9 50.0% 0 1.12s 2,546 2,609
Mistral Small 4 3.4 7.9 16.7% 1 395ms 182 0
Combiné Score Cohérence Taux de réussite par tentative Tests instables Tests corrects Temps de réponse (moy.) Jetons de sortie Jetons de raisonnement
Mercury 2 10.0 10.0 100.0% 0 3.28s 268 4,887
Mistral Small 4 3.0 10.0 0.0% 0 1.72s 496 0
Analyse et extraction des données Score Cohérence Taux de réussite par tentative Tests instables Tests corrects Temps de réponse (moy.) Jetons de sortie Jetons de raisonnement
Mercury 2 7.3 5.9 83.3% 1 1.11s 183 1,656
Mistral Small 4 10.0 10.0 100.0% 0 822ms 261 0
Spécifique au domaine Score Cohérence Taux de réussite par tentative Tests instables Tests corrects Temps de réponse (moy.) Jetons de sortie Jetons de raisonnement
Mercury 2 2.9 7.2 11.1% 1 6.48s 41 30,754
Mistral Small 4 5.3 10.0 33.3% 0 367ms 28 0
Intelligence générale Score Cohérence Taux de réussite par tentative Tests instables Tests corrects Temps de réponse (moy.) Jetons de sortie Jetons de raisonnement
Mercury 2 4.8 10.0 0.0% 0 821ms 137 542
Mistral Small 4 4.0 10.0 0.0% 0 729ms 205 0
Suivi des instructions Score Cohérence Taux de réussite par tentative Tests instables Tests corrects Temps de réponse (moy.) Jetons de sortie Jetons de raisonnement
Mercury 2 10.0 10.0 100.0% 0 1.07s 14 958
Mistral Small 4 6.5 10.0 50.0% 0 380ms 69 0
Puzzle Solving Score Cohérence Taux de réussite par tentative Tests instables Tests corrects Temps de réponse (moy.) Jetons de sortie Jetons de raisonnement
Mercury 2 3.9 7.5 22.2% 1 934ms 354 2,758
Mistral Small 4 3.1 9.9 0.0% 0 589ms 170 0
Appel d'outils Score Cohérence Taux de réussite par tentative Tests instables Tests corrects Temps de réponse (moy.) Jetons de sortie Jetons de raisonnement
Mercury 2 10.0 10.0 100.0% 0 1.89s 180 1,956
Mistral Small 4 10.0 10.0 100.0% 0 1.40s 213 0

Comparaison rapide

Changer la paire de comparaison

DeepSeek V3.2nonevsMercury 2mediumMercury 2mediumvsQwen3.5-FlashnoneSeed-2.0-LitenonevsMercury 2mediumGemini 2.5 FlashnonevsMercury 2mediumMercury 2mediumvsQwen3.5-35B-A3BnoneMercury 2mediumvsGLM 5noneMercury 2mediumvsHunter AlphanoneMistral Small 4nonevsQwen3 Coder NextmediumMercury 2mediumvsQwen3.5 Plus 2026-02-15noneMercury 2mediumvsQwen3.5-122B-A10BnoneMistral Small 4nonevsGLM 4.7 FlashmediumMiniMax M2.5mediumDisponible gratuitementvsMistral Small 4none