Navigation
AI BENCHY
Your ad here

AI BENCHY Compare

Inception: Mercury 2 vs Mistral: Mistral Small 4

Benchmarks générés à partir des suites de tests AI BENCHY le: 2026-04-16

Métrique Mercury 2 Mercury 2 none Sortie: 2026-02-24 Mistral Small 4 Mistral Small 4 none Sortie: 2026-03-16
Score 4.8 5.2
Rang #89 #81
Cohérence 9.0 9.5
Tests corrects
Taux de réussite par tentative 27.8% 31.5%
Tests instables 2 1
Exécutions totales 54 54
Coût par résultat 0.165 0.118
Coût total $0.007 $0.006
Prix d'entrée $0.250 / 1M $0.150 / 1M
Prix de sortie $0.750 / 1M $0.600 / 1M
Jetons de sortie 1,625 2,207
Jetons de raisonnement 0 0
Temps de réponse (moy.) 613ms 665ms
Temps de réponse (max) 1.27s 1.72s
Temps de réponse (total) 11.04s 11.97s

Meilleurs modèles par score

Score vs coût total

Temps de réponse (moy.)

Score vs Temps de réponse (moy.)

Total des jetons de sortie

Score vs Total des jetons de sortie

Répartition par catégorie

Astuces anti-IA Score Cohérence Taux de réussite par tentative Tests instables Tests corrects Temps de réponse (moy.) Jetons de sortie Jetons de raisonnement
Mercury 2 3.0 10.0 0.0% 0 483ms 286 0
Mistral Small 4 3.4 7.9 16.7% 1 395ms 182 0
Programmation Score Cohérence Taux de réussite par tentative Tests instables Tests corrects Temps de réponse (moy.) Jetons de sortie Jetons de raisonnement
Mercury 2 3.6 8.9 0.0% 0 969ms 310 0
Mistral Small 4 4.5 9.0 0.0% 0 1.28s 583 0
Combiné Score Cohérence Taux de réussite par tentative Tests instables Tests corrects Temps de réponse (moy.) Jetons de sortie Jetons de raisonnement
Mercury 2 3.0 10.0 0.0% 0 606ms 131 0
Mistral Small 4 3.0 10.0 0.0% 0 1.72s 496 0
Analyse et extraction des données Score Cohérence Taux de réussite par tentative Tests instables Tests corrects Temps de réponse (moy.) Jetons de sortie Jetons de raisonnement
Mercury 2 7.3 5.9 83.3% 1 667ms 180 0
Mistral Small 4 10.0 10.0 100.0% 0 822ms 261 0
Spécifique au domaine Score Cohérence Taux de réussite par tentative Tests instables Tests corrects Temps de réponse (moy.) Jetons de sortie Jetons de raisonnement
Mercury 2 5.3 7.2 44.4% 1 534ms 46 0
Mistral Small 4 5.3 10.0 33.3% 0 367ms 28 0
Intelligence générale Score Cohérence Taux de réussite par tentative Tests instables Tests corrects Temps de réponse (moy.) Jetons de sortie Jetons de raisonnement
Mercury 2 4.8 10.0 0.0% 0 628ms 159 0
Mistral Small 4 4.0 10.0 0.0% 0 729ms 205 0
Suivi des instructions Score Cohérence Taux de réussite par tentative Tests instables Tests corrects Temps de réponse (moy.) Jetons de sortie Jetons de raisonnement
Mercury 2 6.5 10.0 50.0% 0 551ms 82 0
Mistral Small 4 6.5 10.0 50.0% 0 380ms 69 0
Résolution d'énigmes Score Cohérence Taux de réussite par tentative Tests instables Tests corrects Temps de réponse (moy.) Jetons de sortie Jetons de raisonnement
Mercury 2 3.1 10.0 0.0% 0 533ms 234 0
Mistral Small 4 3.1 9.9 0.0% 0 589ms 170 0
Appel d'outils Score Cohérence Taux de réussite par tentative Tests instables Tests corrects Temps de réponse (moy.) Jetons de sortie Jetons de raisonnement
Mercury 2 10.0 10.0 100.0% 0 1.27s 197 0
Mistral Small 4 10.0 10.0 100.0% 0 1.40s 213 0

Comparaison rapide

Changer la paire de comparaison

Mistral Small 4nonevsElephantmediumMiniMax M2.7mediumvsMistral Small 4noneMercury 2nonevsQwen3 Coder NextmediumMercury 2nonevsGLM 4.7 FlashmediumMercury 2nonevsQwen3.5-9BmediumMercury 2nonevsElephantmediumMiniMax M2.5mediumDisponible gratuitementvsMistral Small 4noneMercury 2nonevsMiniMax M2.7mediumMistral Small 4nonevsQwen3 Coder NextmediumMistral Small 4nonevsGLM 4.7 FlashmediumMistral Small 4nonevsgpt-oss-120bmediumDisponible gratuitementMistral Small 4nonevsQwen3.5-9Bmedium