Navigation
AI BENCHY
Advertise here

AI BENCHY Compare

Inception: Mercury 2 vs Mistral: Mistral Small 4

Benchmarks générés à partir des suites de tests AI BENCHY le: 2026-06-03

Métrique Mercury 2 Mercury 2 none Sortie: 2026-02-24 Mistral Small 4 Mistral Small 4 medium Sortie: 2026-03-16
Score 4.6 5.4
Rang #153 #129
Fiabilité 10.0 10.0
Cohérence 9.1 7.1
Tests corrects
Taux de réussite par tentative 25.0% 45.0%
Tests instables 2 7
Exécutions totales 60 60
Coût par résultat 0.216 1.112
Coût total $0.009 $0.056
Prix d'entrée $0.250 / 1M $0.150 / 1M
Prix de sortie $0.750 / 1M $0.600 / 1M
Total des jetons d'entrée 25,515 39,834
Jetons de sortie 3,001 21,871
Jetons de raisonnement 0 68,349
Temps de réponse (moy.) 614ms 8.35s
Temps de réponse (max) 1.27s 59.15s
Temps de réponse (total) 12.28s 167.08s

Meilleurs modèles par score

Score vs coût total

Temps de réponse (moy.)

Score vs Temps de réponse (moy.)

Total des jetons de sortie

Score vs Total des jetons de sortie

Répartition par catégorie

Astuces anti-IA Score Cohérence Taux de réussite par tentative Tests instables Tests corrects Temps de réponse (moy.) Jetons d'entrée Jetons de sortie Jetons de raisonnement
Mercury 2 3.0 10.0 0.0% 0 483ms 631 286 0
Mistral Small 4 5.6 3.8 66.7% 3 2.67s 708 4,055 4,778
Programmation Score Cohérence Taux de réussite par tentative Tests instables Tests corrects Temps de réponse (moy.) Jetons d'entrée Jetons de sortie Jetons de raisonnement
Mercury 2 3.5 9.4 0.0% 0 831ms 4,631 1,650 0
Mistral Small 4 5.1 6.8 33.3% 1 44.82s 4,894 9,322 38,386
Combiné Score Cohérence Taux de réussite par tentative Tests instables Tests corrects Temps de réponse (moy.) Jetons d'entrée Jetons de sortie Jetons de raisonnement
Mercury 2 3.0 10.0 0.0% 0 606ms 4,821 131 0
Mistral Small 4 3.0 10.0 0.0% 0 25.25s 18,706 2,612 10,700
Analyse et extraction des données Score Cohérence Taux de réussite par tentative Tests instables Tests corrects Temps de réponse (moy.) Jetons d'entrée Jetons de sortie Jetons de raisonnement
Mercury 2 7.3 5.9 83.3% 1 667ms 6,362 180 0
Mistral Small 4 7.3 5.9 83.3% 1 1.23s 6,171 335 723
Spécifique au domaine Score Cohérence Taux de réussite par tentative Tests instables Tests corrects Temps de réponse (moy.) Jetons d'entrée Jetons de sortie Jetons de raisonnement
Mercury 2 5.3 7.2 44.4% 1 534ms 784 46 0
Mistral Small 4 5.3 7.2 44.4% 1 6.11s 742 2,621 6,904
Intelligence générale Score Cohérence Taux de réussite par tentative Tests instables Tests corrects Temps de réponse (moy.) Jetons d'entrée Jetons de sortie Jetons de raisonnement
Mercury 2 4.8 10.0 0.0% 0 628ms 495 159 0
Mistral Small 4 4.8 10.0 0.0% 0 2.05s 519 821 828
Suivi des instructions Score Cohérence Taux de réussite par tentative Tests instables Tests corrects Temps de réponse (moy.) Jetons d'entrée Jetons de sortie Jetons de raisonnement
Mercury 2 6.5 10.0 50.0% 0 551ms 691 82 0
Mistral Small 4 7.3 5.8 83.3% 1 1.38s 729 540 1,031
Résolution d'énigmes Score Cohérence Taux de réussite par tentative Tests instables Tests corrects Temps de réponse (moy.) Jetons d'entrée Jetons de sortie Jetons de raisonnement
Mercury 2 3.1 10.0 0.0% 0 535ms 694 251 0
Mistral Small 4 3.4 9.7 0.0% 0 2.17s 735 1,226 2,632
Appel d'outils Score Cohérence Taux de réussite par tentative Tests instables Tests corrects Temps de réponse (moy.) Jetons d'entrée Jetons de sortie Jetons de raisonnement
Mercury 2 10.0 10.0 100.0% 0 1.27s 6,193 197 0
Mistral Small 4 10.0 10.0 100.0% 0 3.50s 6,420 321 810
Culture générale Score Cohérence Taux de réussite par tentative Tests instables Tests corrects Temps de réponse (moy.) Jetons d'entrée Jetons de sortie Jetons de raisonnement
Mercury 2 3.0 10.0 0.0% 0 548ms 213 19 0
Mistral Small 4 3.0 10.0 0.0% 0 5.92s 210 18 1,557

Comparaison rapide

Changer la paire de comparaison

Mistral Small 4mediumvsGrok 4.20noneDeepSeek V3.2nonevsMistral Small 4mediumMistral Small 4mediumvsgpt-oss-120bnoneDisponible gratuitementMistral Small 4mediumvsQwen3.5-122B-A10BnoneMistral Small 4mediumvsGLM 5 TurbononeMistral Small 4mediumvsKimi K2.5noneMistral Small 4mediumvsQwen3.6 FlashnoneMercury 2nonevsQwen3 Coder NextmediumMercury 2nonevsGLM 4.7 FlashmediumMistral Small 4mediumvsKimi K2.6noneDisponible gratuitementMistral Small 4mediumvsMiMo-V2.5-PrononeMistral Small 4mediumvsGPT-5.4none