Navigation
AI BENCHY
AD
Track all your projects in one dashboard. Get 📊stats, 🔥heatmaps and 👀recordings in one self-hosted dashboard.
uxwizz.com

AI BENCHY Compare

Inception: Mercury 2 vs xAI: Grok 4.1 Fast

Benchmarks générés à partir des suites de tests AI BENCHY le: 2026-04-16

Métrique Mercury 2 Mercury 2 none Sortie: 2026-02-24 Grok 4.1 Fast Grok 4.1 Fast medium Sortie: 2025-11-19
Score 4.8 6.7
Rang #89 #51
Cohérence 9.0 7.2
Tests corrects
Taux de réussite par tentative 27.8% 64.8%
Tests instables 2 6
Exécutions totales 54 54
Coût par résultat 0.165 0.613
Coût total $0.007 $0.056
Prix d'entrée $0.250 / 1M $0.200 / 1M
Prix de sortie $0.750 / 1M $0.500 / 1M
Jetons de sortie 1,625 2,010
Jetons de raisonnement 0 91,298
Temps de réponse (moy.) 613ms 23.88s
Temps de réponse (max) 1.27s 121.79s
Temps de réponse (total) 11.04s 262.66s

Meilleurs modèles par score

Score vs coût total

Temps de réponse (moy.)

Score vs Temps de réponse (moy.)

Total des jetons de sortie

Score vs Total des jetons de sortie

Répartition par catégorie

Astuces anti-IA Score Cohérence Taux de réussite par tentative Tests instables Tests corrects Temps de réponse (moy.) Jetons de sortie Jetons de raisonnement
Mercury 2 3.0 10.0 0.0% 0 483ms 286 0
Grok 4.1 Fast 8.7 7.9 91.7% 1 3.81s 108 4,741
Programmation Score Cohérence Taux de réussite par tentative Tests instables Tests corrects Temps de réponse (moy.) Jetons de sortie Jetons de raisonnement
Mercury 2 3.6 8.9 0.0% 0 969ms 310 0
Grok 4.1 Fast 2.3 1.1 33.3% 1 23.58s 821 6,703
Combiné Score Cohérence Taux de réussite par tentative Tests instables Tests corrects Temps de réponse (moy.) Jetons de sortie Jetons de raisonnement
Mercury 2 3.0 10.0 0.0% 0 606ms 131 0
Grok 4.1 Fast 10.0 10.0 100.0% 0 37.64s 261 12,272
Analyse et extraction des données Score Cohérence Taux de réussite par tentative Tests instables Tests corrects Temps de réponse (moy.) Jetons de sortie Jetons de raisonnement
Mercury 2 7.3 5.9 83.3% 1 667ms 180 0
Grok 4.1 Fast 10.0 10.0 100.0% 0 6.63s 180 5,409
Spécifique au domaine Score Cohérence Taux de réussite par tentative Tests instables Tests corrects Temps de réponse (moy.) Jetons de sortie Jetons de raisonnement
Mercury 2 5.3 7.2 44.4% 1 534ms 46 0
Grok 4.1 Fast 5.8 4.4 66.7% 2 121.79s 11 37,657
Intelligence générale Score Cohérence Taux de réussite par tentative Tests instables Tests corrects Temps de réponse (moy.) Jetons de sortie Jetons de raisonnement
Mercury 2 4.8 10.0 0.0% 0 628ms 159 0
Grok 4.1 Fast 4.2 9.9 0.0% 0 16.25s 127 3,456
Suivi des instructions Score Cohérence Taux de réussite par tentative Tests instables Tests corrects Temps de réponse (moy.) Jetons de sortie Jetons de raisonnement
Mercury 2 6.5 10.0 50.0% 0 551ms 82 0
Grok 4.1 Fast 6.6 10.0 50.0% 0 5.30s 55 3,489
Résolution d'énigmes Score Cohérence Taux de réussite par tentative Tests instables Tests corrects Temps de réponse (moy.) Jetons de sortie Jetons de raisonnement
Mercury 2 3.1 10.0 0.0% 0 533ms 234 0
Grok 4.1 Fast 5.3 7.2 44.4% 1 8.08s 187 6,086
Appel d'outils Score Cohérence Taux de réussite par tentative Tests instables Tests corrects Temps de réponse (moy.) Jetons de sortie Jetons de raisonnement
Mercury 2 10.0 10.0 100.0% 0 1.27s 197 0
Grok 4.1 Fast 2.8 1.6 33.3% 1 27.71s 260 11,485

Comparaison rapide

Changer la paire de comparaison