Navigation
AI BENCHY
AD
Track all your projects in one dashboard. Get 📊stats, 🔥heatmaps and 👀recordings in one self-hosted dashboard.
uxwizz.com

AI BENCHY Compare

Inception: Mercury 2 vs OpenAI: GPT-5 Nano

Benchmarks générés à partir des suites de tests AI BENCHY le: 2026-04-16

Métrique Mercury 2 Mercury 2 none Sortie: 2026-02-24 GPT-5 Nano GPT-5 Nano medium Sortie: 2025-08-07
Score 4.8 6.3
Rang #89 #56
Cohérence 9.0 6.5
Tests corrects
Taux de réussite par tentative 27.8% 59.3%
Tests instables 2 8
Exécutions totales 54 54
Coût par résultat 0.165 0.942
Coût total $0.007 $0.066
Prix d'entrée $0.250 / 1M $0.050 / 1M
Prix de sortie $0.750 / 1M $0.400 / 1M
Jetons de sortie 1,625 4,980
Jetons de raisonnement 0 156,288
Temps de réponse (moy.) 613ms 44.13s
Temps de réponse (max) 1.27s 204.02s
Temps de réponse (total) 11.04s 485.47s

Meilleurs modèles par score

Score vs coût total

Temps de réponse (moy.)

Score vs Temps de réponse (moy.)

Total des jetons de sortie

Score vs Total des jetons de sortie

Répartition par catégorie

Astuces anti-IA Score Cohérence Taux de réussite par tentative Tests instables Tests corrects Temps de réponse (moy.) Jetons de sortie Jetons de raisonnement
Mercury 2 3.0 10.0 0.0% 0 483ms 286 0
GPT-5 Nano 6.5 7.9 58.3% 1 25.50s 1,221 21,184
Programmation Score Cohérence Taux de réussite par tentative Tests instables Tests corrects Temps de réponse (moy.) Jetons de sortie Jetons de raisonnement
Mercury 2 3.6 8.9 0.0% 0 969ms 310 0
GPT-5 Nano 6.7 3.5 66.7% 1 40.73s 480 12,992
Combiné Score Cohérence Taux de réussite par tentative Tests instables Tests corrects Temps de réponse (moy.) Jetons de sortie Jetons de raisonnement
Mercury 2 3.0 10.0 0.0% 0 606ms 131 0
GPT-5 Nano 10.0 10.0 100.0% 0 65.96s 578 17,984
Analyse et extraction des données Score Cohérence Taux de réussite par tentative Tests instables Tests corrects Temps de réponse (moy.) Jetons de sortie Jetons de raisonnement
Mercury 2 7.3 5.9 83.3% 1 667ms 180 0
GPT-5 Nano 3.7 1.7 50.0% 2 21.42s 453 10,560
Spécifique au domaine Score Cohérence Taux de réussite par tentative Tests instables Tests corrects Temps de réponse (moy.) Jetons de sortie Jetons de raisonnement
Mercury 2 5.3 7.2 44.4% 1 534ms 46 0
GPT-5 Nano 5.2 4.4 55.6% 2 204.02s 237 64,448
Intelligence générale Score Cohérence Taux de réussite par tentative Tests instables Tests corrects Temps de réponse (moy.) Jetons de sortie Jetons de raisonnement
Mercury 2 4.8 10.0 0.0% 0 628ms 159 0
GPT-5 Nano 4.1 10.0 0.0% 0 17.51s 202 4,608
Suivi des instructions Score Cohérence Taux de réussite par tentative Tests instables Tests corrects Temps de réponse (moy.) Jetons de sortie Jetons de raisonnement
Mercury 2 6.5 10.0 50.0% 0 551ms 82 0
GPT-5 Nano 8.5 6.8 83.3% 1 11.90s 382 4,096
Résolution d'énigmes Score Cohérence Taux de réussite par tentative Tests instables Tests corrects Temps de réponse (moy.) Jetons de sortie Jetons de raisonnement
Mercury 2 3.1 10.0 0.0% 0 533ms 234 0
GPT-5 Nano 5.3 7.2 44.4% 1 19.81s 869 13,440
Appel d'outils Score Cohérence Taux de réussite par tentative Tests instables Tests corrects Temps de réponse (moy.) Jetons de sortie Jetons de raisonnement
Mercury 2 10.0 10.0 100.0% 0 1.27s 197 0
GPT-5 Nano 10.0 10.0 100.0% 0 33.30s 558 6,976

Comparaison rapide

Changer la paire de comparaison