Navigation
AI BENCHY
AD
Track all your projects in one dashboard. Get 📊stats, 🔥heatmaps and 👀recordings in one self-hosted dashboard.
uxwizz.com

AI BENCHY Compare

Inception: Mercury 2 vs Qwen: Qwen3.5-27B

Benchmarks générés à partir des suites de tests AI BENCHY le: 2026-04-20

Métrique Mercury 2 Mercury 2 medium Sortie: 2026-02-24 Qwen3.5-27B Qwen3.5-27B none Sortie: 2026-02-24
Score 6.5 5.9
Rang #54 #67
Cohérence 8.6 9.2
Tests corrects
Taux de réussite par tentative 53.7% 38.9%
Tests instables 3 2
Exécutions totales 54 54
Coût par résultat 0.580 0.265
Coût total $0.047 $0.016
Prix d'entrée $0.250 / 1M $0.195 / 1M
Prix de sortie $0.750 / 1M $1.560 / 1M
Jetons de sortie 3,972 3,545
Jetons de raisonnement 48,333 0
Temps de réponse (moy.) 2.21s 1.74s
Temps de réponse (max) 14.63s 9.39s
Temps de réponse (total) 37.51s 31.32s

Meilleurs modèles par score

Score vs coût total

Temps de réponse (moy.)

Score vs Temps de réponse (moy.)

Total des jetons de sortie

Score vs Total des jetons de sortie

Répartition par catégorie

Astuces anti-IA Score Cohérence Taux de réussite par tentative Tests instables Tests corrects Temps de réponse (moy.) Jetons de sortie Jetons de raisonnement
Mercury 2 6.9 9.9 50.0% 0 1.12s 2,546 2,609
Qwen3.5-27B 4.8 10.0 25.0% 0 788ms 267 0
Programmation Score Cohérence Taux de réussite par tentative Tests instables Tests corrects Temps de réponse (moy.) Jetons de sortie Jetons de raisonnement
Mercury 2 10.0 10.0 100.0% 0 1.53s 249 2,213
Qwen3.5-27B 10.0 10.0 100.0% 0 2.51s 381 0
Combiné Score Cohérence Taux de réussite par tentative Tests instables Tests corrects Temps de réponse (moy.) Jetons de sortie Jetons de raisonnement
Mercury 2 10.0 10.0 100.0% 0 3.28s 268 4,887
Qwen3.5-27B 2.8 1.6 33.3% 1 9.39s 1,461 0
Analyse et extraction des données Score Cohérence Taux de réussite par tentative Tests instables Tests corrects Temps de réponse (moy.) Jetons de sortie Jetons de raisonnement
Mercury 2 7.3 5.9 83.3% 1 1.11s 183 1,656
Qwen3.5-27B 10.0 10.0 100.0% 0 1.43s 243 0
Spécifique au domaine Score Cohérence Taux de réussite par tentative Tests instables Tests corrects Temps de réponse (moy.) Jetons de sortie Jetons de raisonnement
Mercury 2 2.9 7.2 11.1% 1 6.48s 41 30,754
Qwen3.5-27B 3.0 10.0 0.0% 0 540ms 15 0
Intelligence générale Score Cohérence Taux de réussite par tentative Tests instables Tests corrects Temps de réponse (moy.) Jetons de sortie Jetons de raisonnement
Mercury 2 4.8 10.0 0.0% 0 821ms 137 542
Qwen3.5-27B 5.0 10.0 0.0% 0 2.51s 126 0
Suivi des instructions Score Cohérence Taux de réussite par tentative Tests instables Tests corrects Temps de réponse (moy.) Jetons de sortie Jetons de raisonnement
Mercury 2 10.0 10.0 100.0% 0 1.07s 14 958
Qwen3.5-27B 4.8 10.0 0.0% 0 815ms 69 0
Résolution d'énigmes Score Cohérence Taux de réussite par tentative Tests instables Tests corrects Temps de réponse (moy.) Jetons de sortie Jetons de raisonnement
Mercury 2 3.9 7.5 22.2% 1 934ms 354 2,758
Qwen3.5-27B 6.7 7.9 55.6% 1 1.37s 680 0
Appel d'outils Score Cohérence Taux de réussite par tentative Tests instables Tests corrects Temps de réponse (moy.) Jetons de sortie Jetons de raisonnement
Mercury 2 10.0 10.0 100.0% 0 1.89s 180 1,956
Qwen3.5-27B 10.0 10.0 100.0% 0 3.54s 303 0

Comparaison rapide

Changer la paire de comparaison

gpt-oss-120bmediumDisponible gratuitementvsQwen3.5-27BnoneMercury 2mediumvsMiMo-V2-OmninoneMercury 2mediumvsGLM 5noneMiniMax M2.5mediumDisponible gratuitementvsQwen3.5-27BnoneMistral Small 4mediumvsQwen3.5-27BnoneMercury 2mediumvsQwen3.5 Plus 2026-02-15noneMercury 2mediumvsGLM 5V TurbononeMercury 2mediumvsQwen3.5-FlashnoneGemma 4 26B A4BnoneDisponible gratuitementvsMercury 2mediumSeed-2.0-LitenonevsMercury 2mediumGemini 2.5 FlashnonevsMercury 2mediumMercury 2mediumvsQwen3.5-35B-A3Bnone