Navigation
AI BENCHY
Your ad here

AI BENCHY Compare

Inception: Mercury 2 vs StepFun: Step 3.5 Flash

Benchmarks générés à partir des suites de tests AI BENCHY le: 2026-04-11

Métrique Mercury 2 Mercury 2 none Sortie: 2026-02-24 Step 3.5 Flash Step 3.5 Flash none Sortie: 2026-02-01
Score 4.8 3.0
Rang #85 #93
Cohérence 9.0 10.0
Tests corrects
Taux de réussite par tentative 27.8% 0.0%
Tests instables 2 0
Exécutions totales 54 3
Coût par résultat 0.165 0.000
Coût total $0.007 $0.000
Prix d'entrée $0.250 / 1M $0.100 / 1M
Prix de sortie $0.750 / 1M $0.300 / 1M
Jetons de sortie 1,625 0
Jetons de raisonnement 0 0
Temps de réponse (moy.) 613ms 0ms
Temps de réponse (max) 1.27s 0ms
Temps de réponse (total) 11.04s 0ms

Meilleurs modèles par score

Score vs coût total

Temps de réponse (moy.)

Score vs Temps de réponse (moy.)

Total des jetons de sortie

Score vs Total des jetons de sortie

Répartition par catégorie

Astuces anti-IA Score Cohérence Taux de réussite par tentative Tests instables Tests corrects Temps de réponse (moy.) Jetons de sortie Jetons de raisonnement
Mercury 2 3.0 10.0 0.0% 0 483ms 286 0
Step 3.5 Flash - - - - - - - -
Programmation Score Cohérence Taux de réussite par tentative Tests instables Tests corrects Temps de réponse (moy.) Jetons de sortie Jetons de raisonnement
Mercury 2 3.6 8.9 0.0% 0 969ms 310 0
Step 3.5 Flash 3.0 10.0 0.0% 0 0ms 0 0
Combiné Score Cohérence Taux de réussite par tentative Tests instables Tests corrects Temps de réponse (moy.) Jetons de sortie Jetons de raisonnement
Mercury 2 3.0 10.0 0.0% 0 606ms 131 0
Step 3.5 Flash - - - - - - - -
Analyse et extraction des données Score Cohérence Taux de réussite par tentative Tests instables Tests corrects Temps de réponse (moy.) Jetons de sortie Jetons de raisonnement
Mercury 2 7.3 5.9 83.3% 1 667ms 180 0
Step 3.5 Flash - - - - - - - -
Spécifique au domaine Score Cohérence Taux de réussite par tentative Tests instables Tests corrects Temps de réponse (moy.) Jetons de sortie Jetons de raisonnement
Mercury 2 5.3 7.2 44.4% 1 534ms 46 0
Step 3.5 Flash - - - - - - - -
Intelligence générale Score Cohérence Taux de réussite par tentative Tests instables Tests corrects Temps de réponse (moy.) Jetons de sortie Jetons de raisonnement
Mercury 2 4.8 10.0 0.0% 0 628ms 159 0
Step 3.5 Flash - - - - - - - -
Suivi des instructions Score Cohérence Taux de réussite par tentative Tests instables Tests corrects Temps de réponse (moy.) Jetons de sortie Jetons de raisonnement
Mercury 2 6.5 10.0 50.0% 0 551ms 82 0
Step 3.5 Flash - - - - - - - -
Résolution d'énigmes Score Cohérence Taux de réussite par tentative Tests instables Tests corrects Temps de réponse (moy.) Jetons de sortie Jetons de raisonnement
Mercury 2 3.1 10.0 0.0% 0 533ms 234 0
Step 3.5 Flash - - - - - - - -
Appel d'outils Score Cohérence Taux de réussite par tentative Tests instables Tests corrects Temps de réponse (moy.) Jetons de sortie Jetons de raisonnement
Mercury 2 10.0 10.0 100.0% 0 1.27s 197 0
Step 3.5 Flash - - - - - - - -

Comparaison rapide

Changer la paire de comparaison

Mercury 2nonevsQwen3 Coder NextmediumMercury 2nonevsGLM 4.7 FlashmediumMercury 2nonevsQwen3.5-9BmediumMercury 2nonevsMiniMax M2.7mediumMercury 2nonevsMistral Small 4mediumMercury 2nonevsMiniMax M2.5mediumDisponible gratuitementMercury 2nonevsgpt-oss-120bmediumDisponible gratuitementQwen3.5-9BmediumvsStep 3.5 FlashnoneMercury 2nonevsGPT-5 NanomediumStep 3.5 FlashnonevsGLM 4.7 FlashmediumQwen3 Coder NextmediumvsStep 3.5 FlashnoneMercury 2nonevsGrok 4.1 Fastmedium