Navigation
AI BENCHY
Advertise here

AI BENCHY Compare

DeepSeek: DeepSeek V4 Pro vs Inception: Mercury 2

Résumé

Comparaison benchmark DeepSeek V4 Pro vs Mercury 2 : DeepSeek V4 Pro mène au score moyen avec 7.6 vs 7.5. Mercury 2 a le coût de benchmark le plus bas avec $0.058 vs $0.157. Mercury 2 est plus rapide avec 2.24s vs 77.20s, avec des taux de réussite de 66.7% vs 54.0%.

Modèle recommandé: Mercury 2 - Son score reste proche du meilleur score ici (7.5 vs 7.6) tout en coûtant environ 2.7x moins que DeepSeek V4 Pro.

Benchmarks générés à partir des suites de tests AI BENCHY le: 2026-06-17

Métrique DeepSeek V4 Pro DeepSeek V4 Pro high Sortie: 2026-04-24 Mercury 2 Mercury 2 medium Sortie: 2026-02-24
Score 7.6 7.5
Rang #41 #44
Fiabilité 9.3 10.0
Cohérence 7.0 8.8
Tests corrects
Taux de réussite par tentative 66.7% 54.0%
Tests instables 8 3
Exécutions totales 63 63
Coût par résultat 1.742 0.578
Coût total $0.157 $0.058
Prix d'entrée $0.435 / 1M $0.250 / 1M
Prix de sortie $0.870 / 1M $0.750 / 1M
Total des jetons d'entrée 38,726 35,116
Jetons de sortie 6,334 4,048
Jetons de raisonnement 159,151 61,219
Temps de réponse (moy.) 77.20s 2.24s
Temps de réponse (max) 416.76s 14.63s
Temps de réponse (total) 1621.17s 44.72s

Generation showcase

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#41 DeepSeek V4 Pro

high
Cost
$0.023
Time
257.6s
Tokens
14,870 tok

#44 Mercury 2

medium
Cost
$0.002
Time
2.1s
Tokens
1,702 tok

Meilleurs modèles par score

Score vs coût total

Temps de réponse (moy.)

Score vs Temps de réponse (moy.)

Total des jetons de sortie

Score vs Total des jetons de sortie

Répartition par catégorie

Astuces anti-IA Score Cohérence Taux de réussite par tentative Tests instables Tests corrects Temps de réponse (moy.) Jetons d'entrée Jetons de sortie Jetons de raisonnement
DeepSeek V4 Pro 5.7 5.9 58.3% 2 25.70s 536 149 3,214
Mercury 2 6.9 9.9 50.0% 0 1.12s 554 2,546 2,609
Programmation Score Cohérence Taux de réussite par tentative Tests instables Tests corrects Temps de réponse (moy.) Jetons d'entrée Jetons de sortie Jetons de raisonnement
DeepSeek V4 Pro 6.1 4.6 66.7% 2 243.00s 5,090 383 84,580
Mercury 2 8.2 7.7 77.8% 1 2.04s 7,065 296 11,328
Combiné Score Cohérence Taux de réussite par tentative Tests instables Tests corrects Temps de réponse (moy.) Jetons d'entrée Jetons de sortie Jetons de raisonnement
DeepSeek V4 Pro 10.0 10.0 100.0% 0 38.17s 14,060 454 5,836
Mercury 2 10.0 10.0 100.0% 0 3.28s 12,909 268 4,887
Analyse et extraction des données Score Cohérence Taux de réussite par tentative Tests instables Tests corrects Temps de réponse (moy.) Jetons d'entrée Jetons de sortie Jetons de raisonnement
DeepSeek V4 Pro 10.0 10.0 100.0% 0 25.03s 7,690 274 2,166
Mercury 2 7.3 5.9 83.3% 1 1.11s 6,234 183 1,656
Spécifique au domaine Score Cohérence Taux de réussite par tentative Tests instables Tests corrects Temps de réponse (moy.) Jetons d'entrée Jetons de sortie Jetons de raisonnement
DeepSeek V4 Pro 3.6 7.2 22.2% 1 151.46s 569 4,404 50,391
Mercury 2 2.9 7.2 11.1% 1 6.48s 695 41 30,754
Intelligence générale Score Cohérence Taux de réussite par tentative Tests instables Tests corrects Temps de réponse (moy.) Jetons d'entrée Jetons de sortie Jetons de raisonnement
DeepSeek V4 Pro 10.0 10.0 100.0% 0 8.83s 471 115 1,013
Mercury 2 4.8 10.0 0.0% 0 821ms 456 137 542
Suivi des instructions Score Cohérence Taux de réussite par tentative Tests instables Tests corrects Temps de réponse (moy.) Jetons d'entrée Jetons de sortie Jetons de raisonnement
DeepSeek V4 Pro 7.8 6.6 83.3% 1 8.73s 627 66 2,726
Mercury 2 10.0 10.0 100.0% 0 1.07s 340 14 958
Résolution d'énigmes Score Cohérence Taux de réussite par tentative Tests instables Tests corrects Temps de réponse (moy.) Jetons d'entrée Jetons de sortie Jetons de raisonnement
DeepSeek V4 Pro 6.9 4.9 77.8% 2 56.85s 591 178 2,563
Mercury 2 5.4 10.0 33.3% 0 949ms 601 361 2,781
Appel d'outils Score Cohérence Taux de réussite par tentative Tests instables Tests corrects Temps de réponse (moy.) Jetons d'entrée Jetons de sortie Jetons de raisonnement
DeepSeek V4 Pro 9.8 10.0 100.0% 0 15.92s 8,909 295 701
Mercury 2 10.0 10.0 100.0% 0 1.89s 6,080 180 1,956
Culture générale Score Cohérence Taux de réussite par tentative Tests instables Tests corrects Temps de réponse (moy.) Jetons d'entrée Jetons de sortie Jetons de raisonnement
DeepSeek V4 Pro 3.0 10.0 0.0% 0 34.01s 183 16 5,961
Mercury 2 3.0 10.0 0.0% 0 2.58s 182 22 3,748

Comparaison rapide

Changer la paire de comparaison