Navigation
AI BENCHY
Advertise here

AI BENCHY Compare

Inception: Mercury 2 vs OpenAI: GPT-5.6 Luna

Résumé

Comparaison benchmark Mercury 2 (medium) vs GPT-5.6 Luna (medium) : Le score moyen est pratiquement à égalité avec 7.5 vs 7.6. Mercury 2 (medium) a le coût de benchmark le plus bas avec $0.058 vs $0.258. Mercury 2 (medium) est plus rapide avec 2.24s vs 6.70s, avec des taux de réussite de 54.0% vs 63.5%.

Modèle recommandé: Mercury 2 (medium) - Il obtient le meilleur score ici (7.5) tout en coûtant environ 4.5x moins que GPT-5.6 Luna (medium).

Benchmarks générés à partir des suites de tests AI BENCHY le: 2026-07-09

Métrique Mercury 2 Mercury 2 medium Sortie: 2026-02-24 GPT-5.6 Luna GPT-5.6 Luna medium Sortie: 2026-07-09
Score 7.5 7.6
Rang #56 #54
Fiabilité 10.0 10.0
Cohérence 8.8 9.6
Tests corrects
Taux de réussite par tentative 54.0% 63.5%
Tests instables 3 1
Exécutions totales 63 63
Coût par résultat 0.578 1.978
Coût total $0.058 $0.258
Prix d'entrée $0.250 / 1M $1.000 / 1M
Prix de sortie $0.750 / 1M $6.000 / 1M
Total des jetons d'entrée 35,116 35,699
Jetons de sortie 4,048 2,148
Jetons de raisonnement 61,219 34,740
Temps de réponse (moy.) 2.24s 6.70s
Temps de réponse (max) 14.63s 29.85s
Temps de réponse (total) 44.72s 140.62s

Génération showcase

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#56 Mercury 2

medium
Coût
$0.002
Temps
2.1s
Tokens
1,702 tok

#54 GPT-5.6 Luna

medium
Coût
$0.014
Temps
14.6s
Tokens
2,362 tok

Meilleurs modèles par score

Score vs coût total

Temps de réponse (moy.)

Score vs Temps de réponse (moy.)

Total des jetons de sortie

Score vs Total des jetons de sortie

Répartition par catégorie

Astuces anti-IA Score Cohérence Taux de réussite par tentative Tests instables Tests corrects Temps de réponse (moy.) Jetons d'entrée Jetons de sortie Jetons de raisonnement
Mercury 2 6.9 9.9 50.0% 0 1.12s 554 2,546 2,609
GPT-5.6 Luna 8.3 10.0 75.0% 0 2.52s 606 160 987
Programmation Score Cohérence Taux de réussite par tentative Tests instables Tests corrects Temps de réponse (moy.) Jetons d'entrée Jetons de sortie Jetons de raisonnement
Mercury 2 8.2 7.7 77.8% 1 2.04s 7,065 296 11,328
GPT-5.6 Luna 5.4 7.2 44.4% 1 10.38s 7,302 564 9,928
Combiné Score Cohérence Taux de réussite par tentative Tests instables Tests corrects Temps de réponse (moy.) Jetons d'entrée Jetons de sortie Jetons de raisonnement
Mercury 2 10.0 10.0 100.0% 0 3.28s 12,909 268 4,887
GPT-5.6 Luna 10.0 10.0 100.0% 0 9.53s 12,500 375 1,354
Analyse et extraction des données Score Cohérence Taux de réussite par tentative Tests instables Tests corrects Temps de réponse (moy.) Jetons d'entrée Jetons de sortie Jetons de raisonnement
Mercury 2 7.3 5.9 83.3% 1 1.11s 6,234 183 1,656
GPT-5.6 Luna 10.0 10.0 100.0% 0 1.95s 7,140 234 324
Spécifique au domaine Score Cohérence Taux de réussite par tentative Tests instables Tests corrects Temps de réponse (moy.) Jetons d'entrée Jetons de sortie Jetons de raisonnement
Mercury 2 2.9 7.2 11.1% 1 6.48s 695 41 30,754
GPT-5.6 Luna 5.3 10.0 33.3% 0 17.37s 723 68 16,531
Intelligence générale Score Cohérence Taux de réussite par tentative Tests instables Tests corrects Temps de réponse (moy.) Jetons d'entrée Jetons de sortie Jetons de raisonnement
Mercury 2 4.8 10.0 0.0% 0 821ms 456 137 542
GPT-5.6 Luna 5.1 10.0 0.0% 0 4.34s 477 112 496
Suivi des instructions Score Cohérence Taux de réussite par tentative Tests instables Tests corrects Temps de réponse (moy.) Jetons d'entrée Jetons de sortie Jetons de raisonnement
Mercury 2 10.0 10.0 100.0% 0 1.07s 340 14 958
GPT-5.6 Luna 9.9 10.0 100.0% 0 2.38s 660 95 393
Résolution d'énigmes Score Cohérence Taux de réussite par tentative Tests instables Tests corrects Temps de réponse (moy.) Jetons d'entrée Jetons de sortie Jetons de raisonnement
Mercury 2 5.4 10.0 33.3% 0 949ms 601 361 2,781
GPT-5.6 Luna 7.8 10.0 66.7% 0 4.04s 642 255 2,104
Appel d'outils Score Cohérence Taux de réussite par tentative Tests instables Tests corrects Temps de réponse (moy.) Jetons d'entrée Jetons de sortie Jetons de raisonnement
Mercury 2 10.0 10.0 100.0% 0 1.89s 6,080 180 1,956
GPT-5.6 Luna 10.0 10.0 100.0% 0 6.02s 5,454 256 244
Culture générale Score Cohérence Taux de réussite par tentative Tests instables Tests corrects Temps de réponse (moy.) Jetons d'entrée Jetons de sortie Jetons de raisonnement
Mercury 2 3.0 10.0 0.0% 0 2.58s 182 22 3,748
GPT-5.6 Luna 3.0 10.0 0.0% 0 6.64s 195 29 2,379

Comparaison rapide

Changer la paire de comparaison

Mercury 2mediumvsGPT-5.3 ChatnoneDeepSeek V4 ProhighvsGPT-5.6 LunamediumDeepSeek V4 ProhighvsMercury 2mediumGPT-5.6 LunamediumvsStep 3.7 FlashlowMercury 2mediumvsGPT-5.6 LunahighMercury 2mediumvsStep 3.7 FlashlowGemini 3 Flash PreviewlowvsMercury 2mediumClaude Opus 4.8lowvsGPT-5.6 LunamediumMercury 2mediumvsGPT-5.6 TerralowGemini 3 Flash PreviewlowvsGPT-5.6 LunamediumClaude Opus 4.8lowvsMercury 2mediumClaude Sonnet 4.6nonevsMercury 2medium