AI BENCHY Compare
Inception: Mercury 2 vs OpenAI: GPT-5.4
Benchmarks generados a partir de los suites de prueba de AI BENCHY en: 2026-06-03
| Métrica | Mercury 2 Mercury 2 medium | GPT-5.4 GPT-5.4 none |
|---|---|---|
| Puntuación | 6.5 | 5.6 |
| Rango | #89 | #121 |
| Fiabilidad | 10.0 | 10.0 |
| Consistencia | 8.8 | 9.1 |
| Pruebas correctas | ||
| Tasa de aciertos por intento | 51.7% | 38.3% |
| Pruebas inestables | 3 | 2 |
| Ejecuciones totales | 60 | 60 |
| Costo por resultado | 0.611 | 1.644 |
| Costo total | $0.055 | $0.116 |
| Precio de entrada | $0.250 / 1M | $2.500 / 1M |
| Precio de salida | $0.750 / 1M | $15.000 / 1M |
| Total de tokens de entrada | 32,570 | 31,593 |
| Tokens de salida | 4,022 | 2,402 |
| Tokens de razonamiento | 58,405 | 0 |
| Tiempo de respuesta (promedio) | 2.27s | 1.45s |
| Tiempo de respuesta (máximo) | 14.63s | 2.95s |
| Tiempo de respuesta (total) | 43.20s | 29.00s |
Puntuación vs costo total
Tiempo de respuesta (promedio)
Puntuación vs Tiempo de respuesta (promedio)
Total de tokens de salida
Puntuación vs Total de tokens de salida
Desglose por categoría
| Análisis y extracción de datos | Puntuación | Consistencia | Tasa de aciertos por intento | Pruebas inestables | Pruebas correctas | Tiempo de respuesta (promedio) | Tokens de entrada | Tokens de salida | Tokens de razonamiento |
|---|---|---|---|---|---|---|---|---|---|
| Mercury 2 | 7.3 | 5.9 | 83.3% | 1 | 1.11s | 6,234 | 183 | 1,656 | |
| GPT-5.4 | 10.0 | 10.0 | 100.0% | 0 | 1.04s | 7,140 | 222 | 0 |
Comparación rápida
Cambiar par de comparación
Mercury 2mediumvsGPT-5.5noneGemini 3.1 Flash LitenonevsMercury 2mediumMercury 2mediumvsQwen3.7 PlusnoneMercury 2mediumvsQwen3.5 Plus 2026-02-15noneMercury 2mediumvsRing-2.6-1TnoneMiniMax M2.5mediumvsGPT-5.4noneGemini 2.5 FlashnonevsMercury 2mediumCobuddymediumvsGPT-5.4noneGemini 3.1 Flash LiteminimalvsMercury 2mediumMiniMax M2.7mediumvsGPT-5.4noneMistral Small 4mediumvsGPT-5.4noneMercury 2mediumvsGLM 5none