Navegación
AI BENCHY
AD
Track all your projects in one dashboard. Get 📊stats, 🔥heatmaps and 👀recordings in one self-hosted dashboard.
uxwizz.com

AI BENCHY Compare

Kwaipilot: KAT-Coder-Pro V2.5 vs OpenAI: GPT-5.4 Nano

Resumen

La puntuación media está prácticamente empatada en 7.5 vs 7.5. GPT-5.4 Nano (medium) tiene menor coste de benchmark con $0.107 vs $0.275. GPT-5.4 Nano (medium) es más rápido con 11.95s vs 12.95s, con tasas de acierto de 65.1% vs 63.5%.

Modelo recomendadoGPT-5.4 Nano (medium)Tiene la mejor puntuación aquí (7.5) y cuesta aproximadamente 2.6x menos que KAT-Coder-Pro V2.5 (medium).

Benchmarks generados a partir de los suites de prueba de AI BENCHY en: 2026-07-14

Métrica KAT-Coder-Pro V2.5 KAT-Coder-Pro V2.5 medium Lanzamiento: 2026-07-14 GPT-5.4 Nano GPT-5.4 Nano medium Lanzamiento: 2026-03-17
Puntuación 7.5 7.5
Rango #60 #62
Fiabilidad 10.0 10.0
Consistencia 7.7 8.4
Pruebas correctas
Tasa de aciertos por intento 65.1% 63.5%
Pruebas inestables 6 4
Ejecuciones totales 63 63
Costo por resultado 2.498 0.969
Costo total $0.275 $0.107
Precio de entrada $0.740 / 1M $0.200 / 1M
Precio de salida $2.960 / 1M $1.250 / 1M
Total de tokens de entrada 42,750 35,434
Tokens de salida 2,098 3,014
Tokens de razonamiento 80,027 76,520
Tiempo de respuesta (promedio) 12.95s 11.95s
Tiempo de respuesta (máximo) 81.45s 94.06s
Tiempo de respuesta (total) 271.92s 250.98s

Generación showcase

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#60 KAT-Coder-Pro V2.5

medium
Coste
$0.009
Tiempo
25.6s
Tokens
2,939 tok

#62 GPT-5.4 Nano

medium
Coste
$0.007
Tiempo
24.6s
Tokens
4,943 tok

Mejores modelos por puntuación

Puntuación vs costo total

Tiempo de respuesta (promedio)

Puntuación vs Tiempo de respuesta (promedio)

Total de tokens de salida

Puntuación vs Total de tokens de salida

Desglose por categoría

Programación Puntuación Consistencia Tasa de aciertos por intento Pruebas inestables Pruebas correctas Tiempo de respuesta (promedio) Tokens de entrada Tokens de salida Tokens de razonamiento
KAT-Coder-Pro V2.5 7.8 10.0 66.7% 0 33.10s 7,893 416 33,658
GPT-5.4 Nano 6.1 4.7 66.7% 2 19.12s 7,305 516 20,778

Comparación rápida

Cambiar par de comparación