Navegación
AI BENCHY
Advertise here

AI BENCHY Compare

Kwaipilot: KAT-Coder-Pro V2.5 vs OpenAI: GPT-5.4 Mini

Resumen

La puntuación media está prácticamente empatada en 8.0 vs 8.0. KAT-Coder-Pro V2.5 (low) tiene menor coste de benchmark con $0.220 vs $0.526. KAT-Coder-Pro V2.5 (low) es más rápido con 10.44s vs 22.34s, con tasas de acierto de 71.4% vs 73.0%.

Modelo recomendadoKAT-Coder-Pro V2.5 (low)Tiene la mejor puntuación aquí (8.0) y cuesta aproximadamente 2.4x menos que GPT-5.4 Mini (medium).

Benchmarks generados a partir de los suites de prueba de AI BENCHY en: 2026-07-14

Métrica KAT-Coder-Pro V2.5 KAT-Coder-Pro V2.5 low Lanzamiento: 2026-07-14 GPT-5.4 Mini GPT-5.4 Mini medium Lanzamiento: 2026-03-17
Puntuación 8.0 8.0
Rango #35 #33
Fiabilidad 9.9 10.0
Consistencia 7.3 8.0
Pruebas correctas
Tasa de aciertos por intento 71.4% 73.0%
Pruebas inestables 7 5
Ejecuciones totales 63 63
Costo por resultado 1.991 4.381
Costo total $0.220 $0.526
Precio de entrada $0.740 / 1M $0.750 / 1M
Precio de salida $2.960 / 1M $4.500 / 1M
Total de tokens de entrada 42,750 34,116
Tokens de salida 2,167 2,181
Tokens de razonamiento 61,133 108,937
Tiempo de respuesta (promedio) 10.44s 22.34s
Tiempo de respuesta (máximo) 51.34s 138.75s
Tiempo de respuesta (total) 219.17s 469.20s

Generación showcase

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#35 KAT-Coder-Pro V2.5

low
Coste
$0.016
Tiempo
47.6s
Tokens
5,182 tok

#33 GPT-5.4 Mini

medium
Coste
$0.056
Tiempo
95.5s
Tokens
12,464 tok

Mejores modelos por puntuación

Puntuación vs costo total

Tiempo de respuesta (promedio)

Puntuación vs Tiempo de respuesta (promedio)

Total de tokens de salida

Puntuación vs Total de tokens de salida

Desglose por categoría

Programación Puntuación Consistencia Tasa de aciertos por intento Pruebas inestables Pruebas correctas Tiempo de respuesta (promedio) Tokens de entrada Tokens de salida Tokens de razonamiento
KAT-Coder-Pro V2.5 7.8 10.0 66.7% 0 24.87s 7,893 402 24,945
GPT-5.4 Mini 8.4 7.4 88.9% 1 57.87s 7,305 467 40,902

Comparación rápida

Cambiar par de comparación