Navegación
AI BENCHY
AD
Track all your projects in one dashboard. Get 📊stats, 🔥heatmaps and 👀recordings in one self-hosted dashboard.
uxwizz.com

AI BENCHY Compare

Kwaipilot: KAT-Coder-Pro V2.5 vs StepFun: Step 3.7 Flash

Resumen

La puntuación media está prácticamente empatada en 7.7 vs 7.7. KAT-Coder-Pro V2.5 (high) tiene menor coste de benchmark con $0.246 vs $0.341. KAT-Coder-Pro V2.5 (high) es más rápido con 12.30s vs 15.74s, con tasas de acierto de 63.5% vs 68.3%.

Modelo recomendadoKAT-Coder-Pro V2.5 (high)Tiene la puntuación más alta en esta comparación (7.7) y el mejor equilibrio general entre coste y tiempo de respuesta en los 2 modelos.

Benchmarks generados a partir de los suites de prueba de AI BENCHY en: 2026-07-14

Métrica KAT-Coder-Pro V2.5 KAT-Coder-Pro V2.5 high Lanzamiento: 2026-07-14 Step 3.7 Flash Step 3.7 Flash low Lanzamiento: 2026-05-29
Puntuación 7.7 7.7
Rango #53 #51
Fiabilidad 10.0 10.0
Consistencia 8.1 8.4
Pruebas correctas
Tasa de aciertos por intento 63.5% 68.3%
Pruebas inestables 5 4
Ejecuciones totales 63 63
Costo por resultado 2.228 2.840
Costo total $0.246 $0.341
Precio de entrada $0.740 / 1M $0.200 / 1M
Precio de salida $2.960 / 1M $1.150 / 1M
Total de tokens de entrada 42,750 40,101
Tokens de salida 2,509 289,325
Tokens de razonamiento 69,594 0
Tiempo de respuesta (promedio) 12.30s 15.74s
Tiempo de respuesta (máximo) 95.65s 124.75s
Tiempo de respuesta (total) 258.34s 330.63s

Generación showcase

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#53 KAT-Coder-Pro V2.5

high
Coste
$0.009
Tiempo
26.4s
Tokens
3,117 tok

#51 Step 3.7 Flash

low
SVG inválido
Coste
$0.004
Tiempo
25.3s
Tokens
3,072 tok

Mejores modelos por puntuación

Puntuación vs costo total

Tiempo de respuesta (promedio)

Puntuación vs Tiempo de respuesta (promedio)

Total de tokens de salida

Puntuación vs Total de tokens de salida

Desglose por categoría

Programación Puntuación Consistencia Tasa de aciertos por intento Pruebas inestables Pruebas correctas Tiempo de respuesta (promedio) Tokens de entrada Tokens de salida Tokens de razonamiento
KAT-Coder-Pro V2.5 6.4 7.9 44.4% 1 22.00s 7,893 422 20,461
Step 3.7 Flash 8.2 7.2 88.9% 1 9.46s 7,437 18,685 0

Comparación rápida

Cambiar par de comparación