Navegación
AI BENCHY
Advertise here

AI BENCHY Compare

Anthropic: Claude Sonnet 4.6 vs Kwaipilot: KAT-Coder-Pro V2.5

Resumen

KAT-Coder-Pro V2.5 (medium) lidera en puntuación media con 7.5 vs 7.3. KAT-Coder-Pro V2.5 (medium) tiene menor coste de benchmark con $0.275 vs $0.316. Claude Sonnet 4.6 es más rápido con 5.04s vs 12.95s, con tasas de acierto de 55.6% vs 65.1%.

Modelo recomendadoClaude Sonnet 4.6Su puntuación se mantiene cerca de la mejor aquí (7.3 vs 7.5) y responde aproximadamente 2.6x más rápido que KAT-Coder-Pro V2.5 (medium).

Benchmarks generados a partir de los suites de prueba de AI BENCHY en: 2026-07-14

Métrica Claude Sonnet 4.6 Claude Sonnet 4.6 none Lanzamiento: 2026-02-17 KAT-Coder-Pro V2.5 KAT-Coder-Pro V2.5 medium Lanzamiento: 2026-07-14
Puntuación 7.3 7.5
Rango #71 #60
Fiabilidad 10.0 10.0
Consistencia 9.7 7.7
Pruebas correctas
Tasa de aciertos por intento 55.6% 65.1%
Pruebas inestables 1 6
Ejecuciones totales 63 63
Costo por resultado 2.870 2.498
Costo total $0.316 $0.275
Precio de entrada $3.000 / 1M $0.740 / 1M
Precio de salida $15.000 / 1M $2.960 / 1M
Total de tokens de entrada 57,886 42,750
Tokens de salida 9,465 2,098
Tokens de razonamiento 0 80,027
Tiempo de respuesta (promedio) 5.04s 12.95s
Tiempo de respuesta (máximo) 23.84s 81.45s
Tiempo de respuesta (total) 70.60s 271.92s

Generación showcase

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#71 Claude Sonnet 4.6

none
Coste
$0.038
Tiempo
27.3s
Tokens
2,598 tok

#60 KAT-Coder-Pro V2.5

medium
Coste
$0.009
Tiempo
25.6s
Tokens
2,939 tok

Mejores modelos por puntuación

Puntuación vs costo total

Tiempo de respuesta (promedio)

Puntuación vs Tiempo de respuesta (promedio)

Total de tokens de salida

Puntuación vs Total de tokens de salida

Desglose por categoría

Programación Puntuación Consistencia Tasa de aciertos por intento Pruebas inestables Pruebas correctas Tiempo de respuesta (promedio) Tokens de entrada Tokens de salida Tokens de razonamiento
Claude Sonnet 4.6 5.5 10.0 33.3% 0 5.19s 8,522 2,127 0
KAT-Coder-Pro V2.5 7.8 10.0 66.7% 0 33.10s 7,893 416 33,658

Comparación rápida

Cambiar par de comparación