AI BENCHY Compare

Kwaipilot: KAT-Coder-Pro V2.5 vs Qwen: Qwen3.6 27B

Resumen

KAT-Coder-Pro V2.5 lidera en puntuación media con 6.8 vs 6.6. KAT-Coder-Pro V2.5 tiene menor coste de benchmark con $0.220 vs $0.336. KAT-Coder-Pro V2.5 es más rápido con 10.81s vs 59.71s, con tasas de acierto de 71.4% vs 60.3%.

Modelo recomendadoKAT-Coder-Pro V2.5Tiene la mejor puntuación aquí (6.8) y cuesta aproximadamente 1.5x menos que Qwen3.6 27B (medium).

Benchmarks generados a partir de los suites de prueba de AI BENCHY en: 2026-07-14

Métrica	KAT-Coder-Pro V2.5 KAT-Coder-Pro V2.5 none Lanzamiento: 2026-07-14	Qwen3.6 27B Qwen3.6 27B medium Lanzamiento: 2026-04-20

Métrica	KAT-Coder-Pro V2.5 KAT-Coder-Pro V2.5 none Lanzamiento: 2026-07-14	Qwen3.6 27B Qwen3.6 27B medium Lanzamiento: 2026-04-20
Puntuación	6.8	6.6
Rango	#89	#99
Fiabilidad	10.0	10.0
Consistencia	7.3	8.2
Pruebas correctas
Tasa de aciertos por intento	71.4%	60.3%
Pruebas inestables	7	5
Ejecuciones totales	63	63
Costo por resultado	1.992	3.361
Costo total	$0.220	$0.336
Precio de entrada	$0.740 / 1M	$0.290 / 1M
Precio de salida	$2.960 / 1M	$2.400 / 1M
Total de tokens de entrada	42,749	39,376
Tokens de salida	63,338	16,189
Tokens de razonamiento	0	122,521
Tiempo de respuesta (promedio)	10.81s	59.71s
Tiempo de respuesta (máximo)	53.57s	168.22s
Tiempo de respuesta (total)	227.02s	1254.01s

Generación showcase

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#89 KAT-Coder-Pro V2.5

none

Coste: $0.010
Tiempo: 29.0s
Tokens: 3,439 tok

#99 Qwen3.6 27B

medium

Coste: $0.009
Tiempo: 39.6s
Tokens: 3,090 tok

Mejores modelos por puntuación

Puntuación vs costo total

Tiempo de respuesta (promedio)

Puntuación vs Tiempo de respuesta (promedio)

Total de tokens de salida

Puntuación vs Total de tokens de salida

Desglose por categoría

Categoría:

Trucos anti-IA	Puntuación	Consistencia	Tasa de aciertos por intento	Pruebas inestables	Pruebas correctas	Tiempo de respuesta (promedio)	Tokens de entrada	Tokens de salida	Tokens de razonamiento
KAT-Coder-Pro V2.5	8.7	7.9	91.7%	1		4.58s	672	3,998	0
Qwen3.6 27B	8.3	10.0	75.0%	0		12.62s	453	582	4,311

Programación	Puntuación	Consistencia	Tasa de aciertos por intento	Pruebas inestables	Pruebas correctas	Tiempo de respuesta (promedio)	Tokens de entrada	Tokens de salida	Tokens de razonamiento
KAT-Coder-Pro V2.5	6.1	4.7	66.7%	2		22.52s	7,893	22,440	0
Qwen3.6 27B	7.7	10.0	66.7%	0		142.99s	5,051	7,968	43,367

Combinado	Puntuación	Consistencia	Tasa de aciertos por intento	Pruebas inestables	Pruebas correctas	Tiempo de respuesta (promedio)	Tokens de entrada	Tokens de salida	Tokens de razonamiento
KAT-Coder-Pro V2.5	4.7	1.6	66.7%	1		30.76s	15,131	5,366	0
Qwen3.6 27B	7.0	3.7	66.7%	1		83.07s	15,104	2,088	14,689

Análisis y extracción de datos	Puntuación	Consistencia	Tasa de aciertos por intento	Pruebas inestables	Pruebas correctas	Tiempo de respuesta (promedio)	Tokens de entrada	Tokens de salida	Tokens de razonamiento
KAT-Coder-Pro V2.5	10.0	10.0	100.0%	0		5.07s	7,776	2,361	0
Qwen3.6 27B	3.5	1.4	50.0%	2		37.30s	7,778	568	9,404

Específico del dominio	Puntuación	Consistencia	Tasa de aciertos por intento	Pruebas inestables	Pruebas correctas	Tiempo de respuesta (promedio)	Tokens de entrada	Tokens de salida	Tokens de razonamiento
KAT-Coder-Pro V2.5	3.6	7.2	22.2%	1		21.64s	771	20,972	0
Qwen3.6 27B	2.9	7.2	11.1%	1		73.38s	662	3,510	20,352

Inteligencia general	Puntuación	Consistencia	Tasa de aciertos por intento	Pruebas inestables	Pruebas correctas	Tiempo de respuesta (promedio)	Tokens de entrada	Tokens de salida	Tokens de razonamiento
KAT-Coder-Pro V2.5	4.8	3.2	33.3%	1		5.16s	516	1,067	0
Qwen3.6 27B	6.5	3.4	66.7%	1		39.53s	516	81	3,045

Seguimiento de instrucciones	Puntuación	Consistencia	Tasa de aciertos por intento	Pruebas inestables	Pruebas correctas	Tiempo de respuesta (promedio)	Tokens de entrada	Tokens de salida	Tokens de razonamiento
KAT-Coder-Pro V2.5	9.8	10.0	100.0%	0		2.61s	699	1,084	0
Qwen3.6 27B	10.0	10.0	100.0%	0		37.96s	699	346	6,548

Resolución de acertijos	Puntuación	Consistencia	Tasa de aciertos por intento	Pruebas inestables	Pruebas correctas	Tiempo de respuesta (promedio)	Tokens de entrada	Tokens de salida	Tokens de razonamiento
KAT-Coder-Pro V2.5	8.2	7.2	88.9%	1		3.03s	696	1,929	0
Qwen3.6 27B	7.7	10.0	66.7%	0		61.14s	696	255	12,044

Llamada de herramientas	Puntuación	Consistencia	Tasa de aciertos por intento	Pruebas inestables	Pruebas correctas	Tiempo de respuesta (promedio)	Tokens de entrada	Tokens de salida	Tokens de razonamiento
KAT-Coder-Pro V2.5	10.0	10.0	100.0%	0		5.93s	8,391	1,103	0
Qwen3.6 27B	10.0	10.0	100.0%	0		16.88s	8,213	390	2,954

Cultura general	Puntuación	Consistencia	Tasa de aciertos por intento	Pruebas inestables	Pruebas correctas	Tiempo de respuesta (promedio)	Tokens de entrada	Tokens de salida	Tokens de razonamiento
KAT-Coder-Pro V2.5	3.0	10.0	0.0%	0		9.91s	204	3,018	0
Qwen3.6 27B	3.0	10.0	0.0%	0		80.99s	204	401	5,807

Comparación rápida

Cambiar par de comparación