Navegación
AI BENCHY
Advertise here

AI BENCHY Compare

Kwaipilot: KAT-Coder-Air V2.5 vs Nemotron 3 Ultra 550b A55b

Resumen

Nemotron 3 Ultra 550b A55b (medium) lidera en puntuación media con 8.1 vs 6.0. KAT-Coder-Air V2.5 (low) tiene menor coste de benchmark con $0.030 vs $0.158. KAT-Coder-Air V2.5 (low) es más rápido con 6.47s vs 15.05s, con tasas de acierto de 46.0% vs 69.8%.

Modelo recomendadoNemotron 3 Ultra 550b A55b (medium)Tiene la puntuación más alta en esta comparación (8.1) y el mejor equilibrio general entre coste y tiempo de respuesta en los 2 modelos.

Benchmarks generados a partir de los suites de prueba de AI BENCHY en: 2026-07-14

Métrica KAT-Coder-Air V2.5 KAT-Coder-Air V2.5 low Lanzamiento: 2026-07-14 Nemotron 3 Ultra 550b A55b Nemotron 3 Ultra 550b A55b medium Lanzamiento: 2026-06-04 Disponible gratis
Puntuación 6.0 8.1
Rango #124 #31
Fiabilidad 9.7 9.7
Consistencia 7.6 8.8
Pruebas correctas
Tasa de aciertos por intento 46.0% 69.8%
Pruebas inestables 6 3
Ejecuciones totales 63 63
Costo por resultado 0.427 0.000
Costo total $0.030 $0.158
Precio de entrada $0.150 / 1M $0.500 / 1M
Precio de salida $0.600 / 1M $2.200 / 1M
Total de tokens de entrada 42,464 46,813
Tokens de salida 4,227 18,002
Tokens de razonamiento 34,864 53,091
Tiempo de respuesta (promedio) 6.47s 15.05s
Tiempo de respuesta (máximo) 25.49s 43.93s
Tiempo de respuesta (total) 135.80s 316.09s

Generación showcase

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#124 KAT-Coder-Air V2.5

low
Coste
$0.004
Tiempo
29.9s
Tokens
6,008 tok

#31 Nemotron 3 Ultra 550b A55b

medium
SVG inválido
Coste
$0.000
Tiempo
300.0s
Tokens
0 tok

Mejores modelos por puntuación

Puntuación vs costo total

Tiempo de respuesta (promedio)

Puntuación vs Tiempo de respuesta (promedio)

Total de tokens de salida

Puntuación vs Total de tokens de salida

Desglose por categoría

Programación Puntuación Consistencia Tasa de aciertos por intento Pruebas inestables Pruebas correctas Tiempo de respuesta (promedio) Tokens de entrada Tokens de salida Tokens de razonamiento
KAT-Coder-Air V2.5 3.5 7.3 11.1% 1 11.06s 7,893 2,001 13,623
Nemotron 3 Ultra 550b A55b 8.4 7.4 88.9% 1 26.53s 7,686 2,854 17,725

Comparación rápida

Cambiar par de comparación