Navigare
AI BENCHY
Advertise here

AI BENCHY Compare

Kwaipilot: KAT-Coder-Air V2.5 vs Nemotron 3 Ultra 550b A55b

Rezumat

Nemotron 3 Ultra 550b A55b (medium) conduce la scorul mediu cu 8.1 vs 6.2. KAT-Coder-Air V2.5 (high) are costul de benchmark mai mic, $0.064 vs $0.158. KAT-Coder-Air V2.5 (high) este mai rapid cu 11.02s vs 15.05s, cu rate de reușită de 46.0% vs 69.8%.

Model recomandatNemotron 3 Ultra 550b A55b (medium)Are cel mai puternic scor din această comparație (8.1) și cel mai bun echilibru între cost și timp de răspuns dintre toate cele 2 modele.

Benchmark-urile au fost generate din suitele de teste AI BENCHY la: 2026-07-14

Metrică KAT-Coder-Air V2.5 KAT-Coder-Air V2.5 high Lansare: 2026-07-14 Nemotron 3 Ultra 550b A55b Nemotron 3 Ultra 550b A55b medium Lansare: 2026-06-04 Disponibil gratuit
Scor 6.2 8.1
Rang #110 #31
Fiabilitate 9.7 9.7
Consistență 7.6 8.8
Teste corecte
Rată de trecere pe încercare 46.0% 69.8%
Teste instabile 6 3
Rulări totale 63 63
Cost per rezultat 0.910 0.000
Cost total $0.064 $0.158
Preț de intrare $0.150 / 1M $0.500 / 1M
Preț de ieșire $0.600 / 1M $2.200 / 1M
Total tokenuri de intrare 41,748 46,813
Tokenuri de ieșire 3,894 18,002
Tokenuri de raționament 91,773 53,091
Timp de răspuns (mediu) 11.02s 15.05s
Timp de răspuns (maxim) 104.98s 43.93s
Timp de răspuns (total) 231.37s 316.09s

Prezentare generare

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#110 KAT-Coder-Air V2.5

high
SVG invalid
Cost
$0.000
Timp
300.0s
Tokenuri
0 tok

#31 Nemotron 3 Ultra 550b A55b

medium
SVG invalid
Cost
$0.000
Timp
300.0s
Tokenuri
0 tok

Top modele după scor

Scor vs cost total

Timp de răspuns (mediu)

Scor vs Timp de răspuns (mediu)

Total tokenuri de ieșire

Scor vs Total tokenuri de ieșire

Defalcare pe categorii

Programare Scor Consistență Rată de trecere pe încercare Teste instabile Teste corecte Timp de răspuns (mediu) Tokenuri de intrare Tokenuri de ieșire Tokenuri de raționament
KAT-Coder-Air V2.5 4.3 7.3 11.1% 1 39.07s 6,948 1,166 55,883
Nemotron 3 Ultra 550b A55b 8.4 7.4 88.9% 1 26.53s 7,686 2,854 17,725

Comparație rapidă

Schimbă perechea de comparație