Navigare
AI BENCHY
Advertise here

KAT-Coder-Air V2.5 (high) vs Nemotron 3 Super (medium)

Nemotron 3 Super (medium) conduce la scorul mediu cu 5.7 vs 5.6. Nemotron 3 Super (medium) are costul de benchmark mai mic, $0.050 vs $0.077. KAT-Coder-Air V2.5 (high) este mai rapid cu 15.87s vs 52.31s, cu rate de reușită de 42.4% vs 40.9%.

Benchmark-urile au fost generate din suitele de teste AI BENCHY la: 2026-09-02

Rang
#220
Total tokenuri de ieșire
114,654
Timp de răspuns (mediu)
15.87s
Cost total
$0.077
Rang
#212
Total tokenuri de ieșire
115,574
Timp de răspuns (mediu)
52.31s
Cost total
$0.050
Model recomandat KAT-Coder-Air V2.5 (high)

Scorul rămâne aproape de cel mai bun scor de aici (5.6 vs 5.7) și răspunde de aproximativ 3.3x mai rapid decât Nemotron 3 Super (medium).

Comparație detaliată

Metrică KAT-Coder-Air V2.5 KAT-Coder-Air V2.5 high Lansare: 2026-07-14 Nemotron 3 Super Nemotron 3 Super medium Lansare: 2026-03-11 Disponibil gratuit
Scor 5.6 5.7
Rang #220 #212
Fiabilitate 9.8 9.1
Consistență 8.1 8.9
Încercări 66/66 66/66
Teste corecte
Rată de trecere pe încercare 42.4% 40.9%
Teste instabile 5 3
Rulări totale 66 66
Cost per rezultat 1.091 0.004
Cost total $0.077 $0.050
Preț de intrare $0.150 / 1M $0.085 / 1M
Preț de ieșire $0.600 / 1M $0.400 / 1M
Total tokenuri de intrare 50,423 81,438
Tokenuri de ieșire 4,144 17,674
Tokenuri de raționament 110,510 97,900
Timp de răspuns (mediu) 15.87s 52.31s
Timp de răspuns (maxim) 118.35s 431.98s
Timp de răspuns (total) 349.16s 1046.21s
Parametri ~35B în total (~3B activi) 120B în total (12B activi)
Disponibilitate Închis Ponderi disponibile

Prezentare generare modele

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#220 KAT-Coder-Air V2.5

high
SVG invalid
Cost
$0.000
Timp
300.0s
Tokenuri
0 tok

#212 Nemotron 3 Super

medium
Cost
$0.000
Timp
272.6s
Tokenuri
5,296 tok

Top modele după scor

Scor vs cost total

Timp de răspuns (mediu)

Scor vs Timp de răspuns (mediu)

Total tokenuri de ieșire

Scor vs Total tokenuri de ieșire

Defalcare pe categorii

Programare Scor Consistență Rată de trecere pe încercare Teste instabile Teste corecte Timp de răspuns (mediu) Tokenuri de intrare Tokenuri de ieșire Tokenuri de raționament
KAT-Coder-Air V2.5 4.3 7.3 11.1% 1 39.07s 6,948 1,166 55,883
Nemotron 3 Super 3.1 10.0 0.0% 0 147.32s 2,275 797 4,424

Comparație rapidă

Schimbă perechea de comparație