Navigare
AI BENCHY
Advertise here

KAT-Coder-Air V2.5 — high vs medium

high conduce la scorul mediu cu 5.6 vs 5.6. medium are costul de benchmark mai mic, $0.048 vs $0.077. medium este mai rapid cu 8.65s vs 15.87s, cu rate de reușită de 42.4% vs 45.5%.

Benchmark-urile au fost generate din suitele de teste AI BENCHY la: 2026-08-20

Rang
#206
Total tokenuri de ieșire
114,654
Timp de răspuns (mediu)
15.87s
Cost total
$0.077
Rang
#212
Total tokenuri de ieșire
66,576
Timp de răspuns (mediu)
8.65s
Cost total
$0.048
Model recomandat medium

Scorul rămâne aproape de cel mai bun scor de aici (5.6 vs 5.6) și costă de aproximativ 1.6x mai puțin decât KAT-Coder-Air V2.5 (high).

Comparație detaliată

Metrică KAT-Coder-Air V2.5 KAT-Coder-Air V2.5 high Lansare: 2026-07-14 KAT-Coder-Air V2.5 KAT-Coder-Air V2.5 medium Lansare: 2026-07-14
Scor 5.6 5.6
Rang #206 #212
Fiabilitate 9.8 9.6
Consistență 8.1 8.9
Încercări 66/66 66/66
Teste corecte
Rată de trecere pe încercare 42.4% 45.5%
Teste instabile 5 3
Rulări totale 66 66
Cost per rezultat 1.091 0.596
Cost total $0.077 $0.048
Preț de intrare $0.150 / 1M $0.150 / 1M
Preț de ieșire $0.600 / 1M $0.600 / 1M
Total tokenuri de intrare 50,423 51,369
Tokenuri de ieșire 4,144 8,008
Tokenuri de raționament 110,510 58,568
Timp de răspuns (mediu) 15.87s 8.65s
Timp de răspuns (maxim) 118.35s 48.19s
Timp de răspuns (total) 349.16s 190.35s
Parametri ~35B în total (~3B activi) ~35B în total (~3B activi)
Disponibilitate Închis Închis

Prezentare generare modele

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#206 KAT-Coder-Air V2.5

high
SVG invalid
Cost
$0.000
Timp
300.0s
Tokenuri
0 tok

#212 KAT-Coder-Air V2.5

medium
Cost
$0.003
Timp
23.7s
Tokenuri
4,924 tok

Top modele după scor

Scor vs cost total

Timp de răspuns (mediu)

Scor vs Timp de răspuns (mediu)

Total tokenuri de ieșire

Scor vs Total tokenuri de ieșire

Defalcare pe categorii

Programare Scor Consistență Rată de trecere pe încercare Teste instabile Teste corecte Timp de răspuns (mediu) Tokenuri de intrare Tokenuri de ieșire Tokenuri de raționament
KAT-Coder-Air V2.5 4.3 7.3 11.1% 1 39.07s 6,948 1,166 55,883
KAT-Coder-Air V2.5 3.6 7.0 22.2% 1 23.37s 7,893 5,199 29,973

Comparație rapidă

Schimbă perechea de comparație