Navigare
Advertise here

KAT Coder AIR V2.5 (high) vs Mistral Small 4 (medium)

Scorul mediu este practic egal la 5.2 vs 5.1. KAT Coder AIR V2.5 (high) are costul de benchmark mai mic, $0.077 vs $0.126. Mistral Small 4 (medium) este mai rapid cu 12.68s vs 15.23s, cu rate de reușită de 40.6% vs 42.0%.

Benchmark-urile au fost generate din suitele de teste AI BENCHY la: 2026-10-01

Modele comparate

Rang
#288
Total tokenuri de ieșire
114,654
Timp de răspuns (mediu)
15.23s
Cost total
$0.077
Rang
#291
Total tokenuri de ieșire
136,501
Timp de răspuns (mediu)
12.68s
Cost total
$0.126
Model recomandat KAT Coder AIR V2.5 (high)

Are cel mai bun scor aici (5.2) și costă de aproximativ 1.6x mai puțin decât Mistral Small 4 (medium).

Comparație detaliată

Metrică KAT Coder AIR V2.5 KAT Coder AIR V2.5 high Lansare: 2026-07-14 Mistral Small 4 Mistral Small 4 medium Lansare: 2026-03-16
Scor 5.2 5.1
Rang #288 #291
Fiabilitate 9.8 9.7
Consistență 8.2 7.1
Încercări 69/69 69/69
Teste corecte
Rată de trecere pe încercare 40.6% 42.0%
Teste instabile 5 8
Rulări totale 69 69
Cost per rezultat 1.091 2.502
Cost total $0.077 $0.126
Preț de intrare $0.000 / 1M $0.150 / 1M
Preț de ieșire $0.000 / 1M $0.600 / 1M
Total tokenuri de intrare 50,423 321,955
Tokenuri de ieșire 4,144 41,555
Tokenuri de raționament 110,510 94,946
Timp de răspuns (mediu) 15.23s 12.68s
Timp de răspuns (maxim) 118.35s 59.15s
Timp de răspuns (total) 350.26s 291.66s
Parametri ~35B în total (~3B activi) 119B în total (6B activi)
Disponibilitate Închis Sursă deschisă

Prezentare generare modele

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#288 KAT Coder AIR V2.5

high
Reached the allocated time limit (300 seconds) without receiving showcase output.
Cost
$0.000
Timp
300.0s
Tokenuri
0 tok

#291 Mistral Small 4

medium
Cost
$0.006
Timp
47.9s
Tokenuri
9,857 tok

Top modele după scor

Scor vs cost total

Timp de răspuns (mediu)

Scor vs Timp de răspuns (mediu)

Total tokenuri de ieșire

Scor vs Total tokenuri de ieșire

Defalcare pe categorii

Programare Scor Consistență Rată de trecere pe încercare Teste instabile Teste corecte Timp de răspuns (mediu) Tokenuri de intrare Tokenuri de ieșire Tokenuri de raționament
KAT Coder AIR V2.5 4.3 7.3 11.1% 1 39.07s 6,948 1,166 55,883
Mistral Small 4 4.4 5.1 33.3% 2 39.98s 7,636 11,635 54,715

Comparație rapidă

Schimbă perechea de comparație