Navigare
Advertise here

Claude Sonnet 5.5 (medium) vs KAT-Coder-Air V2.5 (high)

Claude Sonnet 5.5 (medium) conduce la scorul mediu cu 5.7 vs 5.6. KAT-Coder-Air V2.5 (high) are costul de benchmark mai mic, $0.077 vs $0.672. Claude Sonnet 5.5 (medium) este mai rapid cu 6.07s vs 15.87s, cu rate de reușită de 37.9% vs 42.4%.

Benchmark-urile au fost generate din suitele de teste AI BENCHY la: 2026-09-29

Modele comparate

Rang
#266
Total tokenuri de ieșire
32,980
Timp de răspuns (mediu)
6.07s
Cost total
$0.672
Rang
#275
Total tokenuri de ieșire
114,654
Timp de răspuns (mediu)
15.87s
Cost total
$0.077
Model recomandat KAT-Coder-Air V2.5 (high)

Scorul rămâne aproape de cel mai bun scor de aici (5.6 vs 5.7) și costă de aproximativ 8.8x mai puțin decât Claude Sonnet 5.5 (medium).

Comparație detaliată

Metrică Claude Sonnet 5.5 Claude Sonnet 5.5 medium Lansare: 2026-09-29 KAT-Coder-Air V2.5 KAT-Coder-Air V2.5 high Lansare: 2026-07-14
Scor 5.7 5.6
Rang #266 #275
Fiabilitate 10.0 9.8
Consistență 9.7 8.1
Încercări 66/66 66/66
Teste corecte
Rată de trecere pe încercare 37.9% 42.4%
Teste instabile 1 5
Rulări totale 66 66
Cost per rezultat 8.392 1.091
Cost total $0.672 $0.077
Preț de intrare $2.000 / 1M $0.150 / 1M
Preț de ieșire $10.000 / 1M $0.600 / 1M
Total tokenuri de intrare 170,771 50,423
Tokenuri de ieșire 23,185 4,144
Tokenuri de raționament 9,795 110,510
Timp de răspuns (mediu) 6.07s 15.87s
Timp de răspuns (maxim) 26.16s 118.35s
Timp de răspuns (total) 133.62s 349.16s
Parametri ~1T în total (~100B activi) ~35B în total (~3B activi)
Disponibilitate Închis Închis

Prezentare generare modele

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#266 Claude Sonnet 5.5

medium
Cost
$0.024
Timp
17.4s
Tokenuri
2,525 tok

#275 KAT-Coder-Air V2.5

high
Reached the allocated time limit (300 seconds) without receiving showcase output.
Cost
$0.000
Timp
300.0s
Tokenuri
0 tok

Top modele după scor

Scor vs cost total

Timp de răspuns (mediu)

Scor vs Timp de răspuns (mediu)

Total tokenuri de ieșire

Scor vs Total tokenuri de ieșire

Defalcare pe categorii

Programare Scor Consistență Rată de trecere pe încercare Teste instabile Teste corecte Timp de răspuns (mediu) Tokenuri de intrare Tokenuri de ieșire Tokenuri de raționament
Claude Sonnet 5.5 3.4 9.7 0.0% 0 6.07s 10,608 6,767 0
KAT-Coder-Air V2.5 4.3 7.3 11.1% 1 39.07s 6,948 1,166 55,883

Comparație rapidă

Schimbă perechea de comparație