Navigare
Advertise here

KAT-Coder-Pro V2.5 (default) vs Step 5 Preview (medium)

Scorul mediu este practic egal la 6.1 vs 6.1. KAT-Coder-Pro V2.5 (default) are costul de benchmark mai mic, $0.742 vs $4.136. KAT-Coder-Pro V2.5 (default) este mai rapid cu 24.96s vs 136.10s, cu rate de reușită de 68.1% vs 53.6%.

Benchmark-urile au fost generate din suitele de teste AI BENCHY la: 2026-10-09

Modele comparate

Rang
#252
Total tokenuri de ieșire
139,572
Timp de răspuns (mediu)
24.96s
Cost total
$0.742
Rang
#250
Total tokenuri de ieșire
1,434,621
Timp de răspuns (mediu)
136.10s
Cost total
$4.136
Model recomandat KAT-Coder-Pro V2.5 (default)

Are cel mai bun scor aici (6.1) și costă de aproximativ 5.6x mai puțin decât Step 5 Preview (medium).

Comparație detaliată

Metrică KAT-Coder-Pro V2.5 KAT-Coder-Pro V2.5 default Lansare: 2026-07-14 Step 5 Preview Step 5 Preview medium Lansare: 2026-10-09
Scor 6.1 6.1
Rang #252 #250
Fiabilitate 10.0 9.6
Consistență 7.1 8.2
Încercări 69/69 69/69
Teste corecte
Rată de trecere pe încercare 68.1% 53.6%
Teste instabile 8 5
Rulări totale 69 69
Cost per rezultat 4.419 41.354
Cost total $0.742 $4.136
Preț de intrare $0.740 / 1M $1.000 / 1M
Preț de ieșire $2.960 / 1M $2.700 / 1M
Preț citire cache $0.150 / 1M $0.050 / 1M
Preț scriere cache N/D N/D
Total tokenuri de intrare 98,508 261,842
Tokenuri de ieșire 8,088 1,434,621
Tokenuri de raționament 131,484 0
Timp de răspuns (mediu) 24.96s 136.10s
Timp de răspuns (maxim) 335.41s 438.09s
Timp de răspuns (total) 574.12s 3130.27s
Parametri ~700B în total (~72B activi) 600B în total (27B activi)
Disponibilitate Închis Închis

Prețurile de cache se aplică tokenurilor de intrare. Citirea reutilizează prompturi salvate; scrierea le stochează și poate costa în plus. Tokenurile de ieșire folosesc prețul de ieșire.

Prezentare generare modele

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#252 KAT-Coder-Pro V2.5

default
Cost
$0.010
Timp
29.0s
Tokenuri
3,439 tok

#250 Step 5 Preview

medium
Cost
$0.042
Timp
90.3s
Tokenuri
15,574 tok

Top modele după scor

Scor vs cost total

Timp de răspuns (mediu)

Scor vs Timp de răspuns (mediu)

Total tokenuri de ieșire

Scor vs Total tokenuri de ieșire

Defalcare pe categorii

Programare Scor Consistență Rată de trecere pe încercare Teste instabile Teste corecte Timp de răspuns (mediu) Tokenuri de intrare Tokenuri de ieșire Tokenuri de raționament
KAT-Coder-Pro V2.5 6.1 4.7 66.7% 2 22.52s 7,893 451 21,989
Step 5 Preview 2.8 7.2 11.1% 1 363.90s 7,428 546,725 0

Schimbă perechea de comparație