Navigatie
AI BENCHY
Advertise here

KAT-Coder-Pro V2.5 (high) vs Step 3.7 Flash (low)

KAT-Coder-Pro V2.5 (high) leidt in gemiddelde score met 7.2 vs 7.1. Step 3.7 Flash (low) heeft lagere benchmarkkosten met $0.390 vs $0.506. Step 3.7 Flash (low) is sneller met 17.87s vs 22.11s, met slagingspercentages van 63.6% vs 63.6%.

Benchmarks gegenereerd uit AI BENCHY-testsuites op: 2026-08-26

Rang
#108
Totaal aantal uitvoer-tokens
144,359
Responstijd (gem.)
22.11s
Totale kosten
$0.506
Rang
#115
Totaal aantal uitvoer-tokens
320,393
Responstijd (gem.)
17.87s
Totale kosten
$0.390
Aanbevolen model Step 3.7 Flash (low)

Het biedt de beste totale afweging: concurrerende score (7.1), lagere kosten dan KAT-Coder-Pro V2.5 (high) en evenwichtige responstijd.

Gedetailleerde vergelijking

Metriek KAT-Coder-Pro V2.5 KAT-Coder-Pro V2.5 high Releasedatum: 2026-07-14 Step 3.7 Flash Step 3.7 Flash low Releasedatum: 2026-05-29
Score 7.2 7.1
Rang #108 #115
Betrouwbaarheid 10.0 10.0
Consistentie 7.8 8.1
Pogingen 66/66 66/66
Correcte tests
Slaagpercentage per poging 63.6% 63.6%
Instabiele tests 6 5
Totaal runs 66 66
Kosten per resultaat 4.599 3.539
Totale kosten $0.506 $0.390
Invoerprijs $0.740 / 1M $0.200 / 1M
Uitvoerprijs $2.960 / 1M $1.150 / 1M
Totaal aantal invoer-tokens 106,085 103,842
Uitvoer-tokens 9,071 320,393
Redeneer-tokens 135,288 0
Responstijd (gem.) 22.11s 17.87s
Responstijd (max) 199.97s 124.75s
Responstijd (totaal) 486.31s 393.04s
Parameters ~700B totaal (~72B actief) 198B totaal (11B actief)
Beschikbaarheid Gesloten broncode Open-source

Model generatie-showcase

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#108 KAT-Coder-Pro V2.5

high
Kosten
$0.009
Tijd
26.4s
Tokens
3,117 tok

#115 Step 3.7 Flash

low
Ongeldige SVG
Kosten
$0.004
Tijd
25.3s
Tokens
3,072 tok

Topmodellen op score

Score vs totale kosten

Responstijd (gem.)

Score vs Responstijd (gem.)

Totaal aantal uitvoer-tokens

Score vs Totaal aantal uitvoer-tokens

Categorie-uitsplitsing

Programmeren Score Consistentie Slaagpercentage per poging Instabiele tests Correcte tests Responstijd (gem.) Invoer-tokens Uitvoer-tokens Redeneer-tokens
KAT-Coder-Pro V2.5 6.4 7.9 44.4% 1 22.00s 7,893 422 20,461
Step 3.7 Flash 8.2 7.2 88.9% 1 9.46s 7,437 18,685 0

Snelle vergelijking

Vergelijkingspaar wisselen