Navigatie
AI BENCHY
Advertise here

AI BENCHY Compare

Kwaipilot: KAT-Coder-Pro V2.5 vs Qwen: Qwen3.5-27B

Samenvatting

KAT-Coder-Pro V2.5 (low) leidt in gemiddelde score met 8.0 vs 7.9. KAT-Coder-Pro V2.5 (low) heeft lagere benchmarkkosten met $0.220 vs $0.536. KAT-Coder-Pro V2.5 (low) is sneller met 10.44s vs 68.39s, met slagingspercentages van 71.4% vs 73.0%.

Aanbevolen modelKAT-Coder-Pro V2.5 (low)Het heeft hier de beste score (8.0) en kost ongeveer 2.4x minder dan Qwen3.5-27B (medium).

Benchmarks gegenereerd uit AI BENCHY-testsuites op: 2026-07-14

Metriek KAT-Coder-Pro V2.5 KAT-Coder-Pro V2.5 low Releasedatum: 2026-07-14 Qwen3.5-27B Qwen3.5-27B medium Releasedatum: 2026-02-24
Score 8.0 7.9
Rang #35 #36
Betrouwbaarheid 9.9 10.0
Consistentie 7.3 8.5
Correcte tests
Slaagpercentage per poging 71.4% 73.0%
Instabiele tests 7 4
Totaal runs 63 63
Kosten per resultaat 1.991 4.901
Totale kosten $0.220 $0.536
Invoerprijs $0.740 / 1M $0.195 / 1M
Uitvoerprijs $2.960 / 1M $1.560 / 1M
Totaal aantal invoer-tokens 42,750 42,164
Uitvoer-tokens 2,167 8,534
Redeneer-tokens 61,133 329,289
Responstijd (gem.) 10.44s 68.39s
Responstijd (max) 51.34s 234.36s
Responstijd (totaal) 219.17s 1436.24s

Generatie-showcase

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#35 KAT-Coder-Pro V2.5

low
Kosten
$0.016
Tijd
47.6s
Tokens
5,182 tok

#36 Qwen3.5-27B

medium
Kosten
$0.008
Tijd
62.0s
Tokens
3,099 tok

Topmodellen op score

Score vs totale kosten

Responstijd (gem.)

Score vs Responstijd (gem.)

Totaal aantal uitvoer-tokens

Score vs Totaal aantal uitvoer-tokens

Categorie-uitsplitsing

Programmeren Score Consistentie Slaagpercentage per poging Instabiele tests Correcte tests Responstijd (gem.) Invoer-tokens Uitvoer-tokens Redeneer-tokens
KAT-Coder-Pro V2.5 7.8 10.0 66.7% 0 24.87s 7,893 402 24,945
Qwen3.5-27B 6.2 7.1 55.6% 1 160.69s 7,895 6,381 89,388

Snelle vergelijking

Vergelijkingspaar wisselen