Navigatie
AI BENCHY
Advertise here

AI BENCHY Compare

Anthropic: Claude Sonnet 4.6 vs Kwaipilot: KAT-Coder-Pro V2.5

Samenvatting

KAT-Coder-Pro V2.5 (low) leidt in gemiddelde score met 8.0 vs 7.8. KAT-Coder-Pro V2.5 (low) heeft lagere benchmarkkosten met $0.220 vs $1.418. KAT-Coder-Pro V2.5 (low) is sneller met 10.44s vs 17.06s, met slagingspercentages van 65.1% vs 71.4%.

Aanbevolen modelKAT-Coder-Pro V2.5 (low)Het heeft hier de beste score (8.0) en kost ongeveer 6.5x minder dan Claude Sonnet 4.6 (medium).

Benchmarks gegenereerd uit AI BENCHY-testsuites op: 2026-07-14

Metriek Claude Sonnet 4.6 Claude Sonnet 4.6 medium Releasedatum: 2026-02-17 KAT-Coder-Pro V2.5 KAT-Coder-Pro V2.5 low Releasedatum: 2026-07-14
Score 7.8 8.0
Rang #40 #35
Betrouwbaarheid 10.0 9.9
Consistentie 9.1 7.3
Correcte tests
Slaagpercentage per poging 65.1% 71.4%
Instabiele tests 2 7
Totaal runs 63 63
Kosten per resultaat 10.904 1.991
Totale kosten $1.418 $0.220
Invoerprijs $3.000 / 1M $0.740 / 1M
Uitvoerprijs $15.000 / 1M $2.960 / 1M
Totaal aantal invoer-tokens 49,112 42,750
Uitvoer-tokens 54,703 2,167
Redeneer-tokens 29,970 61,133
Responstijd (gem.) 17.06s 10.44s
Responstijd (max) 46.35s 51.34s
Responstijd (totaal) 221.83s 219.17s

Generatie-showcase

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#40 Claude Sonnet 4.6

medium
Ongeldige SVG
Kosten
$0.000
Tijd
300.0s
Tokens
0 tok

#35 KAT-Coder-Pro V2.5

low
Kosten
$0.016
Tijd
47.6s
Tokens
5,182 tok

Topmodellen op score

Score vs totale kosten

Responstijd (gem.)

Score vs Responstijd (gem.)

Totaal aantal uitvoer-tokens

Score vs Totaal aantal uitvoer-tokens

Categorie-uitsplitsing

Programmeren Score Consistentie Slaagpercentage per poging Instabiele tests Correcte tests Responstijd (gem.) Invoer-tokens Uitvoer-tokens Redeneer-tokens
Claude Sonnet 4.6 5.7 6.6 44.4% 1 33.29s 6,995 16,089 3,686
KAT-Coder-Pro V2.5 7.8 10.0 66.7% 0 24.87s 7,893 402 24,945

Snelle vergelijking

Vergelijkingspaar wisselen