Navigatie
AI BENCHY
Advertise here

AI BENCHY Compare

Anthropic: Claude Sonnet 5 vs Kwaipilot: KAT-Coder-Pro V2.5

Samenvatting

KAT-Coder-Pro V2.5 (low) leidt in gemiddelde score met 8.0 vs 7.9. KAT-Coder-Pro V2.5 (low) heeft lagere benchmarkkosten met $0.220 vs $0.550. Claude Sonnet 5 (medium) is sneller met 9.94s vs 10.44s, met slagingspercentages van 79.4% vs 71.4%.

Aanbevolen modelKAT-Coder-Pro V2.5 (low)Het heeft hier de beste score (8.0) en kost ongeveer 2.5x minder dan Claude Sonnet 5 (medium).

Benchmarks gegenereerd uit AI BENCHY-testsuites op: 2026-07-14

Metriek Claude Sonnet 5 Claude Sonnet 5 medium Releasedatum: 2026-06-30 KAT-Coder-Pro V2.5 KAT-Coder-Pro V2.5 low Releasedatum: 2026-07-14
Score 7.9 8.0
Rang #37 #35
Betrouwbaarheid 10.0 9.9
Consistentie 9.0 7.3
Correcte tests
Slaagpercentage per poging 79.4% 71.4%
Instabiele tests 3 7
Totaal runs 63 63
Kosten per resultaat 3.662 1.991
Totale kosten $0.550 $0.220
Invoerprijs $2.000 / 1M $0.740 / 1M
Uitvoerprijs $10.000 / 1M $2.960 / 1M
Totaal aantal invoer-tokens 67,416 42,750
Uitvoer-tokens 34,012 2,167
Redeneer-tokens 7,673 61,133
Responstijd (gem.) 9.94s 10.44s
Responstijd (max) 56.94s 51.34s
Responstijd (totaal) 208.71s 219.17s

Generatie-showcase

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#37 Claude Sonnet 5

medium
Kosten
$0.007
Tijd
6.4s
Tokens
832 tok

#35 KAT-Coder-Pro V2.5

low
Kosten
$0.016
Tijd
47.6s
Tokens
5,182 tok

Topmodellen op score

Score vs totale kosten

Responstijd (gem.)

Score vs Responstijd (gem.)

Totaal aantal uitvoer-tokens

Score vs Totaal aantal uitvoer-tokens

Categorie-uitsplitsing

Programmeren Score Consistentie Slaagpercentage per poging Instabiele tests Correcte tests Responstijd (gem.) Invoer-tokens Uitvoer-tokens Redeneer-tokens
Claude Sonnet 5 9.0 7.9 88.9% 1 17.28s 10,590 13,153 2,379
KAT-Coder-Pro V2.5 7.8 10.0 66.7% 0 24.87s 7,893 402 24,945

Snelle vergelijking

Vergelijkingspaar wisselen