Navigation
AI BENCHY
Advertise here

AI BENCHY Compare

Anthropic: Claude Sonnet 5 vs Kwaipilot: KAT-Coder-Pro V2.5

Zusammenfassung

KAT-Coder-Pro V2.5 (low) führt beim Durchschnittsscore mit 8.0 vs 7.9. KAT-Coder-Pro V2.5 (low) hat die niedrigeren Benchmark-Kosten mit $0.220 vs $0.550. Claude Sonnet 5 (medium) ist schneller mit 9.94s vs 10.44s, mit Erfolgsraten von 79.4% vs 71.4%.

Empfohlenes ModellKAT-Coder-Pro V2.5 (low)Es hat hier die beste Punktzahl (8.0) und kostet etwa 2.5x weniger als Claude Sonnet 5 (medium).

Benchmarks aus AI BENCHY-Test-Suites generiert am: 2026-07-14

Metrik Claude Sonnet 5 Claude Sonnet 5 medium Veröffentlichung: 2026-06-30 KAT-Coder-Pro V2.5 KAT-Coder-Pro V2.5 low Veröffentlichung: 2026-07-14
Punktzahl 7.9 8.0
Rang #37 #35
Zuverlässigkeit 10.0 9.9
Konsistenz 9.0 7.3
Korrekte Tests
Erfolgsquote pro Versuch 79.4% 71.4%
Instabile Tests 3 7
Gesamtläufe 63 63
Kosten pro Ergebnis 3.662 1.991
Gesamtkosten $0.550 $0.220
Eingabepreis $2.000 / 1M $0.740 / 1M
Ausgabepreis $10.000 / 1M $2.960 / 1M
Gesamte Eingabe-Token 67,416 42,750
Ausgabe-Token 34,012 2,167
Denk-Token 7,673 61,133
Antwortzeit (Durchschnitt) 9.94s 10.44s
Antwortzeit (Maximum) 56.94s 51.34s
Antwortzeit (Gesamt) 208.71s 219.17s

Generierungs-Showcase

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#37 Claude Sonnet 5

medium
Kosten
$0.007
Zeit
6.4s
Token
832 tok

#35 KAT-Coder-Pro V2.5

low
Kosten
$0.016
Zeit
47.6s
Token
5,182 tok

Top-Modelle nach Score

Score vs. Gesamtkosten

Antwortzeit (Durchschnitt)

Punktzahl vs Antwortzeit (Durchschnitt)

Gesamte Ausgabe-Token

Punktzahl vs Gesamte Ausgabe-Token

Kategorieaufschlüsselung

Programmierung Punktzahl Konsistenz Erfolgsquote pro Versuch Instabile Tests Korrekte Tests Antwortzeit (Durchschnitt) Eingabe-Token Ausgabe-Token Denk-Token
Claude Sonnet 5 9.0 7.9 88.9% 1 17.28s 10,590 13,153 2,379
KAT-Coder-Pro V2.5 7.8 10.0 66.7% 0 24.87s 7,893 402 24,945

Schnellvergleich

Vergleichspaar wechseln