AI BENCHY
AD
Track all your projects in one dashboard. Get 📊stats, 🔥heatmaps and 👀recordings in one self-hosted dashboard.
uxwizz.com
#101

KAT-Coder-Pro V2.5

Kwaipilot Veröffentlichung: 2026-07-14 Getestet am: 2026-08-14 03:23 kwaipilot/kat-coder-pro-v2.5::low
~700B insgesamt (~72B aktiv)MoEGeschlossenGeschätzt

Zusammenfassung

KAT-Coder-Pro V2.5 erreicht 7.3 bei AI BENCHY und liegt auf #101. Das Modell hat 10.0 Zuverlässigkeit, 68.2% Erfolgsrate, $0.400 Gesamtkosten und 20.20s durchschnittliche Antwortzeit.

Was KAT-Coder-Pro V2.5 besonders macht: Am stärksten ist es in Befolgung von Anweisungen, wo es #1 erreicht; am schwächsten ist Allgemeine Intelligenz mit #17.

Modelldaten

Recherchiert am 2026-08-12

Geschätzt
Parameter
~700B insgesamt (~72B aktiv)
Architektur
MoE
Verfügbarkeit
Geschlossen
Lizenz
-

Beste Schätzung auf Grundlage öffentlicher Informationen; der Anbieter hat nicht alle Werte offengelegt.

Punktzahl

7.3

Konsistenz

7.0

Gesamte Ausgabe-Token

113,193

Gesamte Eingabe-Token

87,682

Eingabepreis

$0.740 / 1M

Ausgabepreis

$2.960 / 1M

Korrekte Tests

Falsche Tests: 11

Erfolgsquote pro Versuch: 68.2%

Instabile Tests

8

Instabile Tests hatten gemischte Ergebnisse über Läufe hinweg (mindestens ein Erfolg und ein Fehlschlag).

Antwortzeit (Durchschnitt)

20.20s

Antwortzeit (Maximum): 209.15s

Antwortzeit (Gesamt): 444.35s

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#101 KAT-Coder-Pro V2.5

low
Kosten
$0.016
Zeit
47.6s
Token
5,182 tok

Testverlauf

Getestet am Punktzahl Zuverlässigkeit Korrekte Tests Gesamtkosten Vergleichen
2026-08-14 03:23 Erneuter Test 7.3 10.0 $0.400 Aktueller Lauf
2026-07-16 23:38 Neuer Test hinzugefügt 7.4 10.0 $0.387 Vergleichen
2026-07-14 11:05 Erster Lauf 8.0 9.9 $0.220 Vergleichen

Dieser Lauf nutzte eine andere Benchmark-Suite. Berücksichtige Suite-Änderungen bei der historischen Einordnung.

Laufvergleich

LaufBenchmark-AbdeckungPunktzahlKonsistenzZuverlässigkeitKorrekte TestsInstabile TestsGesamte Ausgabe-TokenGesamte Eingabe-TokenGesamtkostenAntwortzeit (Durchschnitt)
2026-08-14 03:23 · Aktueller Lauf66/66 Versuche7.37.010.011/228113,19387,682$0.40020.20s
2026-07-14 11:05 · Erster Lauf63/63 Versuche8.07.39.911/21763,30042,750$0.22010.44s
Differenz-0.6-0.3+0.10+1+49893+44932+$0.181+9761ms

Die Benchmark-Abdeckung unterscheidet sich: 66/66 Versuche (Ziel: 3 Wiederholungen pro Test) gegenüber 63/63 Versuche (Ziel: 3 Wiederholungen pro Test). Summen und wiederholungsabhängige Metriken sind nicht direkt vergleichbar.

Diese beiden Läufe nutzten unterschiedliche Benchmark-Suiten, daher spiegeln die Deltas sowohl Modell- als auch Suite-Änderungen wider.

Preisverlauf

Historische Preisdaten für dieses Modell von OpenRouter.

Datum Eingabepreis Ausgabepreis
2026-08-14 12:51 $0.740 / 1M $2.960 / 1M

Diagramme

Wähle zuerst das erste Modell und klicke dann ein zweites Modell, um eine Seite im direkten Vergleich zu öffnen.

Gesamte Ausgabe-Token

Punktzahl vs Gesamte Ausgabe-Token

Schnellvergleich

Kategorieaufschlüsselung

Kategorie Punktzahl Konsistenz Korrekte Tests
Anti-KI-Tricks 6.9 5.8
Programmierung 7.8 10.0
Kombiniert 6.4 5.8
Datenanalyse und -extraktion 10.0 10.0
Domänenspezifisch 3.5 4.4
Allgemeine Intelligenz 4.1 2.7
Befolgung von Anweisungen 10.0 10.0
Rätsellösen 6.4 4.4
Werkzeugaufrufe 10.0 10.0
Allgemeinwissen 3.0 10.0

Verglichene Modelle