AI BENCHY
Advertise here
#126

KAT-Coder-Pro V2.5

Kwaipilot Veröffentlichung: 2026-07-14 Getestet am: 2026-08-14 03:24 kwaipilot/kat-coder-pro-v2.5::medium
~700B insgesamt (~72B aktiv)MoEGeschlossenGeschätzt
(high) (medium) (low) (none)

Zusammenfassung

KAT-Coder-Pro V2.5 erreicht 6.9 bei AI BENCHY und liegt auf #126. Das Modell hat 10.0 Zuverlässigkeit, 65.2% Erfolgsrate, $0.478 Gesamtkosten und 24.87s durchschnittliche Antwortzeit.

Was KAT-Coder-Pro V2.5 besonders macht: Am stärksten ist es in Programmierung, wo es #4 erreicht; am schwächsten ist Datenanalyse und -extraktion mit #14.

Modelldaten

Recherchiert am 2026-08-12

Geschätzt
Parameter
~700B insgesamt (~72B aktiv)
Architektur
MoE
Verfügbarkeit
Geschlossen
Lizenz
-

Beste Schätzung auf Grundlage öffentlicher Informationen; der Anbieter hat nicht alle Werte offengelegt.

Punktzahl

6.9

Konsistenz

7.0

Gesamte Ausgabe-Token

139,375

Gesamte Eingabe-Token

87,916

Eingabepreis

$0.740 / 1M

Ausgabepreis

$2.960 / 1M

Korrekte Tests

Falsche Tests: 11

Erfolgsquote pro Versuch: 65.2%

Instabile Tests

8

Instabile Tests hatten gemischte Ergebnisse über Läufe hinweg (mindestens ein Erfolg und ein Fehlschlag).

Antwortzeit (Durchschnitt)

24.87s

Antwortzeit (Maximum): 257.00s

Antwortzeit (Gesamt): 547.14s

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#126 KAT-Coder-Pro V2.5

medium
Kosten
$0.009
Zeit
25.6s
Token
2,939 tok

Testverlauf

Getestet am Punktzahl Zuverlässigkeit Korrekte Tests Gesamtkosten Vergleichen
2026-08-14 03:24 Erneuter Test 6.9 10.0 $0.478 Aktueller Lauf
2026-07-16 23:47 Neuer Test hinzugefügt 6.9 10.0 $0.467 Vergleichen
2026-07-14 11:05 Erster Lauf 7.5 10.0 $0.275 Vergleichen

Dieser Lauf nutzte eine andere Benchmark-Suite. Berücksichtige Suite-Änderungen bei der historischen Einordnung.

Laufvergleich

LaufBenchmark-AbdeckungPunktzahlKonsistenzZuverlässigkeitKorrekte TestsInstabile TestsGesamte Ausgabe-TokenGesamte Eingabe-TokenGesamtkostenAntwortzeit (Durchschnitt)
2026-08-14 03:24 · Aktueller Lauf66/66 Versuche6.97.010.011/228139,37587,916$0.47824.87s
2026-07-16 23:47 · Neuer Test hinzugefügt66/66 Versuche6.97.410.011/227135,46487,907$0.46724.04s
Differenz0.0-0.40.00+1+3911+9+$0.012+828ms

Diese beiden Läufe nutzten unterschiedliche Benchmark-Suiten, daher spiegeln die Deltas sowohl Modell- als auch Suite-Änderungen wider.

Preisverlauf

Historische Preisdaten für dieses Modell von OpenRouter.

Datum Eingabepreis Ausgabepreis
2026-08-14 12:51 $0.740 / 1M $2.960 / 1M

Diagramme

Wähle zuerst das erste Modell und klicke dann ein zweites Modell, um eine Seite im direkten Vergleich zu öffnen.

Gesamte Ausgabe-Token

Punktzahl vs Gesamte Ausgabe-Token

Schnellvergleich

Kategorieaufschlüsselung

Kategorie Punktzahl Konsistenz Korrekte Tests
Anti-KI-Tricks 8.2 7.9
Programmierung 7.8 10.0
Kombiniert 6.4 5.8
Datenanalyse und -extraktion 7.3 5.9
Domänenspezifisch 2.9 4.4
Allgemeine Intelligenz 4.7 3.1
Befolgung von Anweisungen 9.9 10.0
Rätsellösen 5.9 4.5
Werkzeugaufrufe 10.0 10.0
Allgemeinwissen 3.0 10.0

Verglichene Modelle