AI BENCHY
AD
Track all your projects in one dashboard. Get 📊stats, 🔥heatmaps and 👀recordings in one self-hosted dashboard.
uxwizz.com
#35

KAT-Coder-Pro V2.5

Kwaipilot Releasedatum: 2026-07-14 Getest op: 2026-07-14 11:05 kwaipilot/kat-coder-pro-v2.5::low
~700B totaal (~72B actief)MoEGesloten broncodeGeschat

Samenvatting

KAT-Coder-Pro V2.5 scoort 8.0 op AI BENCHY en staat op #35. Het model heeft 9.9 betrouwbaarheid, een slagingspercentage van 71.4%, $0.220 totale kosten en 10.44s gemiddelde responstijd.

Wat KAT-Coder-Pro V2.5 uniek maakt: De totale benchmarkkosten zijn ongewoon laag voor dit scoreniveau.

Modelgegevens

Onderzocht op 2026-08-12

Geschat
Parameters
~700B totaal (~72B actief)
Architectuur
MoE
Beschikbaarheid
Gesloten broncode
Licentie
-

Beste schatting op basis van openbare informatie; de leverancier heeft niet alle waarden bekendgemaakt.

Score

8.0

Consistentie

7.3

Totaal aantal uitvoer-tokens

63,300

Totaal aantal invoer-tokens

42,750

Invoerprijs

$0.740 / 1M

Uitvoerprijs

$2.960 / 1M

Correcte tests

Foute tests: 10

Slaagpercentage per poging: 71.4%

Instabiele tests

7

Instabiele tests hadden gemengde uitkomsten over runs (minstens één geslaagd en één gefaald).

Responstijd (gem.)

10.44s

Responstijd (max): 51.34s

Responstijd (totaal): 219.17s

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#35 KAT-Coder-Pro V2.5

low
Kosten
$0.016
Tijd
47.6s
Tokens
5,182 tok

Rungeschiedenis

Getest op Score Betrouwbaarheid Correcte tests Totale kosten Vergelijken
2026-08-14 03:23 Hertest 7.3 10.0 $0.400 Vergelijken
2026-07-16 23:38 Nieuwe test toegevoegd 7.4 10.0 $0.387 Vergelijken
2026-07-14 11:05 Eerste run 8.0 9.9 $0.220 Huidige run

Runvergelijking

RunBenchmarkdekkingScoreConsistentieBetrouwbaarheidCorrecte testsInstabiele testsTotaal aantal uitvoer-tokensTotaal aantal invoer-tokensTotale kostenResponstijd (gem.)
2026-07-14 11:05 · Eerste run63/63 pogingen8.07.39.911/21763,30042,750$0.22010.44s
2026-07-16 23:38 · Nieuwe test toegevoegd66/66 pogingen7.47.010.011/228108,64087,673$0.38719.47s
Verschil+0.6+0.3-0.10-1-45340-44923-$0.168-9032ms

De benchmarkdekking verschilt: 63/63 pogingen (Doel: 3 herhalingen per test) tegenover 66/66 pogingen (Doel: 3 herhalingen per test). Totalen en herhalingsgevoelige statistieken zijn niet direct vergelijkbaar.

Deze twee runs gebruikten verschillende benchmarksets, dus de verschillen weerspiegelen zowel modelveranderingen als suitewijzigingen.

Prijsgeschiedenis

Historische prijsgegevens voor dit model van OpenRouter.

Datum Invoerprijs Uitvoerprijs
2026-07-14 11:25 $0.740 / 1M $2.960 / 1M

Grafieken

Kies eerst het eerste model en klik daarna op een tweede model om een zij-aan-zijpagina te openen.

Totaal aantal uitvoer-tokens

Score vs Totaal aantal uitvoer-tokens

Snelle vergelijking

Categorie-uitsplitsing

Categorie Score Consistentie Correcte tests
Anti-AI-trucs 6.9 5.8
Programmeren 7.8 10.0
Gecombineerd 10.0 10.0
Gegevensparsering en extractie 10.0 10.0
Domeinspecifiek 4.1 4.4
Algemene intelligentie 4.1 2.7
Instructies opvolgen 10.0 10.0
Puzzeloplossing 6.4 4.4
Toolaanroepen 10.0 10.0
Algemene kennis 3.0 10.0

Vergeleken modellen