AI BENCHY
AD
Track all your projects in one dashboard. Get 📊stats, 🔥heatmaps and 👀recordings in one self-hosted dashboard.
uxwizz.com
#141

KAT-Coder-Air V2.5

Kwaipilot Releasedatum: 2026-07-14 Getest op: 2026-07-16 23:34 kwaipilot/kat-coder-air-v2.5::medium
~35B totaal (~3B actief)MoEGesloten broncodeGeschat
(high) (medium) (low) (none)

Samenvatting

KAT-Coder-Air V2.5 scoort 5.6 op AI BENCHY en staat op #141. Het model heeft 9.9 betrouwbaarheid, een slagingspercentage van 45.5%, $0.048 totale kosten en 8.42s gemiddelde responstijd.

Wat KAT-Coder-Air V2.5 uniek maakt: Het valt het meest op in Instructies opvolgen, waar het #1 staat, terwijl Programmeren het zwakste gebied is met #15.

Modelgegevens

Onderzocht op 2026-08-12

Geschat
Parameters
~35B totaal (~3B actief)
Architectuur
MoE
Beschikbaarheid
Gesloten broncode
Licentie
-

Beste schatting op basis van openbare informatie; de leverancier heeft niet alle waarden bekendgemaakt.

Score

5.6

Consistentie

8.9

Totaal aantal uitvoer-tokens

66,174

Totaal aantal invoer-tokens

51,472

Invoerprijs

$0.150 / 1M

Uitvoerprijs

$0.600 / 1M

Correcte tests

Foute tests: 14

Slaagpercentage per poging: 45.5%

Instabiele tests

3

Instabiele tests hadden gemengde uitkomsten over runs (minstens één geslaagd en één gefaald).

Responstijd (gem.)

8.42s

Responstijd (max): 48.19s

Responstijd (totaal): 185.24s

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#141 KAT-Coder-Air V2.5

medium
Kosten
$0.003
Tijd
23.7s
Tokens
4,924 tok

Rungeschiedenis

Getest op Score Betrouwbaarheid Correcte tests Totale kosten Vergelijken
2026-08-14 03:26 Hertest 5.6 9.6 $0.048 Vergelijken
2026-07-16 23:34 Nieuwe test toegevoegd 5.6 9.9 $0.048 Huidige run
2026-07-14 11:05 Eerste run 6.2 9.7 $0.045 Vergelijken

Deze run gebruikte een andere benchmarkset. Houd rekening met suitewijzigingen bij het lezen van historische verschuivingen.

Runvergelijking

RunBenchmarkdekkingScoreConsistentieBetrouwbaarheidCorrecte testsInstabiele testsTotaal aantal uitvoer-tokensTotaal aantal invoer-tokensTotale kostenResponstijd (gem.)
2026-07-16 23:34 · Nieuwe test toegevoegd66/66 pogingen5.68.99.98/22366,17451,472$0.0488.42s
2026-07-14 11:05 · Eerste run63/63 pogingen6.28.89.78/21364,11642,750$0.0458.28s
Verschil-0.6+0.1+0.200+2058+8722+$0.003+144ms

De benchmarkdekking verschilt: 66/66 pogingen (Doel: 3 herhalingen per test) tegenover 63/63 pogingen (Doel: 3 herhalingen per test). Totalen en herhalingsgevoelige statistieken zijn niet direct vergelijkbaar.

Deze twee runs gebruikten verschillende benchmarksets, dus de verschillen weerspiegelen zowel modelveranderingen als suitewijzigingen.

Prijsgeschiedenis

Historische prijsgegevens voor dit model van OpenRouter.

Datum Invoerprijs Uitvoerprijs
2026-07-14 11:25 $0.150 / 1M $0.600 / 1M

Grafieken

Kies eerst het eerste model en klik daarna op een tweede model om een zij-aan-zijpagina te openen.

Totaal aantal uitvoer-tokens

Score vs Totaal aantal uitvoer-tokens

Snelle vergelijking

Categorie-uitsplitsing

Categorie Score Consistentie Correcte tests
Anti-AI-trucs 8.7 8.0
Programmeren 3.6 7.0
Gecombineerd 6.5 10.0
Gegevensparsering en extractie 6.5 10.0
Domeinspecifiek 3.0 10.0
Algemene intelligentie 5.0 10.0
Instructies opvolgen 10.0 10.0
Puzzeloplossing 3.6 7.2
Toolaanroepen 10.0 10.0
Algemene kennis 3.0 10.0

Vergeleken modellen