Navigatie
AI BENCHY
AD
Track all your projects in one dashboard. Get 📊stats, 🔥heatmaps and 👀recordings in one self-hosted dashboard.
uxwizz.com

AI BENCHY Compare

Kwaipilot: KAT-Coder-Air V2.5 vs OpenAI: GPT-5.6 Sol

Samenvatting

GPT-5.6 Sol leidt in gemiddelde score met 6.3 vs 6.2. KAT-Coder-Air V2.5 (medium) heeft lagere benchmarkkosten met $0.045 vs $0.225. GPT-5.6 Sol is sneller met 1.66s vs 8.28s, met slagingspercentages van 47.6% vs 57.1%.

Aanbevolen modelGPT-5.6 SolHet heeft hier de beste score (6.3) en reageert ongeveer 5.0x sneller dan KAT-Coder-Air V2.5 (medium).

Benchmarks gegenereerd uit AI BENCHY-testsuites op: 2026-07-14

Metriek KAT-Coder-Air V2.5 KAT-Coder-Air V2.5 medium Releasedatum: 2026-07-14 GPT-5.6 Sol GPT-5.6 Sol none Releasedatum: 2026-07-09
Score 6.2 6.3
Rang #115 #106
Betrouwbaarheid 9.7 10.0
Consistentie 8.8 9.0
Correcte tests
Slaagpercentage per poging 47.6% 57.1%
Instabiele tests 3 3
Totaal runs 63 63
Kosten per resultaat 0.562 2.244
Totale kosten $0.045 $0.225
Invoerprijs $0.150 / 1M $5.000 / 1M
Uitvoerprijs $0.600 / 1M $30.000 / 1M
Totaal aantal invoer-tokens 42,750 34,218
Uitvoer-tokens 7,759 1,776
Redeneer-tokens 56,357 0
Responstijd (gem.) 8.28s 1.66s
Responstijd (max) 48.19s 3.93s
Responstijd (totaal) 173.80s 34.81s

Generatie-showcase

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#115 KAT-Coder-Air V2.5

medium
Kosten
$0.003
Tijd
23.7s
Tokens
4,924 tok

#106 GPT-5.6 Sol

none
Kosten
$0.116
Tijd
78.7s
Tokens
3,944 tok

Topmodellen op score

Score vs totale kosten

Responstijd (gem.)

Score vs Responstijd (gem.)

Totaal aantal uitvoer-tokens

Score vs Totaal aantal uitvoer-tokens

Categorie-uitsplitsing

Programmeren Score Consistentie Slaagpercentage per poging Instabiele tests Correcte tests Responstijd (gem.) Invoer-tokens Uitvoer-tokens Redeneer-tokens
KAT-Coder-Air V2.5 3.6 7.0 22.2% 1 23.37s 7,893 5,199 29,973
GPT-5.6 Sol 5.5 10.0 33.3% 0 1.39s 7,302 390 0

Snelle vergelijking

Vergelijkingspaar wisselen