Navigare
AI BENCHY
Advertise here

AI BENCHY Compare

Kwaipilot: KAT-Coder-Air V2.5 vs OpenAI: GPT-5.5

Rezumat

Scorul mediu este practic egal la 6.2 vs 6.3. KAT-Coder-Air V2.5 (high) are costul de benchmark mai mic, $0.064 vs $0.231. GPT-5.5 este mai rapid cu 1.89s vs 11.02s, cu rate de reușită de 46.0% vs 54.0%.

Model recomandatGPT-5.5Are cel mai bun scor aici (6.3) și răspunde de aproximativ 5.8x mai rapid decât KAT-Coder-Air V2.5 (high).

Benchmark-urile au fost generate din suitele de teste AI BENCHY la: 2026-07-14

Metrică KAT-Coder-Air V2.5 KAT-Coder-Air V2.5 high Lansare: 2026-07-14 GPT-5.5 GPT-5.5 none Lansare: 2026-04-24
Scor 6.2 6.3
Rang #110 #109
Fiabilitate 9.7 10.0
Consistență 7.6 8.8
Teste corecte
Rată de trecere pe încercare 46.0% 54.0%
Teste instabile 6 3
Rulări totale 63 63
Cost per rezultat 0.910 2.302
Cost total $0.064 $0.231
Preț de intrare $0.150 / 1M $5.000 / 1M
Preț de ieșire $0.600 / 1M $30.000 / 1M
Total tokenuri de intrare 41,748 34,212
Tokenuri de ieșire 3,894 1,971
Tokenuri de raționament 91,773 0
Timp de răspuns (mediu) 11.02s 1.89s
Timp de răspuns (maxim) 104.98s 5.56s
Timp de răspuns (total) 231.37s 39.64s

Prezentare generare

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#110 KAT-Coder-Air V2.5

high
SVG invalid
Cost
$0.000
Timp
300.0s
Tokenuri
0 tok

#109 GPT-5.5

none
Cost
$0.090
Timp
54.3s
Tokenuri
3,063 tok

Top modele după scor

Scor vs cost total

Timp de răspuns (mediu)

Scor vs Timp de răspuns (mediu)

Total tokenuri de ieșire

Scor vs Total tokenuri de ieșire

Defalcare pe categorii

Programare Scor Consistență Rată de trecere pe încercare Teste instabile Teste corecte Timp de răspuns (mediu) Tokenuri de intrare Tokenuri de ieșire Tokenuri de raționament
KAT-Coder-Air V2.5 4.3 7.3 11.1% 1 39.07s 6,948 1,166 55,883
GPT-5.5 5.5 10.0 33.3% 0 1.35s 7,305 462 0

Comparație rapidă

Schimbă perechea de comparație