Navigare
Advertise here

KAT-Coder-Air V2.5 (high) vs GPT-5.4

GPT-5.4 conduce la scorul mediu cu 5.8 vs 5.6. KAT-Coder-Air V2.5 (high) are costul de benchmark mai mic, $0.077 vs $0.397. GPT-5.4 este mai rapid cu 2.08s vs 15.87s, cu rate de reușită de 42.4% vs 34.9%.

Benchmark-urile au fost generate din suitele de teste AI BENCHY la: 2026-09-10

Modele comparate

Rang
#234
Total tokenuri de ieșire
114,654
Timp de răspuns (mediu)
15.87s
Cost total
$0.077
Rang
#223
Total tokenuri de ieșire
8,339
Timp de răspuns (mediu)
2.08s
Cost total
$0.397
Model recomandat GPT-5.4

Are cel mai bun scor aici (5.8) și răspunde de aproximativ 7.6x mai rapid decât KAT-Coder-Air V2.5 (high).

Comparație detaliată

Metrică KAT-Coder-Air V2.5 KAT-Coder-Air V2.5 high Lansare: 2026-07-14 GPT-5.4 GPT-5.4 none Lansare: 2026-03-05
Scor 5.6 5.8
Rang #234 #223
Fiabilitate 9.8 10.0
Consistență 8.1 9.2
Încercări 66/66 66/66
Teste corecte
Rată de trecere pe încercare 42.4% 34.9%
Teste instabile 5 2
Rulări totale 66 66
Cost per rezultat 1.091 5.667
Cost total $0.077 $0.397
Preț de intrare $0.150 / 1M $2.500 / 1M
Preț de ieșire $0.600 / 1M $15.000 / 1M
Total tokenuri de intrare 50,423 108,641
Tokenuri de ieșire 4,144 8,339
Tokenuri de raționament 110,510 0
Timp de răspuns (mediu) 15.87s 2.08s
Timp de răspuns (maxim) 118.35s 15.63s
Timp de răspuns (total) 349.16s 45.75s
Parametri ~35B în total (~3B activi) ~1.5T în total (~100B activi)
Disponibilitate Închis Închis

Prezentare generare modele

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#234 KAT-Coder-Air V2.5

high
Reached the allocated time limit (300 seconds) without receiving showcase output.
Cost
$0.000
Timp
300.0s
Tokenuri
0 tok

#223 GPT-5.4

none
Cost
$0.026
Timp
18.1s
Tokenuri
1,792 tok

Top modele după scor

Scor vs cost total

Timp de răspuns (mediu)

Scor vs Timp de răspuns (mediu)

Total tokenuri de ieșire

Scor vs Total tokenuri de ieșire

Defalcare pe categorii

Programare Scor Consistență Rată de trecere pe încercare Teste instabile Teste corecte Timp de răspuns (mediu) Tokenuri de intrare Tokenuri de ieșire Tokenuri de raționament
KAT-Coder-Air V2.5 4.3 7.3 11.1% 1 39.07s 6,948 1,166 55,883
GPT-5.4 5.5 10.0 33.3% 0 1.62s 7,305 516 0

Comparație rapidă

Schimbă perechea de comparație