Navigare
AI BENCHY
Advertise here

AI BENCHY Compare

Kwaipilot: KAT-Coder-Pro V2.5 vs OpenAI: GPT-5.4 Nano

Rezumat

Scorul mediu este practic egal la 7.5 vs 7.5. GPT-5.4 Nano (medium) are costul de benchmark mai mic, $0.107 vs $0.275. GPT-5.4 Nano (medium) este mai rapid cu 11.95s vs 12.95s, cu rate de reușită de 65.1% vs 63.5%.

Model recomandatGPT-5.4 Nano (medium)Are cel mai bun scor aici (7.5) și costă de aproximativ 2.6x mai puțin decât KAT-Coder-Pro V2.5 (medium).

Benchmark-urile au fost generate din suitele de teste AI BENCHY la: 2026-07-14

Metrică KAT-Coder-Pro V2.5 KAT-Coder-Pro V2.5 medium Lansare: 2026-07-14 GPT-5.4 Nano GPT-5.4 Nano medium Lansare: 2026-03-17
Scor 7.5 7.5
Rang #60 #62
Fiabilitate 10.0 10.0
Consistență 7.7 8.4
Teste corecte
Rată de trecere pe încercare 65.1% 63.5%
Teste instabile 6 4
Rulări totale 63 63
Cost per rezultat 2.498 0.969
Cost total $0.275 $0.107
Preț de intrare $0.740 / 1M $0.200 / 1M
Preț de ieșire $2.960 / 1M $1.250 / 1M
Total tokenuri de intrare 42,750 35,434
Tokenuri de ieșire 2,098 3,014
Tokenuri de raționament 80,027 76,520
Timp de răspuns (mediu) 12.95s 11.95s
Timp de răspuns (maxim) 81.45s 94.06s
Timp de răspuns (total) 271.92s 250.98s

Prezentare generare

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#60 KAT-Coder-Pro V2.5

medium
Cost
$0.009
Timp
25.6s
Tokenuri
2,939 tok

#62 GPT-5.4 Nano

medium
Cost
$0.007
Timp
24.6s
Tokenuri
4,943 tok

Top modele după scor

Scor vs cost total

Timp de răspuns (mediu)

Scor vs Timp de răspuns (mediu)

Total tokenuri de ieșire

Scor vs Total tokenuri de ieșire

Defalcare pe categorii

Programare Scor Consistență Rată de trecere pe încercare Teste instabile Teste corecte Timp de răspuns (mediu) Tokenuri de intrare Tokenuri de ieșire Tokenuri de raționament
KAT-Coder-Pro V2.5 7.8 10.0 66.7% 0 33.10s 7,893 416 33,658
GPT-5.4 Nano 6.1 4.7 66.7% 2 19.12s 7,305 516 20,778

Comparație rapidă

Schimbă perechea de comparație