Navigare
AI BENCHY
Advertise here

AI BENCHY Compare

Kwaipilot: KAT-Coder-Air V2.5 vs Kwaipilot: KAT-Coder-Air V2.5

Rezumat

KAT-Coder-Air V2.5 (high) conduce la scorul mediu cu 6.2 vs 6.0. KAT-Coder-Air V2.5 (low) are costul de benchmark mai mic, $0.030 vs $0.064. KAT-Coder-Air V2.5 (low) este mai rapid cu 6.47s vs 11.02s, cu rate de reușită de 46.0% vs 46.0%.

Model recomandatKAT-Coder-Air V2.5 (low)Scorul rămâne aproape de cel mai bun scor de aici (6.0 vs 6.2) și costă de aproximativ 2.1x mai puțin decât KAT-Coder-Air V2.5 (high).

Benchmark-urile au fost generate din suitele de teste AI BENCHY la: 2026-07-14

Metrică KAT-Coder-Air V2.5 KAT-Coder-Air V2.5 high Lansare: 2026-07-14 KAT-Coder-Air V2.5 KAT-Coder-Air V2.5 low Lansare: 2026-07-14
Scor 6.2 6.0
Rang #110 #124
Fiabilitate 9.7 9.7
Consistență 7.6 7.6
Teste corecte
Rată de trecere pe încercare 46.0% 46.0%
Teste instabile 6 6
Rulări totale 63 63
Cost per rezultat 0.910 0.427
Cost total $0.064 $0.030
Preț de intrare $0.150 / 1M $0.150 / 1M
Preț de ieșire $0.600 / 1M $0.600 / 1M
Total tokenuri de intrare 41,748 42,464
Tokenuri de ieșire 3,894 4,227
Tokenuri de raționament 91,773 34,864
Timp de răspuns (mediu) 11.02s 6.47s
Timp de răspuns (maxim) 104.98s 25.49s
Timp de răspuns (total) 231.37s 135.80s

Prezentare generare

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#110 KAT-Coder-Air V2.5

high
SVG invalid
Cost
$0.000
Timp
300.0s
Tokenuri
0 tok

#124 KAT-Coder-Air V2.5

low
Cost
$0.004
Timp
29.9s
Tokenuri
6,008 tok

Top modele după scor

Scor vs cost total

Timp de răspuns (mediu)

Scor vs Timp de răspuns (mediu)

Total tokenuri de ieșire

Scor vs Total tokenuri de ieșire

Defalcare pe categorii

Programare Scor Consistență Rată de trecere pe încercare Teste instabile Teste corecte Timp de răspuns (mediu) Tokenuri de intrare Tokenuri de ieșire Tokenuri de raționament
KAT-Coder-Air V2.5 4.3 7.3 11.1% 1 39.07s 6,948 1,166 55,883
KAT-Coder-Air V2.5 3.5 7.3 11.1% 1 11.06s 7,893 2,001 13,623

Comparație rapidă

Schimbă perechea de comparație