Navigare
AI BENCHY
AD
Track all your projects in one dashboard. Get 📊stats, 🔥heatmaps and 👀recordings in one self-hosted dashboard.
uxwizz.com

AI BENCHY Compare

Google: Gemma 4 31B vs Kwaipilot: KAT-Coder-Air V2.5

Rezumat

Gemma 4 31B (medium) conduce la scorul mediu cu 6.3 vs 6.2. Gemma 4 31B (medium) are costul de benchmark mai mic, $0.032 vs $0.064. KAT-Coder-Air V2.5 (high) este mai rapid cu 11.02s vs 56.55s, cu rate de reușită de 69.8% vs 46.0%.

Model recomandatGemma 4 31B (medium)Are cel mai bun scor aici (6.3) și costă de aproximativ 2.0x mai puțin decât KAT-Coder-Air V2.5 (high).

Benchmark-urile au fost generate din suitele de teste AI BENCHY la: 2026-07-14

Metrică Gemma 4 31B Gemma 4 31B medium Lansare: 2026-04-02 Disponibil gratuit KAT-Coder-Air V2.5 KAT-Coder-Air V2.5 high Lansare: 2026-07-14
Scor 6.3 6.2
Rang #107 #110
Fiabilitate 10.0 9.7
Consistență 9.4 7.6
Teste corecte
Rată de trecere pe încercare 69.8% 46.0%
Teste instabile 1 6
Rulări totale 63 63
Cost per rezultat 0.257 0.910
Cost total $0.032 $0.064
Preț de intrare $0.060 / 1M $0.150 / 1M
Preț de ieșire $0.350 / 1M $0.600 / 1M
Total tokenuri de intrare 17,957 41,748
Tokenuri de ieșire 22,356 3,894
Tokenuri de raționament 65,726 91,773
Timp de răspuns (mediu) 56.55s 11.02s
Timp de răspuns (maxim) 437.40s 104.98s
Timp de răspuns (total) 1074.41s 231.37s

Prezentare generare

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#107 Gemma 4 31B

medium
Cost
$0.002
Timp
45.7s
Tokenuri
2,696 tok

#110 KAT-Coder-Air V2.5

high
SVG invalid
Cost
$0.000
Timp
300.0s
Tokenuri
0 tok

Top modele după scor

Scor vs cost total

Timp de răspuns (mediu)

Scor vs Timp de răspuns (mediu)

Total tokenuri de ieșire

Scor vs Total tokenuri de ieșire

Defalcare pe categorii

Programare Scor Consistență Rată de trecere pe încercare Teste instabile Teste corecte Timp de răspuns (mediu) Tokenuri de intrare Tokenuri de ieșire Tokenuri de raționament
Gemma 4 31B 4.3 5.8 22.2% 1 219.76s 5,568 11,098 33,212
KAT-Coder-Air V2.5 4.3 7.3 11.1% 1 39.07s 6,948 1,166 55,883

Comparație rapidă

Schimbă perechea de comparație