Navigare
AI BENCHY
AD
Track all your projects in one dashboard. Get 📊stats, 🔥heatmaps and 👀recordings in one self-hosted dashboard.
uxwizz.com

AI BENCHY Compare

Google: Gemini 3.5 Flash vs Kwaipilot: KAT-Coder-Pro V2.5

Rezumat

Scorul mediu este practic egal la 6.8 vs 6.8. Gemini 3.5 Flash (minimal) are costul de benchmark mai mic, $0.108 vs $0.220. Gemini 3.5 Flash (minimal) este mai rapid cu 1.57s vs 10.81s, cu rate de reușită de 68.3% vs 71.4%.

Model recomandatGemini 3.5 Flash (minimal)Are cel mai bun scor aici (6.8) și costă de aproximativ 2.0x mai puțin decât KAT-Coder-Pro V2.5.

Benchmark-urile au fost generate din suitele de teste AI BENCHY la: 2026-07-14

Metrică Gemini 3.5 Flash Gemini 3.5 Flash minimal Lansare: 2026-05-19 KAT-Coder-Pro V2.5 KAT-Coder-Pro V2.5 none Lansare: 2026-07-14
Scor 6.8 6.8
Rang #88 #89
Fiabilitate 10.0 10.0
Consistență 9.6 7.3
Teste corecte
Rată de trecere pe încercare 68.3% 71.4%
Teste instabile 1 7
Rulări totale 63 63
Cost per rezultat 0.767 1.992
Cost total $0.108 $0.220
Preț de intrare $1.500 / 1M $0.740 / 1M
Preț de ieșire $9.000 / 1M $2.960 / 1M
Total tokenuri de intrare 39,847 42,749
Tokenuri de ieșire 5,277 63,338
Tokenuri de raționament 0 0
Timp de răspuns (mediu) 1.57s 10.81s
Timp de răspuns (maxim) 5.51s 53.57s
Timp de răspuns (total) 33.02s 227.02s

Prezentare generare

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#88 Gemini 3.5 Flash

minimal
Cost
$0.041
Timp
20.4s
Tokenuri
4,608 tok

#89 KAT-Coder-Pro V2.5

none
Cost
$0.010
Timp
29.0s
Tokenuri
3,439 tok

Top modele după scor

Scor vs cost total

Timp de răspuns (mediu)

Scor vs Timp de răspuns (mediu)

Total tokenuri de ieșire

Scor vs Total tokenuri de ieșire

Defalcare pe categorii

Programare Scor Consistență Rată de trecere pe încercare Teste instabile Teste corecte Timp de răspuns (mediu) Tokenuri de intrare Tokenuri de ieșire Tokenuri de raționament
Gemini 3.5 Flash 5.6 9.9 33.3% 0 2.75s 8,122 3,456 0
KAT-Coder-Pro V2.5 6.1 4.7 66.7% 2 22.52s 7,893 22,440 0

Comparație rapidă

Schimbă perechea de comparație