Navigare
AI BENCHY
Advertise here

AI BENCHY Compare

Google: Gemini 3.1 Flash Lite Preview vs Kwaipilot: KAT-Coder-Air V2.5

Rezumat

Gemini 3.1 Flash Lite Preview conduce la scorul mediu cu 6.4 vs 6.2. Gemini 3.1 Flash Lite Preview are costul de benchmark mai mic, $0.018 vs $0.064. Gemini 3.1 Flash Lite Preview este mai rapid cu 1.21s vs 11.02s, cu rate de reușită de 60.3% vs 46.0%.

Model recomandatGemini 3.1 Flash Lite PreviewAre cel mai bun scor aici (6.4) și costă de aproximativ 3.6x mai puțin decât KAT-Coder-Air V2.5 (high).

Benchmark-urile au fost generate din suitele de teste AI BENCHY la: 2026-07-14

Metrică Gemini 3.1 Flash Lite Preview Gemini 3.1 Flash Lite Preview none Lansare: 2026-03-03 KAT-Coder-Air V2.5 KAT-Coder-Air V2.5 high Lansare: 2026-07-14
Scor 6.4 6.2
Rang #102 #110
Fiabilitate 10.0 9.7
Consistență 9.7 7.6
Teste corecte
Rată de trecere pe încercare 60.3% 46.0%
Teste instabile 1 6
Rulări totale 63 63
Cost per rezultat 0.148 0.910
Cost total $0.018 $0.064
Preț de intrare $0.250 / 1M $0.150 / 1M
Preț de ieșire $1.500 / 1M $0.600 / 1M
Total tokenuri de intrare 37,582 41,748
Tokenuri de ieșire 5,547 3,894
Tokenuri de raționament 0 91,773
Timp de răspuns (mediu) 1.21s 11.02s
Timp de răspuns (maxim) 3.39s 104.98s
Timp de răspuns (total) 25.45s 231.37s

Prezentare generare

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#102 Gemini 3.1 Flash Lite Preview

none
Cost
$0.003
Timp
4.7s
Tokenuri
1,827 tok

#110 KAT-Coder-Air V2.5

high
SVG invalid
Cost
$0.000
Timp
300.0s
Tokenuri
0 tok

Top modele după scor

Scor vs cost total

Timp de răspuns (mediu)

Scor vs Timp de răspuns (mediu)

Total tokenuri de ieșire

Scor vs Total tokenuri de ieșire

Defalcare pe categorii

Programare Scor Consistență Rată de trecere pe încercare Teste instabile Teste corecte Timp de răspuns (mediu) Tokenuri de intrare Tokenuri de ieșire Tokenuri de raționament
Gemini 3.1 Flash Lite Preview 5.5 10.0 33.3% 0 967ms 8,128 670 0
KAT-Coder-Air V2.5 4.3 7.3 11.1% 1 39.07s 6,948 1,166 55,883

Comparație rapidă

Schimbă perechea de comparație