Navigasi
AI BENCHY
Advertise here

AI BENCHY Compare

Google: Gemini 3.1 Flash Lite Preview vs Kwaipilot: KAT-Coder-Pro V2.5

Ringkasan

KAT-Coder-Pro V2.5 (low) unggul dalam skor rata-rata dengan 8.0 vs 7.8. Gemini 3.1 Flash Lite Preview (medium) memiliki biaya benchmark lebih rendah di $0.068 vs $0.220. Gemini 3.1 Flash Lite Preview (medium) lebih cepat di 3.96s vs 10.44s, dengan tingkat keberhasilan 61.9% vs 71.4%.

Model yang direkomendasikanGemini 3.1 Flash Lite Preview (medium)Its score stays close to the best score here (7.8 vs 8.0), while costing about 3.2x less than KAT-Coder-Pro V2.5 (low).

Benchmark dihasilkan dari suite pengujian AI BENCHY pada: 2026-07-14

Metrik Gemini 3.1 Flash Lite Preview Gemini 3.1 Flash Lite Preview medium Rilis: 2026-03-03 KAT-Coder-Pro V2.5 KAT-Coder-Pro V2.5 low Rilis: 2026-07-14
Skor 7.8 8.0
Peringkat #42 #35
Keandalan 10.0 9.9
Konsistensi 10.0 7.3
Tes benar
Tingkat lulus per percobaan 61.9% 71.4%
Tes tidak stabil 0 7
Total Run 63 63
Biaya per hasil 0.523 1.991
Total Biaya $0.068 $0.220
Harga input $0.250 / 1M $0.740 / 1M
Harga output $1.500 / 1M $2.960 / 1M
Total token input 37,786 42,750
Token output 2,210 2,167
Token penalaran 36,744 61,133
Waktu respons (rata-rata) 3.96s 10.44s
Waktu respons (maks) 14.93s 51.34s
Waktu respons (total) 83.06s 219.17s

Showcase generasi

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#42 Gemini 3.1 Flash Lite Preview

medium
Biaya
$0.003
Waktu
5.2s
Token
1,944 tok

#35 KAT-Coder-Pro V2.5

low
Biaya
$0.016
Waktu
47.6s
Token
5,182 tok

Model teratas berdasarkan skor

Skor vs Total Biaya

Waktu respons (rata-rata)

Skor vs Waktu respons (rata-rata)

Total token output

Skor vs Total token output

Rincian Kategori

Pemrograman Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token input Token output Token penalaran
Gemini 3.1 Flash Lite Preview 5.5 10.0 33.3% 0 4.09s 8,126 461 8,597
KAT-Coder-Pro V2.5 7.8 10.0 66.7% 0 24.87s 7,893 402 24,945

Perbandingan Cepat

Ganti Pasangan Perbandingan