Navigasi
AI BENCHY
Advertise here

AI BENCHY Compare

Kwaipilot: KAT-Coder-Pro V2.5 vs xAI: Grok 4.5

Ringkasan

Grok 4.5 (low) unggul dalam skor rata-rata dengan 7.8 vs 7.5. KAT-Coder-Pro V2.5 (medium) memiliki biaya benchmark lebih rendah di $0.275 vs $0.760. KAT-Coder-Pro V2.5 (medium) lebih cepat di 12.95s vs 15.48s, dengan tingkat keberhasilan 65.1% vs 74.6%.

Model yang direkomendasikanKAT-Coder-Pro V2.5 (medium)Its score stays close to the best score here (7.5 vs 7.8), while costing about 2.8x less than Grok 4.5 (low).

Benchmark dihasilkan dari suite pengujian AI BENCHY pada: 2026-07-14

Metrik KAT-Coder-Pro V2.5 KAT-Coder-Pro V2.5 medium Rilis: 2026-07-14 Grok 4.5 Grok 4.5 low Rilis: 2026-07-08
Skor 7.5 7.8
Peringkat #60 #41
Keandalan 10.0 10.0
Konsistensi 7.7 9.7
Tes benar
Tingkat lulus per percobaan 65.1% 74.6%
Tes tidak stabil 6 1
Total Run 63 63
Biaya per hasil 2.498 5.061
Total Biaya $0.275 $0.760
Harga input $0.740 / 1M $2.000 / 1M
Harga output $2.960 / 1M $6.000 / 1M
Total token input 42,750 58,652
Token output 2,098 1,735
Token penalaran 80,027 105,233
Waktu respons (rata-rata) 12.95s 15.48s
Waktu respons (maks) 81.45s 205.28s
Waktu respons (total) 271.92s 324.98s

Showcase generasi

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#60 KAT-Coder-Pro V2.5

medium
Biaya
$0.009
Waktu
25.6s
Token
2,939 tok

#41 xAI: Grok 4.5

low
Biaya
$0.011
Waktu
12.4s
Token
2,018 tok

Model teratas berdasarkan skor

Skor vs Total Biaya

Waktu respons (rata-rata)

Skor vs Waktu respons (rata-rata)

Total token output

Skor vs Total token output

Rincian Kategori

Pemrograman Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token input Token output Token penalaran
KAT-Coder-Pro V2.5 7.8 10.0 66.7% 0 33.10s 7,893 416 33,658
Grok 4.5 10.0 10.0 100.0% 0 13.72s 9,579 303 15,641

Perbandingan Cepat

Ganti Pasangan Perbandingan