Navigasi
AI BENCHY
Advertise here

AI BENCHY Compare

Anthropic: Claude Opus 4.8 vs Kwaipilot: KAT-Coder-Pro V2.5

Ringkasan

Claude Opus 4.8 (low) unggul dalam skor rata-rata dengan 7.7 vs 7.7. KAT-Coder-Pro V2.5 (high) memiliki biaya benchmark lebih rendah di $0.246 vs $1.270. Claude Opus 4.8 (low) lebih cepat di 10.83s vs 12.30s, dengan tingkat keberhasilan 79.4% vs 63.5%.

Model yang direkomendasikanKAT-Coder-Pro V2.5 (high)Its score stays close to the best score here (7.7 vs 7.7), while costing about 5.2x less than Claude Opus 4.8 (low).

Benchmark dihasilkan dari suite pengujian AI BENCHY pada: 2026-07-14

Metrik Claude Opus 4.8 Claude Opus 4.8 low Rilis: 2026-05-28 KAT-Coder-Pro V2.5 KAT-Coder-Pro V2.5 high Rilis: 2026-07-14
Skor 7.7 7.7
Peringkat #47 #53
Keandalan 10.0 10.0
Konsistensi 8.8 8.1
Tes benar
Tingkat lulus per percobaan 79.4% 63.5%
Tes tidak stabil 3 5
Total Run 63 63
Biaya per hasil 8.466 2.228
Total Biaya $1.270 $0.246
Harga input $5.000 / 1M $0.740 / 1M
Harga output $25.000 / 1M $2.960 / 1M
Total token input 60,946 42,750
Token output 31,771 2,509
Token penalaran 6,831 69,594
Waktu respons (rata-rata) 10.83s 12.30s
Waktu respons (maks) 127.97s 95.65s
Waktu respons (total) 227.39s 258.34s

Showcase generasi

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#47 Claude Opus 4.8

low
Biaya
$0.031
Waktu
14.1s
Token
1,345 tok

#53 KAT-Coder-Pro V2.5

high
Biaya
$0.009
Waktu
26.4s
Token
3,117 tok

Model teratas berdasarkan skor

Skor vs Total Biaya

Waktu respons (rata-rata)

Skor vs Waktu respons (rata-rata)

Total token output

Skor vs Total token output

Rincian Kategori

Pemrograman Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token input Token output Token penalaran
Claude Opus 4.8 6.6 4.6 77.8% 2 7.58s 10,590 3,637 809
KAT-Coder-Pro V2.5 6.4 7.9 44.4% 1 22.00s 7,893 422 20,461

Perbandingan Cepat

Ganti Pasangan Perbandingan