Navigasi
AI BENCHY
AD
Track all your projects in one dashboard. Get 📊stats, 🔥heatmaps and 👀recordings in one self-hosted dashboard.
uxwizz.com

AI BENCHY Compare

Anthropic: Claude Opus 4.6 vs Kwaipilot: KAT-Coder-Pro V2.5

Ringkasan

Skor rata-rata hampir imbang di 7.7 vs 7.7. KAT-Coder-Pro V2.5 (high) memiliki biaya benchmark lebih rendah di $0.246 vs $2.053. KAT-Coder-Pro V2.5 (high) lebih cepat di 12.30s vs 25.89s, dengan tingkat keberhasilan 61.9% vs 63.5%.

Model yang direkomendasikanKAT-Coder-Pro V2.5 (high)It has the best score here (7.7), while costing about 8.4x less than Claude Opus 4.6 (medium).

Benchmark dihasilkan dari suite pengujian AI BENCHY pada: 2026-07-14

Metrik Claude Opus 4.6 Claude Opus 4.6 medium Rilis: 2026-02-05 KAT-Coder-Pro V2.5 KAT-Coder-Pro V2.5 high Rilis: 2026-07-14
Skor 7.7 7.7
Peringkat #50 #53
Keandalan 10.0 10.0
Konsistensi 8.8 8.1
Tes benar
Tingkat lulus per percobaan 61.9% 63.5%
Tes tidak stabil 3 5
Total Run 63 63
Biaya per hasil 17.103 2.228
Total Biaya $2.053 $0.246
Harga input $5.000 / 1M $0.740 / 1M
Harga output $25.000 / 1M $2.960 / 1M
Total token input 53,227 42,750
Token output 47,446 2,509
Token penalaran 24,000 69,594
Waktu respons (rata-rata) 25.89s 12.30s
Waktu respons (maks) 83.40s 95.65s
Waktu respons (total) 362.49s 258.34s

Showcase generasi

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#50 Claude Opus 4.6

medium
SVG tidak valid
Biaya
$0.000
Waktu
300.0s
Token
0 tok

#53 KAT-Coder-Pro V2.5

high
Biaya
$0.009
Waktu
26.4s
Token
3,117 tok

Model teratas berdasarkan skor

Skor vs Total Biaya

Waktu respons (rata-rata)

Skor vs Waktu respons (rata-rata)

Total token output

Skor vs Total token output

Rincian Kategori

Pemrograman Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token input Token output Token penalaran
Claude Opus 4.6 5.7 7.1 44.4% 1 30.10s 8,522 13,057 4,121
KAT-Coder-Pro V2.5 6.4 7.9 44.4% 1 22.00s 7,893 422 20,461

Perbandingan Cepat

Ganti Pasangan Perbandingan