#126 KAT-Coder-Pro V2.5
medium- Biaya
- $0.009
- Waktu
- 25.6s
- Token
- 2,939 tok
Ringkasan
KAT-Coder-Pro V2.5 mendapat skor 6.9 di AI BENCHY dan berada di peringkat #126. Model ini memiliki reliabilitas 10.0, tingkat keberhasilan 65.2%, total biaya $0.478, dan waktu respons rata-rata 24.87s.
Yang membuat KAT-Coder-Pro V2.5 unik: Model ini paling menonjol di Pemrograman, dengan peringkat #4, sementara Parsing dan ekstraksi data adalah area terlemahnya di #14.
Ditelaah pada 2026-08-12
Perkiraan terbaik berdasarkan bukti publik; penyedia tidak mengungkapkan semua nilai.
6.9
Konsistensi
7.0
10.0
$0.478
Total token output
139,375
Total token input
87,916
Harga input
$0.740 / 1M
Harga output
$2.960 / 1M
Tes tidak stabil
8
Tes tidak stabil memiliki hasil campuran antar run (setidaknya satu lulus dan satu gagal).
Prompt: Create a detailed SVG illustration of a hamster playing table tennis.
Riwayat run
| Diuji pada | Skor | Keandalan | Tes benar | Total Biaya | Bandingkan |
|---|---|---|---|---|---|
| 2026-08-14 03:24 Uji ulang | 6.9 | 10.0 | $0.478 | Run saat ini | |
| 2026-07-16 23:47 Tes baru ditambahkan | 6.9 | 10.0 | $0.467 | Bandingkan | |
| 2026-07-14 11:05 Run awal | 7.5 | 10.0 | $0.275 | Bandingkan |
Run ini menggunakan suite benchmark yang berbeda. Perhatikan perubahan suite saat membaca pergerakan historis.
Perbandingan run
| Run | Cakupan benchmark | Skor | Konsistensi | Keandalan | Tes benar | Tes tidak stabil | Total token output | Total token input | Total Biaya | Waktu respons (rata-rata) |
|---|---|---|---|---|---|---|---|---|---|---|
| 2026-08-14 03:24 · Run saat ini | 66/66 percobaan | 6.9 | 7.0 | 10.0 | 11/22 | 8 | 139,375 | 87,916 | $0.478 | 24.87s |
| 2026-07-16 23:47 · Tes baru ditambahkan | 66/66 percobaan | 6.9 | 7.4 | 10.0 | 11/22 | 7 | 135,464 | 87,907 | $0.467 | 24.04s |
| Selisih | — | 0.0 | -0.4 | 0.0 | 0 | +1 | +3911 | +9 | +$0.012 | +828ms |
Kedua run ini menggunakan suite benchmark yang berbeda, jadi selisihnya mencerminkan perubahan model sekaligus perubahan suite.
Riwayat harga
Data harga historis untuk model ini dari OpenRouter.
| Tanggal | Harga input | Harga output |
|---|---|---|
| 2026-08-14 12:51 | $0.740 / 1M | $2.960 / 1M |
Pilih model pertama, lalu klik model kedua untuk membuka halaman berdampingan.
| Kategori | Skor | Konsistensi | Tes benar |
|---|---|---|---|
| Trik anti-AI | 8.2 | 7.9 | |
| Pemrograman | 7.8 | 10.0 | |
| Gabungan | 6.4 | 5.8 | |
| Parsing dan ekstraksi data | 7.3 | 5.9 | |
| Spesifik domain | 2.9 | 4.4 | |
| Kecerdasan umum | 4.7 | 3.1 | |
| Kepatuhan instruksi | 9.9 | 10.0 | |
| Pemecahan teka-teki | 5.9 | 4.5 | |
| Pemanggilan alat | 10.0 | 10.0 | |
| Pengetahuan umum | 3.0 | 10.0 |