Navigasi
AI BENCHY
Advertise here

AI BENCHY Compare

ByteDance Seed: Seed-2.0-Mini vs Kwaipilot: KAT-Coder-Pro V2.5

Ringkasan

KAT-Coder-Pro V2.5 (high) unggul dalam skor rata-rata dengan 7.7 vs 7.4. Seed-2.0-Mini (medium) memiliki biaya benchmark lebih rendah di $0.044 vs $0.246. KAT-Coder-Pro V2.5 (high) lebih cepat di 12.30s vs 80.22s, dengan tingkat keberhasilan 57.1% vs 63.5%.

Model yang direkomendasikanKAT-Coder-Pro V2.5 (high)It has the best score here (7.7), while responding about 6.5x faster than Seed-2.0-Mini (medium).

Benchmark dihasilkan dari suite pengujian AI BENCHY pada: 2026-07-14

Metrik Seed-2.0-Mini Seed-2.0-Mini medium Rilis: 2026-02-14 KAT-Coder-Pro V2.5 KAT-Coder-Pro V2.5 high Rilis: 2026-07-14
Skor 7.4 7.7
Peringkat #66 #53
Keandalan 6.7 10.0
Konsistensi 9.3 8.1
Tes benar
Tingkat lulus per percobaan 57.1% 63.5%
Tes tidak stabil 2 5
Total Run 63 63
Biaya per hasil 0.397 2.228
Total Biaya $0.044 $0.246
Harga input $0.100 / 1M $0.740 / 1M
Harga output $0.400 / 1M $2.960 / 1M
Total token input 41,904 42,750
Token output 2,555 2,509
Token penalaran 95,974 69,594
Waktu respons (rata-rata) 80.22s 12.30s
Waktu respons (maks) 262.83s 95.65s
Waktu respons (total) 1363.72s 258.34s

Showcase generasi

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#66 Seed-2.0-Mini

medium
Biaya
$0.002
Waktu
161.7s
Token
4,379 tok

#53 KAT-Coder-Pro V2.5

high
Biaya
$0.009
Waktu
26.4s
Token
3,117 tok

Model teratas berdasarkan skor

Skor vs Total Biaya

Waktu respons (rata-rata)

Skor vs Waktu respons (rata-rata)

Total token output

Skor vs Total token output

Rincian Kategori

Pemrograman Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token input Token output Token penalaran
Seed-2.0-Mini 5.5 9.8 33.3% 0 220.48s 3,823 464 34,964
KAT-Coder-Pro V2.5 6.4 7.9 44.4% 1 22.00s 7,893 422 20,461

Perbandingan Cepat

Ganti Pasangan Perbandingan