Navigasi
AI BENCHY
Advertise here

KAT-Coder-Air V2.5 (low) vs Nemotron 3.5 Lightning (high)

Nemotron 3.5 Lightning (high) unggul dalam skor rata-rata dengan 5.6 vs 5.4. KAT-Coder-Air V2.5 (low) memiliki biaya benchmark lebih rendah di $0.046 vs $0.134. KAT-Coder-Air V2.5 (low) lebih cepat di 10.63s vs 58.26s, dengan tingkat keberhasilan 43.9% vs 50.0%.

Benchmark dihasilkan dari suite pengujian AI BENCHY pada: 2026-08-26

Peringkat
#223
Total token output
60,414
Waktu respons (rata-rata)
10.63s
Total Biaya
$0.046
Peringkat
#216
Total token output
654,597
Waktu respons (rata-rata)
58.26s
Total Biaya
$0.134
Model yang direkomendasikan KAT-Coder-Air V2.5 (low)

Its score stays close to the best score here (5.4 vs 5.6), while costing about 2.9x less than Nemotron 3.5 Lightning (high).

Perbandingan terperinci

Metrik KAT-Coder-Air V2.5 KAT-Coder-Air V2.5 low Rilis: 2026-07-14 Nemotron 3.5 Lightning Nemotron 3.5 Lightning high Rilis: 2026-08-11 Tersedia gratis
Skor 5.4 5.6
Peringkat #223 #216
Keandalan 9.9 9.9
Konsistensi 7.8 5.6
Percobaan 66/66 66/66
Tes benar
Tingkat lulus per percobaan 43.9% 50.0%
Tes tidak stabil 6 12
Total Run 66 66
Biaya per hasil 0.649 0.000
Total Biaya $0.046 $0.134
Harga input $0.150 / 1M $0.080 / 1M
Harga output $0.600 / 1M $0.200 / 1M
Total token input 61,094 118,016
Token output 6,532 148,344
Token penalaran 53,882 506,253
Waktu respons (rata-rata) 10.63s 58.26s
Waktu respons (maks) 86.23s 285.26s
Waktu respons (total) 233.77s 1281.79s
Parameter ~35B total (~3B aktif) 30B total (3B aktif)
Ketersediaan Tertutup Bobot tersedia

Showcase generasi model

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#223 KAT-Coder-Air V2.5

low
Biaya
$0.004
Waktu
29.9s
Token
6,008 tok

#216 Nemotron 3.5 Lightning

high
Biaya
$0.000
Waktu
92.8s
Token
11,343 tok

Model teratas berdasarkan skor

Skor vs Total Biaya

Waktu respons (rata-rata)

Skor vs Waktu respons (rata-rata)

Total token output

Skor vs Total token output

Rincian Kategori

Pemrograman Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token input Token output Token penalaran
KAT-Coder-Air V2.5 3.5 7.3 11.1% 1 11.06s 7,893 2,001 13,623
Nemotron 3.5 Lightning 4.4 5.1 33.3% 2 168.41s 7,623 68,533 242,319

Perbandingan Cepat

Ganti Pasangan Perbandingan