Navigasi
AI BENCHY
Advertise here

KAT-Coder-Air V2.5 (high) vs Nemotron 3.5 Lightning (high)

KAT-Coder-Air V2.5 (high) unggul dalam skor rata-rata dengan 5.6 vs 5.6. KAT-Coder-Air V2.5 (high) memiliki biaya benchmark lebih rendah di $0.077 vs $0.167. KAT-Coder-Air V2.5 (high) lebih cepat di 15.90s vs 57.99s, dengan tingkat keberhasilan 43.9% vs 48.5%.

Benchmark dihasilkan dari suite pengujian AI BENCHY pada: 2026-08-11

Peringkat
#182
Total token output
115,331
Waktu respons (rata-rata)
15.90s
Total Biaya
$0.077
Peringkat
#189
Total token output
647,615
Waktu respons (rata-rata)
57.99s
Total Biaya
$0.167
Model yang direkomendasikan KAT-Coder-Air V2.5 (high)

It has the best score here (5.6), while costing about 2.2x less than Nemotron 3.5 Lightning (high).

Perbandingan terperinci

Metrik KAT-Coder-Air V2.5 KAT-Coder-Air V2.5 high Rilis: 2026-07-14 Nemotron 3.5 Lightning Nemotron 3.5 Lightning high Rilis: 2026-08-11 Tersedia gratis
Skor 5.6 5.6
Peringkat #182 #189
Keandalan 9.9 9.9
Konsistensi 7.7 6.0
Cakupan benchmark 22/22 tes · 66/66 percobaan 22/22 tes · 66/66 percobaan
Tes benar
Tingkat lulus per percobaan 43.9% 48.5%
Tes tidak stabil 6 11
Total Run 66 66
Biaya per hasil 1.097 0.000
Total Biaya $0.077 $0.167
Harga input $0.150 / 1M $0.100 / 1M
Harga output $0.600 / 1M $0.250 / 1M
Total token input 50,470 118,007
Token output 3,957 144,961
Token penalaran 111,374 502,654
Waktu respons (rata-rata) 15.90s 57.99s
Waktu respons (maks) 118.35s 285.26s
Waktu respons (total) 349.71s 1275.68s

Showcase generasi model

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#182 KAT-Coder-Air V2.5

high
SVG tidak valid
Biaya
$0.000
Waktu
300.0s
Token
0 tok

#189 Nemotron 3.5 Lightning

high
Belum ada hasil showcase yang dihasilkan untuk model ini.
Biaya
$0.000
Waktu
-
Token
0 tok

Model teratas berdasarkan skor

Skor vs Total Biaya

Waktu respons (rata-rata)

Skor vs Waktu respons (rata-rata)

Total token output

Skor vs Total token output

Rincian Kategori

Pemrograman Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token input Token output Token penalaran
KAT-Coder-Air V2.5 4.3 7.3 11.1% 1 39.07s 6,948 1,166 55,883
Nemotron 3.5 Lightning 4.4 5.1 33.3% 2 168.41s 7,623 68,533 242,319

Perbandingan Cepat

Ganti Pasangan Perbandingan