AI BENCHY Compare

MoonshotAI: Kimi K3 vs Nemotron 3 Ultra 550b A55b

Ringkasan

Kimi K3 (max) unggul dalam skor rata-rata dengan 8.5 vs 8.1. Nemotron 3 Ultra 550b A55b (medium) memiliki biaya benchmark lebih rendah di $0.249 vs $3.112. Nemotron 3 Ultra 550b A55b (medium) lebih cepat di 15.05s vs 122.48s, dengan tingkat keberhasilan 82.5% vs 69.8%.

Model yang direkomendasikanNemotron 3 Ultra 550b A55b (medium)Its score stays close to the best score here (8.1 vs 8.5), while costing about 12.5x less than Kimi K3 (max).

Benchmark dihasilkan dari suite pengujian AI BENCHY pada: 2026-07-16

Metrik	Kimi K3 Kimi K3 max Rilis: 2026-07-16	Nemotron 3 Ultra 550b A55b Nemotron 3 Ultra 550b A55b medium Rilis: 2026-06-04 Tersedia gratis

Metrik	Kimi K3 Kimi K3 max Rilis: 2026-07-16	Nemotron 3 Ultra 550b A55b Nemotron 3 Ultra 550b A55b medium Rilis: 2026-06-04 Tersedia gratis
Skor	8.5	8.1
Peringkat	#21	#34
Keandalan	9.4	9.7
Konsistensi	9.2	8.8
Tes benar
Tingkat lulus per percobaan	82.5%	69.8%
Tes tidak stabil	2	3
Total Run	63	63
Biaya per hasil	19.446	0.000
Total Biaya	$3.112	$0.249
Harga input	$3.000 / 1M	$0.600 / 1M
Harga output	$15.000 / 1M	$3.600 / 1M
Total token input	34,916	46,813
Token output	2,910	18,002
Token penalaran	197,529	53,091
Waktu respons (rata-rata)	122.48s	15.05s
Waktu respons (maks)	766.58s	43.93s
Waktu respons (total)	2327.06s	316.09s

Showcase generasi

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#21 MoonshotAI: Kimi K3

max

Biaya: $0.281
Waktu: 506.9s
Token: 18,863 tok

#34 Nemotron 3 Ultra 550b A55b

medium

SVG tidak valid

Biaya: $0.000
Waktu: 300.0s
Token: 0 tok

Model teratas berdasarkan skor

Skor vs Total Biaya

Waktu respons (rata-rata)

Skor vs Waktu respons (rata-rata)

Total token output

Skor vs Total token output

Rincian Kategori

Kategori:

Trik anti-AI	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Kimi K3	10.0	10.0	100.0%	0		10.24s	1,638	496	2,629
Nemotron 3 Ultra 550b A55b	10.0	10.0	100.0%	0		8.62s	780	835	1,485

Pemrograman	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Kimi K3	10.0	10.0	100.0%	0		325.79s	8,061	460	84,012
Nemotron 3 Ultra 550b A55b	8.4	7.4	88.9%	1		26.53s	7,686	2,854	17,725

Gabungan	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Kimi K3	10.0	10.0	100.0%	0		223.03s	12,792	399	20,460
Nemotron 3 Ultra 550b A55b	9.8	10.0	100.0%	0		43.93s	17,574	1,040	3,590

Parsing dan ekstraksi data	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Kimi K3	7.3	5.8	83.3%	1		16.72s	7,839	354	2,606
Nemotron 3 Ultra 550b A55b	10.0	10.0	100.0%	0		5.68s	7,989	473	1,285

Spesifik domain	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Kimi K3	5.9	7.2	55.6%	1		490.14s	794	80	83,180
Nemotron 3 Ultra 550b A55b	3.5	4.4	33.3%	2		24.90s	858	11,169	16,249

Kecerdasan umum	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Kimi K3	10.0	10.0	100.0%	0		14.91s	732	191	871
Nemotron 3 Ultra 550b A55b	3.7	9.5	0.0%	0		2.52s	360	70	235

Kepatuhan instruksi	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Kimi K3	10.0	10.0	100.0%	0		7.66s	1,179	147	1,119
Nemotron 3 Ultra 550b A55b	9.8	10.0	100.0%	0		6.35s	765	182	1,243

Pemecahan teka-teki	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Kimi K3	10.0	10.0	100.0%	0		7.36s	1,416	495	1,368
Nemotron 3 Ultra 550b A55b	5.5	9.9	33.3%	0		3.54s	792	771	2,055

Pemanggilan alat	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Kimi K3	3.0	10.0	0.0%	0		0ms	0	0	0
Nemotron 3 Ultra 550b A55b	10.0	10.0	100.0%	0		7.72s	9,781	304	984

Pengetahuan umum	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Kimi K3	3.0	10.0	0.0%	0		19.67s	465	288	1,284
Nemotron 3 Ultra 550b A55b	3.0	10.0	0.0%	0		38.47s	228	304	8,240

Perbandingan Cepat

Ganti Pasangan Perbandingan

Kimi K3maxvsGPT-5 Minimedium Kimi K3maxvsGLM 5medium Kimi K3maxvsGPT-5.4medium Nemotron 3 Ultra 550b A55bmediumTersedia gratisvsGPT-5.6 Terrahigh Seed-2.0-LitemediumvsKimi K3max Kimi K3maxvsGPT-5.2 Chatnone Kimi K3maxvsStep 3.7 Flashmedium Nemotron 3 Ultra 550b A55bmediumTersedia gratisvsGLM 5.2high Kimi K3maxvsGLM 5.2medium DeepSeek V4 FlashhighvsNemotron 3 Ultra 550b A55bmediumTersedia gratis Kimi K3maxvsGPT-5.2medium KAT-Coder-Pro V2.5lowvsNemotron 3 Ultra 550b A55bmediumTersedia gratis