Navigasi
AI BENCHY
Advertise here

AI BENCHY Compare

NVIDIA: Nemotron 3 Super vs xAI: Grok 4.20

Benchmark dihasilkan dari suite pengujian AI BENCHY pada: 2026-05-10

Metrik Nemotron 3 Super Nemotron 3 Super medium Rilis: 2026-03-11 Tersedia gratis Grok 4.20 Grok 4.20 none Rilis: 2026-03-31
Skor 6.1 5.4
Peringkat #87 #115
Keandalan 10.0 T/A
Konsistensi 8.8 9.5
Tes benar
Tingkat lulus per percobaan 47.4% 35.2%
Tes tidak stabil 3 1
Total Run 57 54
Biaya per hasil 0.004 1.574
Total Biaya $0.001 $0.095
Harga input $0.090 / 1M $1.250 / 1M
Harga output $0.450 / 1M $2.500 / 1M
Token output 14,098 1,967
Token penalaran 29,580 0
Waktu respons (rata-rata) 18.72s 1.11s
Waktu respons (maks) 87.80s 6.04s
Waktu respons (total) 318.29s 20.02s

Model teratas berdasarkan skor

Skor vs Total Biaya

Waktu respons (rata-rata)

Skor vs Waktu respons (rata-rata)

Total token output

Skor vs Total token output

Rincian Kategori

Trik anti-AI Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token output Token penalaran
Nemotron 3 Super 8.3 10.0 75.0% 0 7.85s 748 1,305
Grok 4.20 4.8 10.0 25.0% 0 501ms 267 0
Pemrograman Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token output Token penalaran
Nemotron 3 Super 3.0 10.0 0.0% 0 0ms 0 0
Grok 4.20 3.4 9.3 0.0% 0 1.22s 312 0
Gabungan Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token output Token penalaran
Nemotron 3 Super 10.0 10.0 100.0% 0 87.80s 2,021 9,996
Grok 4.20 3.0 10.0 0.0% 0 6.04s 282 0
Parsing dan ekstraksi data Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token output Token penalaran
Nemotron 3 Super 10.0 10.0 100.0% 0 18.16s 877 2,607
Grok 4.20 10.0 10.0 100.0% 0 522ms 207 0
Spesifik domain Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token output Token penalaran
Nemotron 3 Super 2.9 4.4 22.2% 2 16.19s 5,255 6,072
Grok 4.20 3.0 10.0 0.0% 0 687ms 325 0
Kecerdasan umum Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token output Token penalaran
Nemotron 3 Super 4.1 10.0 0.0% 0 6.91s 105 363
Grok 4.20 4.8 10.0 0.0% 0 659ms 83 0
Kepatuhan instruksi Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token output Token penalaran
Nemotron 3 Super 7.2 6.6 66.7% 1 7.72s 1,042 2,479
Grok 4.20 6.3 10.0 50.0% 0 455ms 60 0
Pemecahan teka-teki Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token output Token penalaran
Nemotron 3 Super 3.1 10.0 0.0% 0 4.32s 529 1,476
Grok 4.20 5.3 7.2 44.4% 1 487ms 242 0
Pemanggilan alat Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token output Token penalaran
Nemotron 3 Super 10.0 10.0 100.0% 0 39.75s 270 1,969
Grok 4.20 10.0 10.0 100.0% 0 4.63s 189 0
Pengetahuan umum Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token output Token penalaran
Nemotron 3 Super 3.0 10.0 0.0% 0 55.32s 3,251 3,313
Grok 4.20 - - - - - - - -

Perbandingan Cepat

Ganti Pasangan Perbandingan