Navigasi
AI BENCHY
Advertise here

AI BENCHY Compare

ByteDance Seed: Seed-2.0-Lite vs Nemotron 3 Ultra 550b A55b

Ringkasan

Perbandingan benchmark Seed-2.0-Lite vs Nemotron 3 Ultra 550b A55b: Seed-2.0-Lite unggul dalam skor rata-rata dengan 8.2 vs 7.5. Seed-2.0-Lite memiliki biaya benchmark lebih rendah di $0.175 vs $0.177. Nemotron 3 Ultra 550b A55b lebih cepat di 15.05s vs 47.07s, dengan tingkat keberhasilan 76.2% vs 69.8%.

Model yang direkomendasikan: Nemotron 3 Ultra 550b A55b - Its score stays close to the best score here (7.5 vs 8.2), while responding about 3.1x faster than Seed-2.0-Lite.

Benchmark dihasilkan dari suite pengujian AI BENCHY pada: 2026-06-10

Metrik Seed-2.0-Lite Seed-2.0-Lite medium Rilis: 2026-02-14 Nemotron 3 Ultra 550b A55b Nemotron 3 Ultra 550b A55b medium Rilis: 2026-06-04 Tersedia gratis
Skor 8.2 7.5
Peringkat #20 #42
Keandalan 10.0 9.7
Konsistensi 9.0 8.8
Tes benar
Tingkat lulus per percobaan 76.2% 69.8%
Tes tidak stabil 3 3
Total Run 63 63
Biaya per hasil 1.250 0.000
Total Biaya $0.175 $0.177
Harga input $0.250 / 1M $0.500 / 1M
Harga output $2.000 / 1M $2.500 / 1M
Total token input 46,740 46,813
Token output 3,230 18,002
Token penalaran 78,406 53,091
Waktu respons (rata-rata) 47.07s 15.05s
Waktu respons (maks) 254.92s 43.93s
Waktu respons (total) 988.37s 316.09s

Generation showcase

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#20 Seed-2.0-Lite

medium
Cost
$0.005
Time
86.7s
Tokens
2,354 tok

#42 Nemotron 3 Ultra 550b A55b

medium
No showcase result has been generated for this model yet.
Cost
$0.000
Time
-
Tokens
0 tok

Model teratas berdasarkan skor

Skor vs Total Biaya

Waktu respons (rata-rata)

Skor vs Waktu respons (rata-rata)

Total token output

Skor vs Total token output

Rincian Kategori

Trik anti-AI Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token input Token output Token penalaran
Seed-2.0-Lite 8.3 10.0 75.0% 0 17.99s 942 996 7,142
Nemotron 3 Ultra 550b A55b 10.0 10.0 100.0% 0 8.62s 780 835 1,485
Pemrograman Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token input Token output Token penalaran
Seed-2.0-Lite 8.0 9.8 66.7% 0 156.74s 8,247 458 31,890
Nemotron 3 Ultra 550b A55b 8.4 7.4 88.9% 1 26.53s 7,686 2,854 17,725
Gabungan Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token input Token output Token penalaran
Seed-2.0-Lite 10.0 10.0 100.0% 0 37.67s 16,254 506 4,299
Nemotron 3 Ultra 550b A55b 9.8 10.0 100.0% 0 43.93s 17,574 1,040 3,590
Parsing dan ekstraksi data Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token input Token output Token penalaran
Seed-2.0-Lite 10.0 10.0 100.0% 0 9.07s 8,562 246 1,742
Nemotron 3 Ultra 550b A55b 10.0 10.0 100.0% 0 5.68s 7,989 473 1,285
Spesifik domain Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token input Token output Token penalaran
Seed-2.0-Lite 5.9 7.2 55.6% 1 88.74s 843 15 23,897
Nemotron 3 Ultra 550b A55b 3.5 4.4 33.3% 2 24.90s 858 11,169 16,249
Kecerdasan umum Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token input Token output Token penalaran
Seed-2.0-Lite 6.7 3.6 66.7% 1 18.25s 582 304 1,620
Nemotron 3 Ultra 550b A55b 3.7 9.5 0.0% 0 2.52s 360 70 235
Kepatuhan instruksi Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token input Token output Token penalaran
Seed-2.0-Lite 10.0 10.0 100.0% 0 7.26s 834 71 1,480
Nemotron 3 Ultra 550b A55b 9.8 10.0 100.0% 0 6.35s 765 182 1,243
Pemecahan teka-teki Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token input Token output Token penalaran
Seed-2.0-Lite 9.0 7.9 88.9% 1 10.23s 894 403 3,285
Nemotron 3 Ultra 550b A55b 5.5 9.9 33.3% 0 3.54s 792 771 2,055
Pemanggilan alat Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token input Token output Token penalaran
Seed-2.0-Lite 10.0 10.0 100.0% 0 12.38s 9,306 222 1,011
Nemotron 3 Ultra 550b A55b 10.0 10.0 100.0% 0 7.72s 9,781 304 984
Pengetahuan umum Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token input Token output Token penalaran
Seed-2.0-Lite 3.0 10.0 0.0% 0 48.32s 276 9 2,040
Nemotron 3 Ultra 550b A55b 3.0 10.0 0.0% 0 38.47s 228 304 8,240

Perbandingan Cepat

Ganti Pasangan Perbandingan