Navigasi
AI BENCHY
Your ad here

AI BENCHY Compare

ByteDance Seed: Seed-2.0-Lite vs Google: Gemma 4 31B

Benchmark dihasilkan dari suite pengujian AI BENCHY pada: 2026-04-02

Metrik Seed-2.0-Lite Seed-2.0-Lite medium Rilis: 2026-02-14 Gemma 4 31B Gemma 4 31B none Rilis: 2026-04-02
Skor 8.5 6.7
Peringkat #6 #47
Konsistensi 8.8 10.0
Tes benar
Tingkat lulus per percobaan 82.4% 52.9%
Tes tidak stabil 3 0
Total Run 51 51
Biaya per hasil 0.873 0.023
Total Biaya $0.105 $0.002
Harga input $0.250 / 1M $0.140 / 1M
Harga output $2.000 / 1M $0.400 / 1M
Token output 2,821 660
Token penalaran 44,723 0
Waktu respons (rata-rata) 27.78s 2.55s
Waktu respons (maks) 168.71s 4.68s
Waktu respons (total) 472.24s 38.20s

Model teratas berdasarkan skor

Skor vs Total Biaya

Waktu respons (rata-rata)

Skor vs Waktu respons (rata-rata)

Total token output

Skor vs Total token output

Rincian Kategori

Trik anti-AI Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token output Token penalaran
Seed-2.0-Lite 8.3 10.0 75.0% 0 17.99s 996 7,142
Gemma 4 31B 6.5 10.0 50.0% 0 1.85s 45 0
Gabungan Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token output Token penalaran
Seed-2.0-Lite 10.0 10.0 100.0% 0 37.67s 506 4,299
Gemma 4 31B 3.0 10.0 0.0% 0 0ms 0 0
Parsing dan ekstraksi data Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token output Token penalaran
Seed-2.0-Lite 10.0 10.0 100.0% 0 9.07s 246 1,742
Gemma 4 31B 10.0 10.0 100.0% 0 2.25s 285 0
Spesifik domain Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token output Token penalaran
Seed-2.0-Lite 5.9 7.2 55.6% 1 88.74s 15 23,897
Gemma 4 31B 7.7 10.0 66.7% 0 3.22s 27 0
Kecerdasan umum Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token output Token penalaran
Seed-2.0-Lite 6.7 3.6 66.7% 1 18.25s 304 1,620
Gemma 4 31B 10.0 10.0 100.0% 0 2.09s 117 0
Kepatuhan instruksi Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token output Token penalaran
Seed-2.0-Lite 10.0 10.0 100.0% 0 7.26s 71 1,480
Gemma 4 31B 6.5 10.0 50.0% 0 2.84s 78 0
Puzzle Solving Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token output Token penalaran
Seed-2.0-Lite 9.0 7.9 88.9% 1 11.03s 461 3,532
Gemma 4 31B 5.5 10.0 33.3% 0 2.95s 108 0
Pemanggilan alat Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token output Token penalaran
Seed-2.0-Lite 10.0 10.0 100.0% 0 12.38s 222 1,011
Gemma 4 31B 3.0 10.0 0.0% 0 0ms 0 0

Perbandingan Cepat

Ganti Pasangan Perbandingan