Navigasi
AI BENCHY
Your ad here

AI BENCHY Compare

ByteDance Seed: Seed-2.0-Lite vs xAI: Grok 4.1 Fast

Benchmark dihasilkan dari suite pengujian AI BENCHY pada: 2026-03-12

Metrik Seed-2.0-Lite Seed-2.0-Lite none Rilis: 2026-02-14 Grok 4.1 Fast Grok 4.1 Fast medium Rilis: 2025-11-19
Peringkat #45 #32
Skor Rata-rata 4.9 6.2
Konsistensi 7.4 7.9
Biaya per hasil 0.214 0.563
Total Biaya $0.015 $0.051
Tes benar
Tingkat lulus per percobaan 56.3% 66.7%
Tes tidak stabil 5 4
Total Run 48 48
Token output 2,743 1,183
Token penalaran 0 83,875
Waktu respons (rata-rata) 2.49s 26.35s
Waktu respons (maks) 6.70s 121.79s
Waktu respons (total) 39.91s 237.11s

Model teratas berdasarkan skor

Skor vs Total Biaya

Waktu respons (rata-rata)

Skor Rata-rata vs Waktu respons (rata-rata)

Total token output

Skor Rata-rata vs Total token output

Rincian Kategori

Trik anti-AI Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token output Token penalaran
Seed-2.0-Lite 10.0 4.6 22.2% 2 2.93s 703 0
Grok 4.1 Fast 10.0 10.0 100.0% 0 5.65s 102 4,021
Gabungan Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token output Token penalaran
Seed-2.0-Lite 10.0 10.0 0.0% 0 6.59s 498 0
Grok 4.1 Fast 10.0 10.0 100.0% 0 37.64s 261 12,272
Parsing dan ekstraksi data Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token output Token penalaran
Seed-2.0-Lite 9.9 10.0 100.0% 0 1.82s 246 0
Grok 4.1 Fast 9.9 10.0 100.0% 0 6.63s 180 5,409
Spesifik domain Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token output Token penalaran
Seed-2.0-Lite 10.0 7.2 22.2% 1 1.33s 17 0
Grok 4.1 Fast 4.0 4.4 66.7% 2 121.79s 11 37,657
Kecerdasan umum Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token output Token penalaran
Seed-2.0-Lite 10.0 10.0 100.0% 0 3.45s 294 0
Grok 4.1 Fast 3.0 9.9 0.0% 0 16.25s 127 3,456
Kepatuhan instruksi Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token output Token penalaran
Seed-2.0-Lite 10.0 10.0 100.0% 0 1.06s 73 0
Grok 4.1 Fast 5.5 10.0 50.0% 0 5.30s 55 3,489
Puzzle Solving Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token output Token penalaran
Seed-2.0-Lite 4.0 4.4 55.6% 2 2.46s 620 0
Grok 4.1 Fast 4.0 7.2 44.4% 1 8.08s 187 6,086
Pemanggilan alat Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token output Token penalaran
Seed-2.0-Lite 10.0 10.0 100.0% 0 3.94s 292 0
Grok 4.1 Fast 10.0 1.6 33.3% 1 27.71s 260 11,485

Perbandingan Cepat

Ganti Pasangan Perbandingan