Navigasi
AI BENCHY
Your ad here

AI BENCHY Compare

ByteDance Seed: Seed-2.0-Lite vs Mistral: Mistral Small 4

Benchmark dihasilkan dari suite pengujian AI BENCHY pada: 2026-03-17

Metrik Seed-2.0-Lite Seed-2.0-Lite none Rilis: 2026-02-14 Mistral Small 4 Mistral Small 4 medium Rilis: 2026-03-16
Peringkat #47 #55
Skor 6.0 5.6
Konsistensi 7.6 7.0
Biaya per hasil 0.215 0.502
Total Biaya $0.016 $0.026
Tes benar
Tingkat lulus per percobaan 52.9% 49.0%
Tes tidak stabil 5 6
Total Run 51 51
Token output 2,749 12,288
Token penalaran 0 28,112
Waktu respons (rata-rata) 2.40s 4.18s
Waktu respons (maks) 6.70s 25.25s
Waktu respons (total) 40.85s 71.03s

Model teratas berdasarkan skor

Skor vs Total Biaya

Waktu respons (rata-rata)

Skor vs Waktu respons (rata-rata)

Total token output

Skor vs Total token output

Rincian Kategori

Trik anti-AI Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token output Token penalaran
Seed-2.0-Lite 3.0 5.9 16.7% 2 2.43s 709 0
Mistral Small 4 5.6 3.8 66.7% 3 2.67s 4,055 4,778
Gabungan Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token output Token penalaran
Seed-2.0-Lite 3.0 10.0 0.0% 0 6.59s 498 0
Mistral Small 4 3.0 10.0 0.0% 0 25.25s 2,612 10,700
Parsing dan ekstraksi data Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token output Token penalaran
Seed-2.0-Lite 10.0 10.0 100.0% 0 1.82s 246 0
Mistral Small 4 7.3 5.9 83.3% 1 1.23s 335 723
Spesifik domain Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token output Token penalaran
Seed-2.0-Lite 3.6 7.2 22.2% 1 1.33s 17 0
Mistral Small 4 5.3 7.2 44.4% 1 6.11s 2,621 6,904
Kecerdasan umum Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token output Token penalaran
Seed-2.0-Lite 10.0 10.0 100.0% 0 3.45s 294 0
Mistral Small 4 4.8 10.0 0.0% 0 2.05s 821 828
Kepatuhan instruksi Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token output Token penalaran
Seed-2.0-Lite 10.0 10.0 100.0% 0 1.06s 73 0
Mistral Small 4 7.3 5.8 83.3% 1 1.38s 540 1,031
Puzzle Solving Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token output Token penalaran
Seed-2.0-Lite 5.2 4.4 55.6% 2 2.46s 620 0
Mistral Small 4 3.4 9.7 0.0% 0 2.00s 983 2,338
Pemanggilan alat Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token output Token penalaran
Seed-2.0-Lite 10.0 10.0 100.0% 0 3.94s 292 0
Mistral Small 4 10.0 10.0 100.0% 0 3.50s 321 810

Perbandingan Cepat

Ganti Pasangan Perbandingan