Navigasi
AI BENCHY
Advertise here

AI BENCHY Compare

Google: Gemini 3.5 Flash vs StepFun: Step 3.5 Flash

Benchmark dihasilkan dari suite pengujian AI BENCHY pada: 2026-05-22

Metrik Gemini 3.5 Flash Gemini 3.5 Flash low Rilis: 2026-05-19 Step 3.5 Flash Step 3.5 Flash none Rilis: 2026-02-01
Skor 9.3 7.8
Peringkat #3 #32
Keandalan 10.0 10.0
Konsistensi 10.0 10.0
Tes benar
Tingkat lulus per percobaan 90.0% 66.7%
Tes tidak stabil 0 0
Total Run 60 36
Biaya per hasil 1.582 0.328
Total Biaya $0.285 $0.020
Harga input $1.500 / 1M $0.090 / 1M
Harga output $9.000 / 1M $0.300 / 1M
Token output 2,027 64,795
Token penalaran 23,938 0
Waktu respons (rata-rata) 2.98s 39.03s
Waktu respons (maks) 6.44s 114.12s
Waktu respons (total) 59.59s 312.26s

Model teratas berdasarkan skor

Skor vs Total Biaya

Waktu respons (rata-rata)

Skor vs Waktu respons (rata-rata)

Total token output

Skor vs Total token output

Rincian Kategori

Trik anti-AI Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token output Token penalaran
Gemini 3.5 Flash 10.0 10.0 100.0% 0 2.52s 209 2,536
Step 3.5 Flash 10.0 10.0 100.0% 0 34.99s 21,766 0
Pemrograman Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token output Token penalaran
Gemini 3.5 Flash 6.8 10.0 50.0% 0 5.54s 452 6,839
Step 3.5 Flash 3.0 10.0 0.0% 0 0ms 0 0
Gabungan Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token output Token penalaran
Gemini 3.5 Flash 10.0 10.0 100.0% 0 6.44s 351 3,050
Step 3.5 Flash 0.0 0.0 0.0% 0 0ms 0 0
Parsing dan ekstraksi data Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token output Token penalaran
Gemini 3.5 Flash 10.0 10.0 100.0% 0 1.81s 279 1,164
Step 3.5 Flash 0.0 0.0 0.0% 0 0ms 0 0
Spesifik domain Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token output Token penalaran
Gemini 3.5 Flash 7.7 10.0 66.7% 0 3.39s 12 4,538
Step 3.5 Flash 10.0 10.0 100.0% 0 34.54s 7,389 0
Kecerdasan umum Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token output Token penalaran
Gemini 3.5 Flash 10.0 10.0 100.0% 0 2.27s 119 916
Step 3.5 Flash 4.0 10.0 0.0% 0 14.37s 2,451 0
Kepatuhan instruksi Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token output Token penalaran
Gemini 3.5 Flash 9.9 10.0 100.0% 0 1.86s 71 1,652
Step 3.5 Flash 10.0 10.0 100.0% 0 9.30s 1,427 0
Pemecahan teka-teki Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token output Token penalaran
Gemini 3.5 Flash 10.0 10.0 100.0% 0 2.35s 288 2,150
Step 3.5 Flash - - - - - - - -
Pemanggilan alat Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token output Token penalaran
Gemini 3.5 Flash 10.0 10.0 100.0% 0 3.27s 234 403
Step 3.5 Flash 0.0 0.0 0.0% 0 0ms 0 0
Pengetahuan umum Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token output Token penalaran
Gemini 3.5 Flash 10.0 10.0 100.0% 0 1.88s 12 690
Step 3.5 Flash 3.0 10.0 0.0% 0 114.12s 31,762 0

Perbandingan Cepat

Ganti Pasangan Perbandingan