Navigasi
AI BENCHY
Advertise here

AI BENCHY Compare

Google: Gemma 4 26B A4B vs StepFun: Step 3.5 Flash

Ringkasan

Perbandingan benchmark Gemma 4 26B A4B vs Step 3.5 Flash: Step 3.5 Flash unggul dalam skor rata-rata dengan 6.6 vs 5.5. Gemma 4 26B A4B memiliki biaya benchmark lebih rendah di $0.004 vs $0.070. Gemma 4 26B A4B lebih cepat di 5.91s vs 72.53s, dengan tingkat keberhasilan 44.4% vs 54.0%.

Model yang direkomendasikan: Step 3.5 Flash - It has the strongest score in this comparison (6.6) and the best overall balance of cost and response time across all 2 models.

Benchmark dihasilkan dari suite pengujian AI BENCHY pada: 2026-07-02

Metrik Gemma 4 26B A4B Gemma 4 26B A4B none Rilis: 2026-04-03 Tersedia gratis Step 3.5 Flash Step 3.5 Flash medium Rilis: 2026-02-01
Skor 5.5 6.6
Peringkat #125 #83
Keandalan 10.0 10.0
Konsistensi 9.2 8.9
Tes benar
Tingkat lulus per percobaan 44.4% 54.0%
Tes tidak stabil 2 1
Total Run 63 60
Biaya per hasil 0.068 0.198
Total Biaya $0.004 $0.070
Harga input $0.060 / 1M $0.100 / 1M
Harga output $0.330 / 1M $0.300 / 1M
Total token input 40,038 34,431
Token output 1,824 91,587
Token penalaran 0 195,973
Waktu respons (rata-rata) 5.91s 72.53s
Waktu respons (maks) 57.10s 453.94s
Waktu respons (total) 124.05s 1015.47s

Showcase generasi

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#125 Gemma 4 26B A4B

none
Biaya
$0.001
Waktu
39.5s
Token
790 tok

#83 Step 3.5 Flash

medium
Biaya
$0.008
Waktu
277.1s
Token
23,695 tok

Model teratas berdasarkan skor

Skor vs Total Biaya

Waktu respons (rata-rata)

Skor vs Waktu respons (rata-rata)

Total token output

Skor vs Total token output

Rincian Kategori

Trik anti-AI Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token input Token output Token penalaran
Gemma 4 26B A4B 8.3 10.0 75.0% 0 1.28s 852 230 0
Step 3.5 Flash 10.0 10.0 100.0% 0 40.57s 694 20,391 24,176
Pemrograman Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token input Token output Token penalaran
Gemma 4 26B A4B 3.7 7.2 22.2% 1 4.16s 7,736 476 0
Step 3.5 Flash 2.4 5.2 0.0% 0 258.38s 2,211 13,207 22,429
Gabungan Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token input Token output Token penalaran
Gemma 4 26B A4B 3.0 10.0 0.0% 0 30.53s 13,650 309 0
Step 3.5 Flash 10.0 10.0 100.0% 0 29.57s 13,638 1,176 12,984
Parsing dan ekstraksi data Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token input Token output Token penalaran
Gemma 4 26B A4B 10.0 10.0 100.0% 0 1.70s 8,352 285 0
Step 3.5 Flash 10.0 10.0 100.0% 0 15.01s 7,368 600 13,886
Spesifik domain Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token input Token output Token penalaran
Gemma 4 26B A4B 3.6 7.2 22.2% 1 2.49s 903 27 0
Step 3.5 Flash 5.3 7.2 44.4% 1 170.45s 673 45,350 90,436
Kecerdasan umum Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token input Token output Token penalaran
Gemma 4 26B A4B 4.0 10.0 0.0% 0 3.54s 576 85 0
Step 3.5 Flash 5.5 10.0 0.0% 0 22.39s 509 240 3,506
Kepatuhan instruksi Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token input Token output Token penalaran
Gemma 4 26B A4B 6.3 10.0 50.0% 0 690ms 795 75 0
Step 3.5 Flash 8.3 10.0 50.0% 0 4.78s 705 2,364 3,521
Pemecahan teka-teki Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token input Token output Token penalaran
Gemma 4 26B A4B 6.2 10.0 33.3% 0 744ms 828 114 0
Step 3.5 Flash 5.3 10.0 33.3% 0 7.22s 711 5,630 10,861
Pemanggilan alat Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token input Token output Token penalaran
Gemma 4 26B A4B 10.0 10.0 100.0% 0 57.10s 6,123 210 0
Step 3.5 Flash 10.0 10.0 100.0% 0 11.91s 7,701 275 3,802
Pengetahuan umum Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token input Token output Token penalaran
Gemma 4 26B A4B 3.0 10.0 0.0% 0 778ms 223 13 0
Step 3.5 Flash 3.0 10.0 0.0% 0 108.45s 221 2,354 10,372

Perbandingan Cepat

Ganti Pasangan Perbandingan

Gemini 3.1 Flash Lite PreviewlowvsStep 3.5 FlashmediumGemini 3.1 Flash Lite PreviewnonevsStep 3.5 FlashmediumGemini 3.1 Flash LitelowvsStep 3.5 FlashmediumGemini 3.5 FlashminimalvsStep 3.5 FlashmediumQwen3.7 MaxnonevsStep 3.5 FlashmediumGemini 3 Flash PreviewnonevsStep 3.5 FlashmediumGemma 4 26B A4BnoneTersedia gratisvsMiniMax M2.7mediumGPT-5.5nonevsStep 3.5 FlashmediumNorth Mini CodemediumTersedia gratisvsGemma 4 26B A4BnoneTersedia gratisGemma 4 26B A4BnoneTersedia gratisvsMistral Small 4mediumGemini 3.5 FlashnonevsStep 3.5 FlashmediumSeed-2.0-LitenonevsStep 3.5 Flashmedium