Google: Gemini 3.5 Flash-Lite vs Google: Gemma 4 26B A4B

Gemma 4 26B A4B (medium) unggul dalam skor rata-rata dengan 6.6 vs 6.5. Gemma 4 26B A4B (medium) memiliki biaya benchmark lebih rendah di $0.089 vs $0.369. Gemini 3.5 Flash-Lite (medium) lebih cepat di 6.01s vs 103.83s, dengan tingkat keberhasilan 69.7% vs 66.7%.

Model yang direkomendasikanGemini 3.5 Flash-Lite (medium)Its score stays close to the best score here (6.5 vs 6.6), while responding about 17.3x faster than Gemma 4 26B A4B (medium).

Benchmark dihasilkan dari suite pengujian AI BENCHY pada: 2026-07-21

Metrik	Gemini 3.5 Flash-Lite Gemini 3.5 Flash-Lite medium Rilis: 2026-07-21	Gemma 4 26B A4B Gemma 4 26B A4B medium Rilis: 2026-04-03 Tersedia gratis

Metrik	Gemini 3.5 Flash-Lite Gemini 3.5 Flash-Lite medium Rilis: 2026-07-21	Gemma 4 26B A4B Gemma 4 26B A4B medium Rilis: 2026-04-03 Tersedia gratis
Skor	6.5	6.6
Peringkat	#104	#100
Keandalan	10.0	9.4
Konsistensi	7.4	9.2
Tes benar
Tingkat lulus per percobaan	69.7%	66.7%
Tes tidak stabil	7	2
Total Run	66	66
Biaya per hasil	3.074	0.643
Total Biaya	$0.369	$0.089
Harga input	$0.300 / 1M	$0.070 / 1M
Harga output	$2.500 / 1M	$0.340 / 1M
Total token input	118,818	77,550
Token output	11,677	28,036
Token penalaran	121,611	219,491
Waktu respons (rata-rata)	6.01s	103.83s
Waktu respons (maks)	49.03s	912.19s
Waktu respons (total)	132.30s	2180.47s

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#104 Gemini 3.5 Flash-Lite

medium

Biaya: $0.015
Waktu: 16.4s
Token: 5,971 tok

#100 Gemma 4 26B A4B

medium

SVG tidak valid

Biaya: $0.000
Waktu: 300.0s
Token: 0 tok

Model teratas berdasarkan skor

Skor vs Total Biaya

Waktu respons (rata-rata)

Skor vs Waktu respons (rata-rata)

Total token output

Skor vs Total token output

Rincian Kategori

Kategori:

Trik anti-AI	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Gemini 3.5 Flash-Lite	10.0	10.0	100.0%	0		1.70s	516	149	5,902
Gemma 4 26B A4B	10.0	10.0	100.0%	0		6.20s	816	1,142	3,045

Pemrograman	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Gemini 3.5 Flash-Lite	5.5	7.4	44.4%	1		8.37s	8,136	452	25,999
Gemma 4 26B A4B	2.9	10.0	0.0%	0		272.54s	5,062	14,838	44,567

Gabungan	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Gemini 3.5 Flash-Lite	3.8	1.6	50.0%	2		28.68s	94,257	10,068	57,720
Gemma 4 26B A4B	6.3	10.0	50.0%	0		492.87s	54,390	5,451	132,113

Parsing dan ekstraksi data	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Gemini 3.5 Flash-Lite	10.0	10.0	100.0%	0		1.69s	7,269	292	2,801
Gemma 4 26B A4B	10.0	10.0	100.0%	0		16.51s	8,334	1,567	2,827

Spesifik domain	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Gemini 3.5 Flash-Lite	2.9	4.4	22.2%	2		6.62s	651	18	14,669
Gemma 4 26B A4B	2.9	4.4	22.2%	2		23.62s	516	2,469	7,105

Kecerdasan umum	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Gemini 3.5 Flash-Lite	5.4	2.5	66.7%	1		2.93s	492	97	1,991
Gemma 4 26B A4B	10.0	10.0	100.0%	0		29.76s	567	25	5,075

Kepatuhan instruksi	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Gemini 3.5 Flash-Lite	9.8	10.0	100.0%	0		1.59s	627	69	2,851
Gemma 4 26B A4B	10.0	10.0	100.0%	0		17.54s	777	887	4,470

Pemecahan teka-teki	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Gemini 3.5 Flash-Lite	8.4	7.4	88.9%	1		1.70s	576	204	3,632
Gemma 4 26B A4B	10.0	10.0	100.0%	0		5.79s	801	410	2,128

Pemanggilan alat	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Gemini 3.5 Flash-Lite	10.0	10.0	100.0%	0		2.63s	6,132	317	1,351
Gemma 4 26B A4B	10.0	10.0	100.0%	0		9.01s	6,096	450	1,256

Pengetahuan umum	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Gemini 3.5 Flash-Lite	3.0	10.0	0.0%	0		5.98s	162	11	4,695
Gemma 4 26B A4B	3.0	10.0	0.0%	0		180.87s	191	797	16,905

Perbandingan Cepat

Ganti Pasangan Perbandingan

Gemma 4 26B A4BmediumTersedia gratisvsGLM 5.2none Gemma 4 26B A4BmediumTersedia gratisvsLongCat 2.0high Gemini 3.5 Flash-LitemediumvsQwen3.6 Max Previewnone Gemma 4 26B A4BmediumTersedia gratisvsQwen3.6 Max Previewnone Gemini 3.5 Flash-LitemediumvsQwen3.5-27Bnone Gemini 3.5 Flash-LitemediumvsLongCat 2.0high Gemini 3.5 Flash-LitemediumvsGLM 5.2none Gemma 4 26B A4BmediumTersedia gratisvsKAT-Coder-Pro V2.5none Gemma 4 26B A4BmediumTersedia gratisvsLongCat 2.0low Gemini 3.5 Flash-LitemediumvsQwen3.5 Plus 2026-02-15none Gemma 4 26B A4BmediumTersedia gratisvsQwen3.5-27Bnone Gemini 3.5 Flash-LitemediumvsKAT-Coder-Pro V2.5none