Google: Gemini 3.1 Flash Lite vs Google: Gemma 4 31B

Gemini 3.1 Flash Lite (low) unggul dalam skor rata-rata dengan 6.5 vs 6.3. Gemma 4 31B (medium) memiliki biaya benchmark lebih rendah di $0.116 vs $0.621. Gemini 3.1 Flash Lite (low) lebih cepat di 16.26s vs 75.38s, dengan tingkat keberhasilan 59.1% vs 68.2%.

Model yang direkomendasikanGemma 4 31B (medium)Its score stays close to the best score here (6.3 vs 6.5), while costing about 5.4x less than Gemini 3.1 Flash Lite (low).

Benchmark dihasilkan dari suite pengujian AI BENCHY pada: 2026-07-25

Metrik	Gemini 3.1 Flash Lite Gemini 3.1 Flash Lite low Rilis: 2026-05-08	Gemma 4 31B Gemma 4 31B medium Rilis: 2026-04-02 Tersedia gratis

Metrik	Gemini 3.1 Flash Lite Gemini 3.1 Flash Lite low Rilis: 2026-05-08	Gemma 4 31B Gemma 4 31B medium Rilis: 2026-04-02 Tersedia gratis
Skor	6.5	6.3
Peringkat	#115	#121
Keandalan	10.0	10.0
Konsistensi	9.2	9.0
Tes benar
Tingkat lulus per percobaan	59.1%	68.2%
Tes tidak stabil	2	2
Total Run	66	66
Biaya per hasil	5.170	1.044
Total Biaya	$0.621	$0.116
Harga input	$0.250 / 1M	$0.140 / 1M
Harga output	$1.500 / 1M	$0.400 / 1M
Total token input	94,224	94,992
Token output	7,759	34,468
Token penalaran	390,126	223,278
Waktu respons (rata-rata)	16.26s	75.38s
Waktu respons (maks)	318.02s	437.40s
Waktu respons (total)	357.64s	1507.52s

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#115 Gemini 3.1 Flash Lite

low

Biaya: $0.003
Waktu: 4.0s
Token: 1,479 tok

#121 Gemma 4 31B

medium

Biaya: $0.002
Waktu: 45.7s
Token: 2,696 tok

Model teratas berdasarkan skor

Skor vs Total Biaya

Waktu respons (rata-rata)

Skor vs Waktu respons (rata-rata)

Total token output

Skor vs Total token output

Rincian Kategori

Kategori:

Trik anti-AI	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Gemini 3.1 Flash Lite	7.3	6.2	75.0%	2		1.84s	500	1,013	1,548
Gemma 4 31B	10.0	10.0	100.0%	0		12.89s	816	962	2,046

Pemrograman	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Gemini 3.1 Flash Lite	5.5	10.0	33.3%	0		1.53s	8,132	471	1,072
Gemma 4 31B	4.3	5.8	22.2%	1		219.76s	5,568	11,098	33,212

Gabungan	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Gemini 3.1 Flash Lite	3.2	9.1	0.0%	0		161.25s	70,202	5,375	381,841
Gemma 4 31B	2.9	5.8	16.7%	1		433.11s	77,035	12,112	157,552

Parsing dan ekstraksi data	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Gemini 3.1 Flash Lite	10.0	10.0	100.0%	0		1.44s	7,453	291	697
Gemma 4 31B	10.0	10.0	100.0%	0		21.11s	8,334	1,822	2,951

Spesifik domain	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Gemini 3.1 Flash Lite	5.3	10.0	33.3%	0		1.52s	639	15	1,214
Gemma 4 31B	7.7	10.0	66.7%	0		38.48s	876	4,349	8,985

Kecerdasan umum	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Gemini 3.1 Flash Lite	4.0	10.0	0.0%	0		1.37s	492	69	438
Gemma 4 31B	10.0	10.0	100.0%	0		9.57s	567	105	888

Kepatuhan instruksi	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Gemini 3.1 Flash Lite	10.0	10.0	100.0%	0		1.52s	619	72	760
Gemma 4 31B	10.0	10.0	100.0%	0		12.76s	777	533	2,035

Pemecahan teka-teki	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Gemini 3.1 Flash Lite	10.0	10.0	100.0%	0		1.40s	570	210	1,191
Gemma 4 31B	9.9	10.0	100.0%	0		26.91s	801	1,795	5,595

Pemanggilan alat	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Gemini 3.1 Flash Lite	10.0	10.0	100.0%	0		5.66s	5,457	234	945
Gemma 4 31B	3.0	10.0	0.0%	0		0ms	0	0	0

Pengetahuan umum	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Gemini 3.1 Flash Lite	3.0	10.0	0.0%	0		1.46s	160	9	420
Gemma 4 31B	3.0	10.0	0.0%	0		90.14s	218	1,692	10,014

Perbandingan Cepat

Ganti Pasangan Perbandingan

Gemma 4 31BmediumTersedia gratisvsLongCat 2.0none Gemini 3.1 Flash LitelowvsQwen3.5-27Bnone Gemini 3.1 Flash LitelowvsLaguna XS 2.1mediumTersedia gratis Gemini 3.1 Flash LitelowvsMiMo-V2.5medium Claude Sonnet 5nonevsGemma 4 31BmediumTersedia gratis Gemini 3.1 Flash LitelowvsQwen3.5 Plus 2026-02-15none Gemini 3.1 Flash LitelowvsQwen3.6 27Bmedium Gemma 4 31BmediumTersedia gratisvsLing 3.0 FlashhighTersedia gratis Gemini 3.1 Flash LitelowvsLing 3.0 FlashhighTersedia gratis Gemini 3.1 Flash LitelowvsQwen3.6 Max Previewnone Seed-2.0-LitenonevsGemma 4 31BmediumTersedia gratis Gemma 4 31BmediumTersedia gratisvsGPT-5.6 Lunalow