Google: Gemini 2.5 Flash vs Google: Gemma 4 31B

Gemma 4 31B (medium) unggul dalam skor rata-rata dengan 6.3 vs 6.2. Gemini 2.5 Flash memiliki biaya benchmark lebih rendah di $0.017 vs $0.163. Gemini 2.5 Flash lebih cepat di 6.20s vs 75.38s, dengan tingkat keberhasilan 43.9% vs 68.2%.

Model yang direkomendasikanGemini 2.5 FlashIts score stays close to the best score here (6.2 vs 6.3), while costing about 9.7x less than Gemma 4 31B (medium).

Benchmark dihasilkan dari suite pengujian AI BENCHY pada: 2026-07-17

Metrik	Gemini 2.5 Flash Gemini 2.5 Flash none Rilis: 2025-06-17	Gemma 4 31B Gemma 4 31B medium Rilis: 2026-04-02 Tersedia gratis

Metrik	Gemini 2.5 Flash Gemini 2.5 Flash none Rilis: 2025-06-17	Gemma 4 31B Gemma 4 31B medium Rilis: 2026-04-02 Tersedia gratis
Skor	6.2	6.3
Peringkat	#112	#105
Keandalan	10.0	10.0
Konsistensi	9.6	9.0
Tes benar
Tingkat lulus per percobaan	43.9%	68.2%
Tes tidak stabil	1	2
Total Run	66	66
Biaya per hasil	0.186	1.044
Total Biaya	$0.017	$0.163
Harga input	$0.300 / 1M	$0.220 / 1M
Harga output	$2.500 / 1M	$0.550 / 1M
Total token input	39,877	94,992
Token output	1,890	34,468
Token penalaran	0	223,278
Waktu respons (rata-rata)	6.20s	75.38s
Waktu respons (maks)	118.00s	437.40s
Waktu respons (total)	136.37s	1507.52s

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#112 Gemini 2.5 Flash

none

SVG tidak valid

Biaya: $0.164
Waktu: 215.5s
Token: 65,659 tok

#105 Gemma 4 31B

medium

Biaya: $0.002
Waktu: 45.7s
Token: 2,696 tok

Model teratas berdasarkan skor

Skor vs Total Biaya

Waktu respons (rata-rata)

Skor vs Waktu respons (rata-rata)

Total token output

Skor vs Total token output

Rincian Kategori

Kategori:

Trik anti-AI	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Gemini 2.5 Flash	3.0	10.0	0.0%	0		582ms	492	102	0
Gemma 4 31B	10.0	10.0	100.0%	0		12.89s	816	962	2,046

Pemrograman	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Gemini 2.5 Flash	5.5	10.0	33.3%	0		736ms	8,122	483	0
Gemma 4 31B	4.3	5.8	22.2%	1		219.76s	5,568	11,098	33,212

Gabungan	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Gemini 2.5 Flash	3.0	10.0	0.0%	0		61.19s	16,470	486	0
Gemma 4 31B	2.9	5.8	16.7%	1		433.11s	77,035	12,112	157,552

Parsing dan ekstraksi data	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Gemini 2.5 Flash	10.0	10.0	100.0%	0		652ms	7,257	279	0
Gemma 4 31B	10.0	10.0	100.0%	0		21.11s	8,334	1,822	2,951

Spesifik domain	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Gemini 2.5 Flash	5.9	7.2	55.6%	1		495ms	633	12	0
Gemma 4 31B	7.7	10.0	66.7%	0		38.48s	876	4,349	8,985

Kecerdasan umum	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Gemini 2.5 Flash	5.0	10.0	0.0%	0		615ms	486	78	0
Gemma 4 31B	10.0	10.0	100.0%	0		9.57s	567	105	888

Kepatuhan instruksi	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Gemini 2.5 Flash	10.0	10.0	100.0%	0		590ms	615	72	0
Gemma 4 31B	10.0	10.0	100.0%	0		12.76s	777	533	2,035

Pemecahan teka-teki	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Gemini 2.5 Flash	7.7	10.0	66.7%	0		604ms	558	132	0
Gemma 4 31B	9.9	10.0	100.0%	0		26.91s	801	1,795	5,595

Pemanggilan alat	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Gemini 2.5 Flash	10.0	10.0	100.0%	0		1.91s	5,088	234	0
Gemma 4 31B	3.0	10.0	0.0%	0		0ms	0	0	0

Pengetahuan umum	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Gemini 2.5 Flash	3.0	10.0	0.0%	0		1.15s	156	12	0
Gemma 4 31B	3.0	10.0	0.0%	0		90.14s	218	1,692	10,014

Perbandingan Cepat

Ganti Pasangan Perbandingan

Gemini 2.5 FlashnonevsQwen3.5-35B-A3Bmedium Claude Sonnet 5nonevsGemma 4 31BmediumTersedia gratis Gemini 2.5 FlashnonevsGPT-5.6 Lunalow Gemini 2.5 Flashnonevsgpt-oss-120bmedium Gemini 2.5 FlashnonevsQwen3.5-Flashmedium Gemini 2.5 FlashnonevsGPT-5 Nanomedium Seed-2.0-LitenonevsGemma 4 31BmediumTersedia gratis Gemma 4 31BmediumTersedia gratisvsGPT-5.6 Lunalow Gemini 2.5 FlashnonevsStep 3.5 Flashmedium Gemma 4 31BmediumTersedia gratisvsQwen3.5 Plus 2026-02-15none Gemini 2.5 FlashnonevsRing-2.6-1Tmedium Gemma 4 31BmediumTersedia gratisvsQwen3.5-27Bnone