Model yang Dibandingkan

Perbandingan benchmark Gemma 4 31B (medium) vs Gemma 4 26B A4B (medium) vs Gemini 3 PRO Preview (medium): Gemma 4 26B A4B (medium) unggul pada Skor dengan 6.8. Gemma 4 31B (medium) unggul pada Keandalan dengan 10.0. Gemma 4 26B A4B (medium) memiliki Total Biaya terendah di $0.092. Gemini 3 PRO Preview (medium) paling cepat di 9.05s.

Benchmark dihasilkan dari suite pengujian AI BENCHY pada: 2026-09-10

Model yang Dibandingkan

Peringkat: #193
Total token output: 267,421
Waktu respons (rata-rata): 78.59s
Total Biaya: $0.100

Peringkat: #163
Total token output: 253,646
Waktu respons (rata-rata): 104.93s
Total Biaya: $0.092

Peringkat: #212
Total token output: 11,592
Waktu respons (rata-rata): 9.05s
Total Biaya: $0.385

Model yang direkomendasikan Gemma 4 26B A4B (medium)

It has the best score here (6.8), while costing about 2.6x less than model lain dalam perbandingan ini.

Perbandingan terperinci

Metrik	Gemma 4 31B Gemma 4 31B medium Rilis: 2026-04-02 Tersedia gratis	Gemma 4 26B A4B Gemma 4 26B A4B medium Rilis: 2026-04-03 Tersedia gratis	Gemini 3 PRO Preview Gemini 3 PRO Preview medium Rilis: 2025-11-18

Metrik	Gemma 4 31B Gemma 4 31B medium Rilis: 2026-04-02 Tersedia gratis	Gemma 4 26B A4B Gemma 4 26B A4B medium Rilis: 2026-04-03 Tersedia gratis	Gemini 3 PRO Preview Gemini 3 PRO Preview medium Rilis: 2025-11-18
Skor	6.2	6.8	6.0
Peringkat	#193	#163	#212
Keandalan	10.0	10.0	T/A
Konsistensi	8.7	9.6	9.5
Percobaan	66/66	66/66	63/66
Tes benar
Tingkat lulus per percobaan	65.2%	69.7%	63.6%
Tes tidak stabil	3	1	0
Total Run	66	66	63
Biaya per hasil	1.152	0.623	1.406
Total Biaya	$0.100	$0.092	$0.385
Harga input	$0.090 / 1M	$0.070 / 1M	$9.506 / 1M
Harga output	$0.340 / 1M	$0.340 / 1M	$9.506 / 1M
Total token input	94,969	77,528	28,848
Token output	34,399	26,048	1,490
Token penalaran	233,022	227,598	10,102
Waktu respons (rata-rata)	78.59s	104.93s	9.05s
Waktu respons (maks)	437.40s	912.19s	26.24s
Waktu respons (total)	1571.84s	2203.52s	90.53s
Parameter	30.7B	25.2B total (3.8B aktif)	~1.2T total (~20B aktif)
Ketersediaan	Sumber terbuka	Sumber terbuka	Tertutup

Showcase generasi model

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#193 Gemma 4 31B

medium

Biaya: $0.002
Waktu: 45.7s
Token: 2,696 tok

#163 Gemma 4 26B A4B

medium

Reached the allocated time limit (300 seconds) without receiving showcase output.

Biaya: $0.000
Waktu: 300.0s
Token: 0 tok

#212 Gemini 3 PRO Preview

medium

No endpoints found for google/gemini-3-pro-preview.

Biaya: $0.000
Waktu: 0.1s
Token: 0 tok

Model teratas berdasarkan skor

Skor vs Total Biaya

Waktu respons (rata-rata)

Skor vs Waktu respons (rata-rata)

Total token output

Skor vs Total token output

Rincian Kategori

Kategori:

Trik anti-AI	Skor	Konsistensi	Tingkat lulus per percobaan	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Gemma 4 31B	10.0	10.0	100.0%	12.89s	816	962	2,046
Gemma 4 26B A4B	10.0	10.0	100.0%	6.20s	816	1,142	3,045
Gemini 3 PRO Preview	10.0	10.0	100.0%	14.99s	500	149	1,485

Pemrograman	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Gemma 4 31B	4.3	5.8	22.2%	1	219.76s	5,568	11,098	33,212
Gemma 4 26B A4B	2.9	10.0	0.0%	0	272.54s	5,062	14,838	44,567
Gemini 3 PRO Preview	3.0	10.0	0.0%	0	0ms	0	0	0

Gabungan	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Gemma 4 31B	2.9	5.8	16.7%	1	433.11s	77,035	12,112	157,552
Gemma 4 26B A4B	6.3	10.0	50.0%	0	492.87s	54,390	5,451	132,113
Gemini 3 PRO Preview	1.5	5.0	0.0%	0	10.37s	13,211	351	952

Parsing dan ekstraksi data	Skor	Konsistensi	Tingkat lulus per percobaan	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Gemma 4 31B	10.0	10.0	100.0%	21.11s	8,334	1,822	2,951
Gemma 4 26B A4B	10.0	10.0	100.0%	16.51s	8,334	1,567	2,827
Gemini 3 PRO Preview	10.0	10.0	100.0%	10.84s	7,259	279	3,156

Spesifik domain	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Gemma 4 31B	5.3	7.2	44.4%	1	59.92s	853	4,280	18,729
Gemma 4 26B A4B	5.3	7.2	44.4%	1	35.14s	494	481	15,212
Gemini 3 PRO Preview	5.3	10.0	33.3%	0	7.01s	643	15	1,195

Kecerdasan umum	Skor	Konsistensi	Tingkat lulus per percobaan	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Gemma 4 31B	10.0	10.0	100.0%	9.57s	567	105	888
Gemma 4 26B A4B	10.0	10.0	100.0%	29.76s	567	25	5,075
Gemini 3 PRO Preview	10.0	10.0	100.0%	9.34s	486	78	374

Kepatuhan instruksi	Skor	Konsistensi	Tingkat lulus per percobaan	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Gemma 4 31B	10.0	10.0	100.0%	12.76s	777	533	2,035
Gemma 4 26B A4B	10.0	10.0	100.0%	17.54s	777	887	4,470
Gemini 3 PRO Preview	9.8	10.0	100.0%	3.26s	623	69	754

Pemecahan teka-teki	Skor	Konsistensi	Tingkat lulus per percobaan	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Gemma 4 31B	9.9	10.0	100.0%	26.91s	801	1,795	5,595
Gemma 4 26B A4B	10.0	10.0	100.0%	5.79s	801	410	2,128
Gemini 3 PRO Preview	10.0	10.0	100.0%	3.88s	570	225	1,215

Pemanggilan alat	Skor	Konsistensi	Tingkat lulus per percobaan	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Gemma 4 31B	3.0	10.0	0.0%	0ms	0	0	0
Gemma 4 26B A4B	10.0	10.0	100.0%	9.01s	6,096	450	1,256
Gemini 3 PRO Preview	10.0	10.0	100.0%	11.96s	5,556	324	971

Pengetahuan umum	Skor	Konsistensi	Tingkat lulus per percobaan	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Gemma 4 31B	3.0	10.0	0.0%	90.14s	218	1,692	10,014
Gemma 4 26B A4B	3.0	10.0	0.0%	180.87s	191	797	16,905
Gemini 3 PRO Preview	3.0	10.0	0.0%	0ms	0	0	0

Perbandingan Cepat

Ganti Pasangan Perbandingan

Seed-2.0-LitenonevsGemma 4 31BmediumTersedia gratis Gemma 4 31BmediumTersedia gratisvsGPT-5.6 Lunalow Gemma 4 26B A4BmediumTersedia gratisvsGLM 5.2none Gemma 4 26B A4BmediumTersedia gratisvsGLM 5.3low Gemma 4 26B A4BmediumTersedia gratisvsKAT-Coder-Pro V2.5none Claude Sonnet 5nonevsGemma 4 31BmediumTersedia gratis DeepSeek V4 PrononevsGemma 4 26B A4BmediumTersedia gratis Gemma 4 26B A4BmediumTersedia gratisvsLongCat 2.0low Gemma 4 31BmediumTersedia gratisvsQwen3.7 Flashnone Gemma 4 26B A4BmediumTersedia gratisvsSolar Pro 4low Gemma 4 31BmediumTersedia gratisvsInklinglow Gemma 4 31BmediumTersedia gratisvsQwen3.6 Flashnone