Google: Gemma 4 31B vs Thinking Machines: Inkling

Gemma 4 31B (medium) unggul dalam skor rata-rata dengan 6.3 vs 6.1. Gemma 4 31B (medium) memiliki biaya benchmark lebih rendah di $0.163 vs $0.187. Inkling (low) lebih cepat di 5.15s vs 75.38s, dengan tingkat keberhasilan 68.2% vs 54.6%.

Model yang direkomendasikanInkling (low)Its score stays close to the best score here (6.1 vs 6.3), while responding about 14.6x faster than Gemma 4 31B (medium).

Benchmark dihasilkan dari suite pengujian AI BENCHY pada: 2026-07-20

Metrik	Gemma 4 31B Gemma 4 31B medium Rilis: 2026-04-02 Tersedia gratis	Inkling Inkling low Rilis: 2026-07-18

Metrik	Gemma 4 31B Gemma 4 31B medium Rilis: 2026-04-02 Tersedia gratis	Inkling Inkling low Rilis: 2026-07-18
Skor	6.3	6.1
Peringkat	#110	#123
Keandalan	10.0	9.9
Konsistensi	9.0	8.6
Tes benar
Tingkat lulus per percobaan	68.2%	54.6%
Tes tidak stabil	2	4
Total Run	66	66
Biaya per hasil	1.044	1.866
Total Biaya	$0.163	$0.187
Harga input	$0.220 / 1M	$1.000 / 1M
Harga output	$0.550 / 1M	$4.050 / 1M
Total token input	94,992	109,884
Token output	34,468	8,579
Token penalaran	223,278	10,343
Waktu respons (rata-rata)	75.38s	5.15s
Waktu respons (maks)	437.40s	41.58s
Waktu respons (total)	1507.52s	113.39s

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#110 Gemma 4 31B

medium

Biaya: $0.002
Waktu: 45.7s
Token: 2,696 tok

#123 Thinking Machines: Inkling

low

Biaya: $0.002
Waktu: 6.1s
Token: 502 tok

Model teratas berdasarkan skor

Skor vs Total Biaya

Waktu respons (rata-rata)

Skor vs Waktu respons (rata-rata)

Total token output

Skor vs Total token output

Rincian Kategori

Kategori:

Trik anti-AI	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Gemma 4 31B	10.0	10.0	100.0%	0		12.89s	816	962	2,046
Inkling	8.3	10.0	75.0%	0		2.51s	702	172	1,024

Pemrograman	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Gemma 4 31B	4.3	5.8	22.2%	1		219.76s	5,568	11,098	33,212
Inkling	5.1	7.2	22.2%	1		8.71s	7,374	355	4,961

Gabungan	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Gemma 4 31B	2.9	5.8	16.7%	1		433.11s	77,035	12,112	157,552
Inkling	2.9	5.8	16.7%	1		22.73s	85,854	6,920	1,367

Parsing dan ekstraksi data	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Gemma 4 31B	10.0	10.0	100.0%	0		21.11s	8,334	1,822	2,951
Inkling	10.0	10.0	100.0%	0		2.07s	7,068	216	344

Spesifik domain	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Gemma 4 31B	7.7	10.0	66.7%	0		38.48s	876	4,349	8,985
Inkling	5.3	10.0	33.3%	0		1.99s	795	66	504

Kecerdasan umum	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Gemma 4 31B	10.0	10.0	100.0%	0		9.57s	567	105	888
Inkling	10.0	10.0	100.0%	0		3.44s	501	160	213

Kepatuhan instruksi	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Gemma 4 31B	10.0	10.0	100.0%	0		12.76s	777	533	2,035
Inkling	9.8	10.0	100.0%	0		1.81s	708	93	379

Pemecahan teka-teki	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Gemma 4 31B	9.9	10.0	100.0%	0		26.91s	801	1,795	5,595
Inkling	6.4	5.0	66.7%	2		2.97s	714	347	908

Pemanggilan alat	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Gemma 4 31B	3.0	10.0	0.0%	0		0ms	0	0	0
Inkling	3.0	10.0	0.0%	0		2.57s	5,949	219	0

Pengetahuan umum	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Gemma 4 31B	3.0	10.0	0.0%	0		90.14s	218	1,692	10,014
Inkling	3.0	10.0	0.0%	0		3.12s	219	31	643

Perbandingan Cepat

Ganti Pasangan Perbandingan

Gemini 3.1 Flash LitenonevsInklinglow gpt-oss-120bmediumvsInklinglow Qwen3.6 FlashnonevsInklinglow Gemma 4 31BmediumTersedia gratisvsLongCat 2.0none Qwen3.5-FlashnonevsInklinglow Claude Sonnet 5nonevsGemma 4 31BmediumTersedia gratis Qwen3.5 Plus 2026-04-20nonevsInklinglow Gemini 3.1 Flash LiteminimalvsInklinglow Qwen3.5-35B-A3BnonevsInklinglow GPT-5 NanomediumvsInklinglow Nemotron 3 UltranoneTersedia gratisvsInklinglow Qwen3.5-35B-A3BmediumvsInklinglow