AI BENCHY Compare

Google: Gemma 4 31B vs OpenAI: GPT-5.4

Muhtasari

Ulinganisho wa benchmark Gemma 4 31B vs GPT-5.4: Gemma 4 31B inaongoza kwa average score: 6.3 vs 5.8. Gemma 4 31B ina gharama ya chini ya benchmark: $0.033 vs $0.122. GPT-5.4 ni ya haraka zaidi: 1.42s vs 56.55s, na pass rates 69.8% vs 36.5%.

Muundo unaopendekezwa: Gemma 4 31B - It has the best score here (6.3), while costing about 3.7x less than GPT-5.4.

Benchmark zimetengenezwa kutoka seti za majaribio za AI BENCHY tarehe: 2026-06-12

Kipimo	Gemma 4 31B Gemma 4 31B medium Toleo: 2026-04-02 Inapatikana bure	GPT-5.4 GPT-5.4 none Toleo: 2026-03-05

Kipimo	Gemma 4 31B Gemma 4 31B medium Toleo: 2026-04-02 Inapatikana bure	GPT-5.4 GPT-5.4 none Toleo: 2026-03-05
Alama	6.3	5.8
Nafasi	#87	#116
Uaminifu	10.0	10.0
Uthabiti	9.4	9.2
Majaribio sahihi
Kiwango cha kupita kwa kila jaribio	69.8%	36.5%
Majaribio yasiyo thabiti	1	2
Jumla ya uendeshaji	63	63
Gharama kwa matokeo	0.257	1.740
Jumla ya gharama	$0.033	$0.122
Bei ya ingizo	$0.120 / 1M	$2.500 / 1M
Bei ya toleo	$0.350 / 1M	$15.000 / 1M
Jumla ya tokeni za ingizo	17,957	34,212
Tokeni za matokeo	22,356	2,417
Tokeni za hoja	65,726	0
Muda wa majibu (wastani)	56.55s	1.42s
Muda wa majibu (upeo)	437.40s	2.95s
Muda wa majibu (jumla)	1074.41s	29.87s

Generation showcase

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#87 Gemma 4 31B

medium

Cost: $0.002
Time: 45.7s
Tokens: 2,696 tok

#116 GPT-5.4

none

Cost: $0.026
Time: 18.1s
Tokens: 1,792 tok

Modeli bora kwa alama

Alama dhidi ya gharama ya jumla

Muda wa majibu (wastani)

Alama vs Muda wa majibu (wastani)

Jumla ya tokeni za matokeo

Alama vs Jumla ya tokeni za matokeo

Mgawanyo wa kategoria

Mbinu za kupinga AI	Alama	Uthabiti	Kiwango cha kupita kwa kila jaribio	Majaribio yasiyo thabiti	Majaribio sahihi	Muda wa majibu (wastani)	Tokeni za ingizo	Tokeni za matokeo	Tokeni za hoja
Gemma 4 31B	10.0	10.0	100.0%	0		12.89s	816	962	2,046
GPT-5.4	3.2	8.0	8.3%	1		1.21s	606	406	0

Uandishi wa msimbo	Alama	Uthabiti	Kiwango cha kupita kwa kila jaribio	Majaribio yasiyo thabiti	Majaribio sahihi	Muda wa majibu (wastani)	Tokeni za ingizo	Tokeni za matokeo	Tokeni za hoja
Gemma 4 31B	4.3	5.8	22.2%	1		219.76s	5,568	11,098	33,212
GPT-5.4	5.5	10.0	33.3%	0		1.62s	7,305	516	0

Mchanganyiko	Alama	Uthabiti	Kiwango cha kupita kwa kila jaribio	Majaribio yasiyo thabiti	Majaribio sahihi	Muda wa majibu (wastani)	Tokeni za ingizo	Tokeni za matokeo	Tokeni za hoja
Gemma 4 31B	3.0	10.0	0.0%	0		0ms	0	0	0
GPT-5.4	3.0	10.0	0.0%	0		2.89s	11,019	291	0

Uchanganuzi na uchimbaji wa data	Alama	Uthabiti	Kiwango cha kupita kwa kila jaribio	Majaribio yasiyo thabiti	Majaribio sahihi	Muda wa majibu (wastani)	Tokeni za ingizo	Tokeni za matokeo	Tokeni za hoja
Gemma 4 31B	10.0	10.0	100.0%	0		21.11s	8,334	1,822	2,951
GPT-5.4	10.0	10.0	100.0%	0		1.04s	7,140	222	0

Mahususi kwa domeni	Alama	Uthabiti	Kiwango cha kupita kwa kila jaribio	Majaribio yasiyo thabiti	Majaribio sahihi	Muda wa majibu (wastani)	Tokeni za ingizo	Tokeni za matokeo	Tokeni za hoja
Gemma 4 31B	7.7	10.0	66.7%	0		38.48s	876	4,349	8,985
GPT-5.4	5.3	7.2	44.4%	1		1.07s	723	50	0

Akili ya jumla	Alama	Uthabiti	Kiwango cha kupita kwa kila jaribio	Majaribio yasiyo thabiti	Majaribio sahihi	Muda wa majibu (wastani)	Tokeni za ingizo	Tokeni za matokeo	Tokeni za hoja
Gemma 4 31B	10.0	10.0	100.0%	0		9.57s	567	105	888
GPT-5.4	4.4	9.9	0.0%	0		1.78s	477	184	0

Ufuataji wa maagizo	Alama	Uthabiti	Kiwango cha kupita kwa kila jaribio	Majaribio yasiyo thabiti	Majaribio sahihi	Muda wa majibu (wastani)	Tokeni za ingizo	Tokeni za matokeo	Tokeni za hoja
Gemma 4 31B	10.0	10.0	100.0%	0		12.76s	777	533	2,035
GPT-5.4	6.5	10.0	50.0%	0		1.07s	660	81	0

Utatuzi wa mafumbo	Alama	Uthabiti	Kiwango cha kupita kwa kila jaribio	Majaribio yasiyo thabiti	Majaribio sahihi	Muda wa majibu (wastani)	Tokeni za ingizo	Tokeni za matokeo	Tokeni za hoja
Gemma 4 31B	9.9	10.0	100.0%	0		26.91s	801	1,795	5,595
GPT-5.4	5.6	9.8	33.3%	0		1.44s	642	381	0

Mwito wa zana	Alama	Uthabiti	Kiwango cha kupita kwa kila jaribio	Majaribio yasiyo thabiti	Majaribio sahihi	Muda wa majibu (wastani)	Tokeni za ingizo	Tokeni za matokeo	Tokeni za hoja
Gemma 4 31B	3.0	10.0	0.0%	0		0ms	0	0	0
GPT-5.4	10.0	10.0	100.0%	0		2.75s	5,445	246	0

Maarifa ya jumla	Alama	Uthabiti	Kiwango cha kupita kwa kila jaribio	Majaribio yasiyo thabiti	Majaribio sahihi	Muda wa majibu (wastani)	Tokeni za ingizo	Tokeni za matokeo	Tokeni za hoja
Gemma 4 31B	3.0	10.0	0.0%	0		90.14s	218	1,692	10,014
GPT-5.4	3.0	10.0	0.0%	0		990ms	195	40	0

Ulinganisho wa haraka

Badilisha jozi ya ulinganisho