AI BENCHY Compare

Google: Gemma 4 31B vs OpenAI: GPT-5.4 Mini

Benchmark zimetengenezwa kutoka seti za majaribio za AI BENCHY tarehe: 2026-05-10

Kipimo	Gemma 4 31B Gemma 4 31B none Toleo: 2026-04-02 Inapatikana bure	GPT-5.4 Mini GPT-5.4 Mini medium Toleo: 2026-03-17

Kipimo	Gemma 4 31B Gemma 4 31B none Toleo: 2026-04-02 Inapatikana bure	GPT-5.4 Mini GPT-5.4 Mini medium Toleo: 2026-03-17
Alama	6.9	7.2
Nafasi	#66	#62
Uaminifu	10.0	10.0
Uthabiti	10.0	7.9
Majaribio sahihi
Kiwango cha kupita kwa kila jaribio	52.6%	68.4%
Majaribio yasiyo thabiti	0	5
Jumla ya uendeshaji	57	57
Gharama kwa matokeo	0.025	3.443
Jumla ya gharama	$0.003	$0.345
Bei ya ingizo	$0.130 / 1M	$0.750 / 1M
Bei ya toleo	$0.380 / 1M	$4.500 / 1M
Tokeni za matokeo	1,371	2,163
Tokeni za hoja	0	69,741
Muda wa majibu (wastani)	3.86s	16.00s
Muda wa majibu (upeo)	26.13s	102.91s
Muda wa majibu (jumla)	65.57s	303.99s

Modeli bora kwa alama

Alama dhidi ya gharama ya jumla

Muda wa majibu (wastani)

Alama vs Muda wa majibu (wastani)

Jumla ya tokeni za matokeo

Alama vs Jumla ya tokeni za matokeo

Mgawanyo wa kategoria

Mbinu za kupinga AI	Alama	Uthabiti	Kiwango cha kupita kwa kila jaribio	Majaribio yasiyo thabiti	Majaribio sahihi	Muda wa majibu (wastani)	Tokeni za matokeo	Tokeni za hoja
Gemma 4 31B	6.5	10.0	50.0%	0		1.85s	45	0
GPT-5.4 Mini	8.6	7.9	91.7%	1		4.05s	296	2,876

Uandishi wa msimbo	Alama	Uthabiti	Kiwango cha kupita kwa kila jaribio	Majaribio yasiyo thabiti	Majaribio sahihi	Muda wa majibu (wastani)	Tokeni za matokeo	Tokeni za hoja
Gemma 4 31B	10.0	10.0	100.0%	0		26.13s	699	0
GPT-5.4 Mini	10.0	10.0	100.0%	0		7.76s	423	1,548

Mchanganyiko	Alama	Uthabiti	Kiwango cha kupita kwa kila jaribio	Majaribio yasiyo thabiti	Majaribio sahihi	Muda wa majibu (wastani)	Tokeni za matokeo	Tokeni za hoja
Gemma 4 31B	3.0	10.0	0.0%	0		0ms	0	0
GPT-5.4 Mini	10.0	10.0	100.0%	0		17.81s	317	4,317

Uchanganuzi na uchimbaji wa data	Alama	Uthabiti	Kiwango cha kupita kwa kila jaribio	Majaribio yasiyo thabiti	Majaribio sahihi	Muda wa majibu (wastani)	Tokeni za matokeo	Tokeni za hoja
Gemma 4 31B	10.0	10.0	100.0%	0		2.25s	285	0
GPT-5.4 Mini	10.0	10.0	100.0%	0		2.43s	234	650

Mahususi kwa domeni	Alama	Uthabiti	Kiwango cha kupita kwa kila jaribio	Majaribio yasiyo thabiti	Majaribio sahihi	Muda wa majibu (wastani)	Tokeni za matokeo	Tokeni za hoja
Gemma 4 31B	7.7	10.0	66.7%	0		3.22s	27	0
GPT-5.4 Mini	4.1	4.4	44.5%	2		65.31s	60	43,286

Akili ya jumla	Alama	Uthabiti	Kiwango cha kupita kwa kila jaribio	Majaribio yasiyo thabiti	Majaribio sahihi	Muda wa majibu (wastani)	Tokeni za matokeo	Tokeni za hoja
Gemma 4 31B	10.0	10.0	100.0%	0		2.09s	117	0
GPT-5.4 Mini	4.5	10.0	0.0%	0		3.72s	150	510

Ufuataji wa maagizo	Alama	Uthabiti	Kiwango cha kupita kwa kila jaribio	Majaribio yasiyo thabiti	Majaribio sahihi	Muda wa majibu (wastani)	Tokeni za matokeo	Tokeni za hoja
Gemma 4 31B	6.5	10.0	50.0%	0		2.84s	78	0
GPT-5.4 Mini	7.4	6.7	66.7%	1		2.50s	129	1,337

Utatuzi wa mafumbo	Alama	Uthabiti	Kiwango cha kupita kwa kila jaribio	Majaribio yasiyo thabiti	Majaribio sahihi	Muda wa majibu (wastani)	Tokeni za matokeo	Tokeni za hoja
Gemma 4 31B	6.5	10.0	33.3%	0		2.95s	108	0
GPT-5.4 Mini	7.8	10.0	66.7%	0		4.33s	271	2,449

Mwito wa zana	Alama	Uthabiti	Kiwango cha kupita kwa kila jaribio	Majaribio yasiyo thabiti	Majaribio sahihi	Muda wa majibu (wastani)	Tokeni za matokeo	Tokeni za hoja
Gemma 4 31B	3.0	10.0	0.0%	0		0ms	0	0
GPT-5.4 Mini	4.7	1.6	66.7%	1		9.62s	251	2,594

Maarifa ya jumla	Alama	Uthabiti	Kiwango cha kupita kwa kila jaribio	Majaribio yasiyo thabiti	Majaribio sahihi	Muda wa majibu (wastani)	Tokeni za matokeo	Tokeni za hoja
Gemma 4 31B	3.0	10.0	0.0%	0		1.25s	12	0
GPT-5.4 Mini	3.0	10.0	0.0%	0		30.10s	32	10,174

Ulinganisho wa haraka

Badilisha jozi ya ulinganisho

Claude Sonnet 4.6nonevsGPT-5.4 Minimedium DeepSeek V4 ProhighvsGemma 4 31BnoneInapatikana bure Gemma 4 31BnoneInapatikana burevsGrok 4.20medium Gemma 4 31BnoneInapatikana burevsGPT-5 Minimedium Ring 2.6 1tnoneInapatikana burevsGPT-5.4 Minimedium Gemma 4 31BnoneInapatikana burevsKimi K2.5medium GPT-5.4 MinimediumvsQwen3.6 Max Previewnone Gemma 4 31BnoneInapatikana burevsQwen3.6 27Bmedium Gemma 4 31BnoneInapatikana burevsMiMo-V2-Omnimedium DeepSeek V3.2mediumvsGemma 4 31BnoneInapatikana bure DeepSeek V4 ProhighvsGPT-5.4 Minimedium Gemma 4 31BnoneInapatikana burevsGPT-5.2medium