AI BENCHY Compare

Google: Gemma 4 31B vs OpenAI: GPT-5.4

Résumé

Comparaison benchmark Gemma 4 31B vs GPT-5.4 : Gemma 4 31B mène au score moyen avec 6.1 vs 5.8. Gemma 4 31B a le coût de benchmark le plus bas avec $0.004 vs $0.122. GPT-5.4 est plus rapide avec 1.42s vs 4.05s, avec des taux de réussite de 47.6% vs 36.5%.

Modèle recommandé: Gemma 4 31B - Il obtient le meilleur score ici (6.1) tout en coûtant environ 40.6x moins que GPT-5.4.

Benchmarks générés à partir des suites de tests AI BENCHY le: 2026-06-18

Métrique	Gemma 4 31B Gemma 4 31B none Sortie: 2026-04-02 Disponible gratuitement	GPT-5.4 GPT-5.4 none Sortie: 2026-03-05

Métrique	Gemma 4 31B Gemma 4 31B none Sortie: 2026-04-02 Disponible gratuitement	GPT-5.4 GPT-5.4 none Sortie: 2026-03-05
Score	6.1	5.8
Rang	#98	#112
Fiabilité	10.0	10.0
Cohérence	10.0	9.2
Tests corrects
Taux de réussite par tentative	47.6%	36.5%
Tests instables	0	2
Exécutions totales	63	63
Coût par résultat	0.034	1.740
Coût total	$0.004	$0.122
Prix d'entrée	$0.120 / 1M	$2.500 / 1M
Prix de sortie	$0.350 / 1M	$15.000 / 1M
Total des jetons d'entrée	20,911	34,212
Jetons de sortie	1,407	2,417
Jetons de raisonnement	0	0
Temps de réponse (moy.)	4.05s	1.42s
Temps de réponse (max)	26.13s	2.95s
Temps de réponse (total)	76.87s	29.87s

Génération showcase

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#98 Gemma 4 31B

none

Coût: $0.001
Temps: 12.8s
Tokens: 795 tok

#112 GPT-5.4

none

Coût: $0.026
Temps: 18.1s
Tokens: 1,792 tok

Meilleurs modèles par score

Score vs coût total

Temps de réponse (moy.)

Score vs Temps de réponse (moy.)

Total des jetons de sortie

Score vs Total des jetons de sortie

Répartition par catégorie

Astuces anti-IA	Score	Cohérence	Taux de réussite par tentative	Tests instables	Tests corrects	Temps de réponse (moy.)	Jetons d'entrée	Jetons de sortie	Jetons de raisonnement
Gemma 4 31B	6.5	10.0	50.0%	0		1.85s	852	45	0
GPT-5.4	3.2	8.0	8.3%	1		1.21s	606	406	0

Programmation	Score	Cohérence	Taux de réussite par tentative	Tests instables	Tests corrects	Temps de réponse (moy.)	Jetons d'entrée	Jetons de sortie	Jetons de raisonnement
Gemma 4 31B	5.5	10.0	33.3%	0		11.19s	8,381	735	0
GPT-5.4	5.5	10.0	33.3%	0		1.62s	7,305	516	0

Combiné	Score	Cohérence	Taux de réussite par tentative	Tests instables	Tests corrects	Temps de réponse (moy.)	Jetons d'entrée	Jetons de sortie	Jetons de raisonnement
Gemma 4 31B	3.0	10.0	0.0%	0		0ms	0	0	0
GPT-5.4	3.0	10.0	0.0%	0		2.89s	11,019	291	0

Analyse et extraction des données	Score	Cohérence	Taux de réussite par tentative	Tests instables	Tests corrects	Temps de réponse (moy.)	Jetons d'entrée	Jetons de sortie	Jetons de raisonnement
Gemma 4 31B	10.0	10.0	100.0%	0		2.25s	8,352	285	0
GPT-5.4	10.0	10.0	100.0%	0		1.04s	7,140	222	0

Spécifique au domaine	Score	Cohérence	Taux de réussite par tentative	Tests instables	Tests corrects	Temps de réponse (moy.)	Jetons d'entrée	Jetons de sortie	Jetons de raisonnement
Gemma 4 31B	7.7	10.0	66.7%	0		3.22s	903	27	0
GPT-5.4	5.3	7.2	44.4%	1		1.07s	723	50	0

Intelligence générale	Score	Cohérence	Taux de réussite par tentative	Tests instables	Tests corrects	Temps de réponse (moy.)	Jetons d'entrée	Jetons de sortie	Jetons de raisonnement
Gemma 4 31B	10.0	10.0	100.0%	0		2.09s	576	117	0
GPT-5.4	4.4	9.9	0.0%	0		1.78s	477	184	0

Suivi des instructions	Score	Cohérence	Taux de réussite par tentative	Tests instables	Tests corrects	Temps de réponse (moy.)	Jetons d'entrée	Jetons de sortie	Jetons de raisonnement
Gemma 4 31B	6.5	10.0	50.0%	0		2.84s	795	78	0
GPT-5.4	6.5	10.0	50.0%	0		1.07s	660	81	0

Résolution d'énigmes	Score	Cohérence	Taux de réussite par tentative	Tests instables	Tests corrects	Temps de réponse (moy.)	Jetons d'entrée	Jetons de sortie	Jetons de raisonnement
Gemma 4 31B	6.5	10.0	33.3%	0		4.23s	828	108	0
GPT-5.4	5.6	9.8	33.3%	0		1.44s	642	381	0

Appel d'outils	Score	Cohérence	Taux de réussite par tentative	Tests instables	Tests corrects	Temps de réponse (moy.)	Jetons d'entrée	Jetons de sortie	Jetons de raisonnement
Gemma 4 31B	3.0	10.0	0.0%	0		0ms	0	0	0
GPT-5.4	10.0	10.0	100.0%	0		2.75s	5,445	246	0

Culture générale	Score	Cohérence	Taux de réussite par tentative	Tests instables	Tests corrects	Temps de réponse (moy.)	Jetons d'entrée	Jetons de sortie	Jetons de raisonnement
Gemma 4 31B	3.0	10.0	0.0%	0		1.25s	224	12	0
GPT-5.4	3.0	10.0	0.0%	0		990ms	195	40	0

Comparaison rapide

Changer la paire de comparaison