AI BENCHY Compare

Google: Gemma 4 31B vs StepFun: Step 3.7 Flash

Résumé

Comparaison benchmark Gemma 4 31B vs Step 3.7 Flash : Step 3.7 Flash mène au score moyen avec 8.5 vs 6.3. Gemma 4 31B a le coût de benchmark le plus bas avec $0.033 vs $0.376. Step 3.7 Flash est plus rapide avec 20.35s vs 56.55s, avec des taux de réussite de 69.8% vs 73.0%.

Modèle recommandé: Step 3.7 Flash - Il obtient le meilleur score ici (8.5) et répond environ 2.8x plus vite que Gemma 4 31B.

Benchmarks générés à partir des suites de tests AI BENCHY le: 2026-06-18

Métrique	Gemma 4 31B Gemma 4 31B medium Sortie: 2026-04-02 Disponible gratuitement	Step 3.7 Flash Step 3.7 Flash medium Sortie: 2026-05-29

Métrique	Gemma 4 31B Gemma 4 31B medium Sortie: 2026-04-02 Disponible gratuitement	Step 3.7 Flash Step 3.7 Flash medium Sortie: 2026-05-29
Score	6.3	8.5
Rang	#88	#20
Fiabilité	10.0	9.9
Cohérence	9.4	9.3
Tests corrects
Taux de réussite par tentative	69.8%	73.0%
Tests instables	1	2
Exécutions totales	63	61
Coût par résultat	0.257	2.686
Coût total	$0.033	$0.376
Prix d'entrée	$0.120 / 1M	$0.200 / 1M
Prix de sortie	$0.350 / 1M	$1.150 / 1M
Total des jetons d'entrée	17,957	39,981
Jetons de sortie	22,356	319,958
Jetons de raisonnement	65,726	0
Temps de réponse (moy.)	56.55s	20.35s
Temps de réponse (max)	437.40s	113.98s
Temps de réponse (total)	1074.41s	427.42s

Génération showcase

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#88 Gemma 4 31B

medium

Coût: $0.002
Temps: 45.7s
Tokens: 2,696 tok

#20 Step 3.7 Flash

medium

Coût: $0.006
Temps: 46.2s
Tokens: 4,466 tok

Meilleurs modèles par score

Score vs coût total

Temps de réponse (moy.)

Score vs Temps de réponse (moy.)

Total des jetons de sortie

Score vs Total des jetons de sortie

Répartition par catégorie

Astuces anti-IA	Score	Cohérence	Taux de réussite par tentative	Tests instables	Tests corrects	Temps de réponse (moy.)	Jetons d'entrée	Jetons de sortie	Jetons de raisonnement
Gemma 4 31B	10.0	10.0	100.0%	0		12.89s	816	962	2,046
Step 3.7 Flash	8.7	7.9	91.7%	1		9.65s	756	32,185	0

Programmation	Score	Cohérence	Taux de réussite par tentative	Tests instables	Tests corrects	Temps de réponse (moy.)	Jetons d'entrée	Jetons de sortie	Jetons de raisonnement
Gemma 4 31B	4.3	5.8	22.2%	1		219.76s	5,568	11,098	33,212
Step 3.7 Flash	8.8	7.8	88.9%	1		27.42s	7,437	44,797	0

Combiné	Score	Cohérence	Taux de réussite par tentative	Tests instables	Tests corrects	Temps de réponse (moy.)	Jetons d'entrée	Jetons de sortie	Jetons de raisonnement
Gemma 4 31B	3.0	10.0	0.0%	0		0ms	0	0	0
Step 3.7 Flash	10.0	10.0	100.0%	0		9.06s	13,683	7,106	0

Analyse et extraction des données	Score	Cohérence	Taux de réussite par tentative	Tests instables	Tests corrects	Temps de réponse (moy.)	Jetons d'entrée	Jetons de sortie	Jetons de raisonnement
Gemma 4 31B	10.0	10.0	100.0%	0		21.11s	8,334	1,822	2,951
Step 3.7 Flash	10.0	10.0	100.0%	0		2.75s	7,398	3,020	0

Spécifique au domaine	Score	Cohérence	Taux de réussite par tentative	Tests instables	Tests corrects	Temps de réponse (moy.)	Jetons d'entrée	Jetons de sortie	Jetons de raisonnement
Gemma 4 31B	7.7	10.0	66.7%	0		38.48s	876	4,349	8,985
Step 3.7 Flash	7.7	10.0	66.7%	0		48.27s	708	70,347	0

Intelligence générale	Score	Cohérence	Taux de réussite par tentative	Tests instables	Tests corrects	Temps de réponse (moy.)	Jetons d'entrée	Jetons de sortie	Jetons de raisonnement
Gemma 4 31B	10.0	10.0	100.0%	0		9.57s	567	105	888
Step 3.7 Flash	4.0	10.0	0.0%	0		6.85s	525	3,987	0

Suivi des instructions	Score	Cohérence	Taux de réussite par tentative	Tests instables	Tests corrects	Temps de réponse (moy.)	Jetons d'entrée	Jetons de sortie	Jetons de raisonnement
Gemma 4 31B	10.0	10.0	100.0%	0		12.76s	777	533	2,035
Step 3.7 Flash	9.8	10.0	100.0%	0		1.83s	735	2,166	0

Résolution d'énigmes	Score	Cohérence	Taux de réussite par tentative	Tests instables	Tests corrects	Temps de réponse (moy.)	Jetons d'entrée	Jetons de sortie	Jetons de raisonnement
Gemma 4 31B	9.9	10.0	100.0%	0		26.91s	801	1,795	5,595
Step 3.7 Flash	5.7	9.9	33.3%	0		6.19s	756	15,071	0

Appel d'outils	Score	Cohérence	Taux de réussite par tentative	Tests instables	Tests corrects	Temps de réponse (moy.)	Jetons d'entrée	Jetons de sortie	Jetons de raisonnement
Gemma 4 31B	3.0	10.0	0.0%	0		0ms	0	0	0
Step 3.7 Flash	10.0	10.0	100.0%	0		4.16s	7,746	2,115	0

Culture générale	Score	Cohérence	Taux de réussite par tentative	Tests instables	Tests corrects	Temps de réponse (moy.)	Jetons d'entrée	Jetons de sortie	Jetons de raisonnement
Gemma 4 31B	3.0	10.0	0.0%	0		90.14s	218	1,692	10,014
Step 3.7 Flash	3.0	10.0	0.0%	0		113.98s	237	139,164	0

Comparaison rapide

Changer la paire de comparaison