AI BENCHY Compare

Google: Gemma 4 26B A4B vs StepFun: Step 3.7 Flash

Résumé

Comparaison benchmark Gemma 4 26B A4B vs Step 3.7 Flash : Gemma 4 26B A4B mène au score moyen avec 7.2 vs 7.1. Gemma 4 26B A4B a le coût de benchmark le plus bas avec $0.045 vs $1.148. Gemma 4 26B A4B est plus rapide avec 63.41s vs 64.46s, avec des taux de réussite de 69.8% vs 63.5%.

Modèle recommandé: Gemma 4 26B A4B - Il obtient le meilleur score ici (7.2) tout en coûtant environ 26.1x moins que Step 3.7 Flash.

Benchmarks générés à partir des suites de tests AI BENCHY le: 2026-06-12

Métrique	Gemma 4 26B A4B Gemma 4 26B A4B medium Sortie: 2026-04-03 Disponible gratuitement	Step 3.7 Flash Step 3.7 Flash high Sortie: 2026-05-29

Métrique	Gemma 4 26B A4B Gemma 4 26B A4B medium Sortie: 2026-04-03 Disponible gratuitement	Step 3.7 Flash Step 3.7 Flash high Sortie: 2026-05-29
Score	7.2	7.1
Rang	#60	#63
Fiabilité	10.0	10.0
Cohérence	9.2	8.2
Tests corrects
Taux de réussite par tentative	69.8%	63.5%
Tests instables	2	4
Exécutions totales	63	63
Coût par résultat	0.361	10.434
Coût total	$0.045	$1.148
Prix d'entrée	$0.060 / 1M	$0.200 / 1M
Prix de sortie	$0.330 / 1M	$1.150 / 1M
Total des jetons d'entrée	40,252	38,391
Jetons de sortie	28,000	991,355
Jetons de raisonnement	100,490	0
Temps de réponse (moy.)	63.41s	64.46s
Temps de réponse (max)	369.32s	364.99s
Temps de réponse (total)	1268.28s	1353.57s

Generation showcase

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#60 Gemma 4 26B A4B

medium

Invalid SVG

Cost: $0.000
Time: 300.0s
Tokens: 0 tok

#63 Step 3.7 Flash

high

Cost: $0.007
Time: 63.6s
Tokens: 6,030 tok

Meilleurs modèles par score

Score vs coût total

Temps de réponse (moy.)

Score vs Temps de réponse (moy.)

Total des jetons de sortie

Score vs Total des jetons de sortie

Répartition par catégorie

Astuces anti-IA	Score	Cohérence	Taux de réussite par tentative	Tests instables	Tests corrects	Temps de réponse (moy.)	Jetons d'entrée	Jetons de sortie	Jetons de raisonnement
Gemma 4 26B A4B	10.0	10.0	100.0%	0		6.20s	816	1,142	3,045
Step 3.7 Flash	10.0	10.0	100.0%	0		13.40s	696	42,656	0

Programmation	Score	Cohérence	Taux de réussite par tentative	Tests instables	Tests corrects	Temps de réponse (moy.)	Jetons d'entrée	Jetons de sortie	Jetons de raisonnement
Gemma 4 26B A4B	2.9	10.0	0.0%	0		272.54s	5,062	14,838	44,567
Step 3.7 Flash	4.0	6.0	22.2%	1		206.21s	6,057	327,340	0

Combiné	Score	Cohérence	Taux de réussite par tentative	Tests instables	Tests corrects	Temps de réponse (moy.)	Jetons d'entrée	Jetons de sortie	Jetons de raisonnement
Gemma 4 26B A4B	9.6	10.0	100.0%	0		73.55s	17,092	5,415	13,112
Step 3.7 Flash	10.0	10.0	100.0%	0		13.01s	13,638	8,802	0

Analyse et extraction des données	Score	Cohérence	Taux de réussite par tentative	Tests instables	Tests corrects	Temps de réponse (moy.)	Jetons d'entrée	Jetons de sortie	Jetons de raisonnement
Gemma 4 26B A4B	10.0	10.0	100.0%	0		16.51s	8,334	1,567	2,827
Step 3.7 Flash	10.0	10.0	100.0%	0		14.72s	7,368	23,113	0

Spécifique au domaine	Score	Cohérence	Taux de réussite par tentative	Tests instables	Tests corrects	Temps de réponse (moy.)	Jetons d'entrée	Jetons de sortie	Jetons de raisonnement
Gemma 4 26B A4B	2.9	4.4	22.2%	2		23.62s	516	2,469	7,105
Step 3.7 Flash	4.1	4.4	44.5%	2		149.64s	783	410,502	0

Intelligence générale	Score	Cohérence	Taux de réussite par tentative	Tests instables	Tests corrects	Temps de réponse (moy.)	Jetons d'entrée	Jetons de sortie	Jetons de raisonnement
Gemma 4 26B A4B	10.0	10.0	100.0%	0		29.76s	567	25	5,075
Step 3.7 Flash	5.5	10.0	0.0%	0		4.17s	510	2,862	0

Suivi des instructions	Score	Cohérence	Taux de réussite par tentative	Tests instables	Tests corrects	Temps de réponse (moy.)	Jetons d'entrée	Jetons de sortie	Jetons de raisonnement
Gemma 4 26B A4B	10.0	10.0	100.0%	0		17.54s	777	887	4,470
Step 3.7 Flash	9.8	10.0	100.0%	0		1.52s	705	2,010	0

Résolution d'énigmes	Score	Cohérence	Taux de réussite par tentative	Tests instables	Tests corrects	Temps de réponse (moy.)	Jetons d'entrée	Jetons de sortie	Jetons de raisonnement
Gemma 4 26B A4B	10.0	10.0	100.0%	0		5.79s	801	410	2,128
Step 3.7 Flash	5.3	7.2	44.4%	1		10.22s	711	25,422	0

Appel d'outils	Score	Cohérence	Taux de réussite par tentative	Tests instables	Tests corrects	Temps de réponse (moy.)	Jetons d'entrée	Jetons de sortie	Jetons de raisonnement
Gemma 4 26B A4B	10.0	10.0	100.0%	0		9.01s	6,096	450	1,256
Step 3.7 Flash	10.0	10.0	100.0%	0		2.79s	7,701	1,172	0

Culture générale	Score	Cohérence	Taux de réussite par tentative	Tests instables	Tests corrects	Temps de réponse (moy.)	Jetons d'entrée	Jetons de sortie	Jetons de raisonnement
Gemma 4 26B A4B	3.0	10.0	0.0%	0		180.87s	191	797	16,905
Step 3.7 Flash	3.0	10.0	0.0%	0		149.34s	222	147,476	0

Comparaison rapide

Changer la paire de comparaison

Step 3.7 FlashhighvsGLM 5.1medium Step 3.7 FlashhighvsMiMo-V2-Flashmedium Gemma 4 26B A4BmediumDisponible gratuitementvsQwen3.7 Plusnone Claude Opus 4.8nonevsGemma 4 26B A4BmediumDisponible gratuitement Qwen3.7 PlusnonevsStep 3.7 Flashhigh Kimi K2.7 CodemediumvsStep 3.7 Flashhigh Gemini 3.5 FlashnonevsStep 3.7 Flashhigh Claude Sonnet 4.6nonevsGemma 4 26B A4BmediumDisponible gratuitement Claude Opus 4.8nonevsStep 3.7 Flashhigh Step 3.7 FlashhighvsGLM 5V Turbomedium Gemini 3 Flash PreviewnonevsStep 3.7 Flashhigh Claude Sonnet 4.6nonevsStep 3.7 Flashhigh