AI BENCHY Compare

Google: Gemma 4 26B A4B vs StepFun: Step 3.5 Flash

Rezumat

Comparație benchmark Gemma 4 26B A4B vs Step 3.5 Flash: Step 3.5 Flash conduce la scorul mediu cu 6.6 vs 5.5. Gemma 4 26B A4B are costul de benchmark mai mic, $0.004 vs $0.070. Gemma 4 26B A4B este mai rapid cu 5.91s vs 72.53s, cu rate de reușită de 44.4% vs 54.0%.

Model recomandat: Step 3.5 Flash - Are cel mai puternic scor din această comparație (6.6) și cel mai bun echilibru între cost și timp de răspuns dintre toate cele 2 modele.

Benchmark-urile au fost generate din suitele de teste AI BENCHY la: 2026-07-02

Metrică	Gemma 4 26B A4B Gemma 4 26B A4B none Lansare: 2026-04-03 Disponibil gratuit	Step 3.5 Flash Step 3.5 Flash medium Lansare: 2026-02-01

Metrică	Gemma 4 26B A4B Gemma 4 26B A4B none Lansare: 2026-04-03 Disponibil gratuit	Step 3.5 Flash Step 3.5 Flash medium Lansare: 2026-02-01
Scor	5.5	6.6
Rang	#125	#83
Fiabilitate	10.0	10.0
Consistență	9.2	8.9
Teste corecte
Rată de trecere pe încercare	44.4%	54.0%
Teste instabile	2	1
Rulări totale	63	60
Cost per rezultat	0.068	0.198
Cost total	$0.004	$0.070
Preț de intrare	$0.060 / 1M	$0.100 / 1M
Preț de ieșire	$0.330 / 1M	$0.300 / 1M
Total tokenuri de intrare	40,038	34,431
Tokenuri de ieșire	1,824	91,587
Tokenuri de raționament	0	195,973
Timp de răspuns (mediu)	5.91s	72.53s
Timp de răspuns (maxim)	57.10s	453.94s
Timp de răspuns (total)	124.05s	1015.47s

Prezentare generare

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#125 Gemma 4 26B A4B

none

Cost: $0.001
Timp: 39.5s
Tokenuri: 790 tok

#83 Step 3.5 Flash

medium

Cost: $0.008
Timp: 277.1s
Tokenuri: 23,695 tok

Top modele după scor

Scor vs cost total

Timp de răspuns (mediu)

Scor vs Timp de răspuns (mediu)

Total tokenuri de ieșire

Scor vs Total tokenuri de ieșire

Defalcare pe categorii

Trucuri anti-AI	Scor	Consistență	Rată de trecere pe încercare	Teste instabile	Teste corecte	Timp de răspuns (mediu)	Tokenuri de intrare	Tokenuri de ieșire	Tokenuri de raționament
Gemma 4 26B A4B	8.3	10.0	75.0%	0		1.28s	852	230	0
Step 3.5 Flash	10.0	10.0	100.0%	0		40.57s	694	20,391	24,176

Programare	Scor	Consistență	Rată de trecere pe încercare	Teste instabile	Teste corecte	Timp de răspuns (mediu)	Tokenuri de intrare	Tokenuri de ieșire	Tokenuri de raționament
Gemma 4 26B A4B	3.7	7.2	22.2%	1		4.16s	7,736	476	0
Step 3.5 Flash	2.4	5.2	0.0%	0		258.38s	2,211	13,207	22,429

Combinat	Scor	Consistență	Rată de trecere pe încercare	Teste instabile	Teste corecte	Timp de răspuns (mediu)	Tokenuri de intrare	Tokenuri de ieșire	Tokenuri de raționament
Gemma 4 26B A4B	3.0	10.0	0.0%	0		30.53s	13,650	309	0
Step 3.5 Flash	10.0	10.0	100.0%	0		29.57s	13,638	1,176	12,984

Parsare și extragere de date	Scor	Consistență	Rată de trecere pe încercare	Teste instabile	Teste corecte	Timp de răspuns (mediu)	Tokenuri de intrare	Tokenuri de ieșire	Tokenuri de raționament
Gemma 4 26B A4B	10.0	10.0	100.0%	0		1.70s	8,352	285	0
Step 3.5 Flash	10.0	10.0	100.0%	0		15.01s	7,368	600	13,886

Specific domeniului	Scor	Consistență	Rată de trecere pe încercare	Teste instabile	Teste corecte	Timp de răspuns (mediu)	Tokenuri de intrare	Tokenuri de ieșire	Tokenuri de raționament
Gemma 4 26B A4B	3.6	7.2	22.2%	1		2.49s	903	27	0
Step 3.5 Flash	5.3	7.2	44.4%	1		170.45s	673	45,350	90,436

Inteligență generală	Scor	Consistență	Rată de trecere pe încercare	Teste instabile	Teste corecte	Timp de răspuns (mediu)	Tokenuri de intrare	Tokenuri de ieșire	Tokenuri de raționament
Gemma 4 26B A4B	4.0	10.0	0.0%	0		3.54s	576	85	0
Step 3.5 Flash	5.5	10.0	0.0%	0		22.39s	509	240	3,506

Respectarea instrucțiunilor	Scor	Consistență	Rată de trecere pe încercare	Teste instabile	Teste corecte	Timp de răspuns (mediu)	Tokenuri de intrare	Tokenuri de ieșire	Tokenuri de raționament
Gemma 4 26B A4B	6.3	10.0	50.0%	0		690ms	795	75	0
Step 3.5 Flash	8.3	10.0	50.0%	0		4.78s	705	2,364	3,521

Rezolvare de puzzle-uri	Scor	Consistență	Rată de trecere pe încercare	Teste instabile	Teste corecte	Timp de răspuns (mediu)	Tokenuri de intrare	Tokenuri de ieșire	Tokenuri de raționament
Gemma 4 26B A4B	6.2	10.0	33.3%	0		744ms	828	114	0
Step 3.5 Flash	5.3	10.0	33.3%	0		7.22s	711	5,630	10,861

Apelare instrumente	Scor	Consistență	Rată de trecere pe încercare	Teste instabile	Teste corecte	Timp de răspuns (mediu)	Tokenuri de intrare	Tokenuri de ieșire	Tokenuri de raționament
Gemma 4 26B A4B	10.0	10.0	100.0%	0		57.10s	6,123	210	0
Step 3.5 Flash	10.0	10.0	100.0%	0		11.91s	7,701	275	3,802

Cultură generală	Scor	Consistență	Rată de trecere pe încercare	Teste instabile	Teste corecte	Timp de răspuns (mediu)	Tokenuri de intrare	Tokenuri de ieșire	Tokenuri de raționament
Gemma 4 26B A4B	3.0	10.0	0.0%	0		778ms	223	13	0
Step 3.5 Flash	3.0	10.0	0.0%	0		108.45s	221	2,354	10,372

Comparație rapidă

Schimbă perechea de comparație