AI BENCHY Compare

Google: Gemma 4 31B vs Mistral: Mistral Small 4

Rezumat

Comparație benchmark Gemma 4 31B vs Mistral Small 4: Gemma 4 31B conduce la scorul mediu cu 6.3 vs 5.1. Mistral Small 4 are costul de benchmark mai mic, $0.007 vs $0.033. Mistral Small 4 este mai rapid cu 630ms vs 56.55s, cu rate de reușită de 69.8% vs 27.0%.

Model recomandat: Mistral Small 4 - Oferă cel mai bun compromis per total: scor competitiv (5.1), cost mai mic decât Gemma 4 31B și timp de răspuns echilibrat.

Benchmark-urile au fost generate din suitele de teste AI BENCHY la: 2026-06-12

Metrică	Gemma 4 31B Gemma 4 31B medium Lansare: 2026-04-02 Disponibil gratuit	Mistral Small 4 Mistral Small 4 none Lansare: 2026-03-16

Metrică	Gemma 4 31B Gemma 4 31B medium Lansare: 2026-04-02 Disponibil gratuit	Mistral Small 4 Mistral Small 4 none Lansare: 2026-03-16
Scor	6.3	5.1
Rang	#87	#136
Fiabilitate	10.0	10.0
Consistență	9.4	9.5
Teste corecte
Rată de trecere pe încercare	69.8%	27.0%
Teste instabile	1	1
Rulări totale	63	63
Cost per rezultat	0.257	0.139
Cost total	$0.033	$0.007
Preț de intrare	$0.120 / 1M	$0.150 / 1M
Preț de ieșire	$0.350 / 1M	$0.600 / 1M
Total tokenuri de intrare	17,957	37,309
Tokenuri de ieșire	22,356	2,201
Tokenuri de raționament	65,726	0
Timp de răspuns (mediu)	56.55s	630ms
Timp de răspuns (maxim)	437.40s	1.72s
Timp de răspuns (total)	1074.41s	13.22s

Generation showcase

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#87 Gemma 4 31B

medium

Cost: $0.002
Time: 45.7s
Tokens: 2,696 tok

#136 Mistral Small 4

none

Cost: $0.002
Time: 10.4s
Tokens: 2,370 tok

Top modele după scor

Scor vs cost total

Timp de răspuns (mediu)

Scor vs Timp de răspuns (mediu)

Total tokenuri de ieșire

Scor vs Total tokenuri de ieșire

Defalcare pe categorii

Trucuri anti-AI	Scor	Consistență	Rată de trecere pe încercare	Teste instabile	Teste corecte	Timp de răspuns (mediu)	Tokenuri de intrare	Tokenuri de ieșire	Tokenuri de raționament
Gemma 4 31B	10.0	10.0	100.0%	0		12.89s	816	962	2,046
Mistral Small 4	3.4	7.9	16.7%	1		395ms	708	182	0

Programare	Scor	Consistență	Rată de trecere pe încercare	Teste instabile	Teste corecte	Timp de răspuns (mediu)	Tokenuri de intrare	Tokenuri de ieșire	Tokenuri de raționament
Gemma 4 31B	4.3	5.8	22.2%	1		219.76s	5,568	11,098	33,212
Mistral Small 4	3.7	9.7	0.0%	0		901ms	7,636	619	0

Combinat	Scor	Consistență	Rată de trecere pe încercare	Teste instabile	Teste corecte	Timp de răspuns (mediu)	Tokenuri de intrare	Tokenuri de ieșire	Tokenuri de raționament
Gemma 4 31B	3.0	10.0	0.0%	0		0ms	0	0	0
Mistral Small 4	3.0	10.0	0.0%	0		1.72s	11,640	496	0

Parsare și extragere de date	Scor	Consistență	Rată de trecere pe încercare	Teste instabile	Teste corecte	Timp de răspuns (mediu)	Tokenuri de intrare	Tokenuri de ieșire	Tokenuri de raționament
Gemma 4 31B	10.0	10.0	100.0%	0		21.11s	8,334	1,822	2,951
Mistral Small 4	10.0	10.0	100.0%	0		822ms	7,914	261	0

Specific domeniului	Scor	Consistență	Rată de trecere pe încercare	Teste instabile	Teste corecte	Timp de răspuns (mediu)	Tokenuri de intrare	Tokenuri de ieșire	Tokenuri de raționament
Gemma 4 31B	7.7	10.0	66.7%	0		38.48s	876	4,349	8,985
Mistral Small 4	5.3	10.0	33.3%	0		367ms	798	28	0

Inteligență generală	Scor	Consistență	Rată de trecere pe încercare	Teste instabile	Teste corecte	Timp de răspuns (mediu)	Tokenuri de intrare	Tokenuri de ieșire	Tokenuri de raționament
Gemma 4 31B	10.0	10.0	100.0%	0		9.57s	567	105	888
Mistral Small 4	4.0	10.0	0.0%	0		729ms	519	205	0

Respectarea instrucțiunilor	Scor	Consistență	Rată de trecere pe încercare	Teste instabile	Teste corecte	Timp de răspuns (mediu)	Tokenuri de intrare	Tokenuri de ieșire	Tokenuri de raționament
Gemma 4 31B	10.0	10.0	100.0%	0		12.76s	777	533	2,035
Mistral Small 4	6.5	10.0	50.0%	0		380ms	729	69	0

Rezolvare de puzzle-uri	Scor	Consistență	Rată de trecere pe încercare	Teste instabile	Teste corecte	Timp de răspuns (mediu)	Tokenuri de intrare	Tokenuri de ieșire	Tokenuri de raționament
Gemma 4 31B	9.9	10.0	100.0%	0		26.91s	801	1,795	5,595
Mistral Small 4	3.1	9.9	0.0%	0		399ms	735	111	0

Apelare instrumente	Scor	Consistență	Rată de trecere pe încercare	Teste instabile	Teste corecte	Timp de răspuns (mediu)	Tokenuri de intrare	Tokenuri de ieșire	Tokenuri de raționament
Gemma 4 31B	3.0	10.0	0.0%	0		0ms	0	0	0
Mistral Small 4	10.0	10.0	100.0%	0		1.40s	6,420	213	0

Cultură generală	Scor	Consistență	Rată de trecere pe încercare	Teste instabile	Teste corecte	Timp de răspuns (mediu)	Tokenuri de intrare	Tokenuri de ieșire	Tokenuri de raționament
Gemma 4 31B	3.0	10.0	0.0%	0		90.14s	218	1,692	10,014
Mistral Small 4	3.0	10.0	0.0%	0		397ms	210	17	0

Comparație rapidă

Schimbă perechea de comparație