AI BENCHY Compare

Google: Gemini 2.5 Flash vs Google: Gemma 4 31B

Résumé

Comparaison benchmark Gemini 2.5 Flash vs Gemma 4 31B : Gemini 2.5 Flash mène au score moyen avec 8.2 vs 6.3. Gemma 4 31B a le coût de benchmark le plus bas avec $0.033 vs $0.379. Gemini 2.5 Flash est plus rapide avec 15.49s vs 56.55s, avec des taux de réussite de 69.8% vs 69.8%.

Modèle recommandé: Gemini 2.5 Flash - Il obtient le meilleur score ici (8.2) et répond environ 3.6x plus vite que Gemma 4 31B.

Benchmarks générés à partir des suites de tests AI BENCHY le: 2026-06-18

Métrique	Gemini 2.5 Flash Gemini 2.5 Flash medium Sortie: 2025-06-17	Gemma 4 31B Gemma 4 31B medium Sortie: 2026-04-02 Disponible gratuitement

Métrique	Gemini 2.5 Flash Gemini 2.5 Flash medium Sortie: 2025-06-17	Gemma 4 31B Gemma 4 31B medium Sortie: 2026-04-02 Disponible gratuitement
Score	8.2	6.3
Rang	#24	#88
Fiabilité	10.0	10.0
Cohérence	9.6	9.4
Tests corrects
Taux de réussite par tentative	69.8%	69.8%
Tests instables	1	1
Exécutions totales	63	63
Coût par résultat	2.701	0.257
Coût total	$0.379	$0.033
Prix d'entrée	$0.300 / 1M	$0.120 / 1M
Prix de sortie	$2.500 / 1M	$0.350 / 1M
Total des jetons d'entrée	34,476	17,957
Jetons de sortie	1,930	22,356
Jetons de raisonnement	145,145	65,726
Temps de réponse (moy.)	15.49s	56.55s
Temps de réponse (max)	95.48s	437.40s
Temps de réponse (total)	325.39s	1074.41s

Génération showcase

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#24 Gemini 2.5 Flash

medium

SVG invalide

Coût: $0.000
Temps: 274.0s
Tokens: 0 tok

#88 Gemma 4 31B

medium

Coût: $0.002
Temps: 45.7s
Tokens: 2,696 tok

Meilleurs modèles par score

Score vs coût total

Temps de réponse (moy.)

Score vs Temps de réponse (moy.)

Total des jetons de sortie

Score vs Total des jetons de sortie

Répartition par catégorie

Astuces anti-IA	Score	Cohérence	Taux de réussite par tentative	Tests instables	Tests corrects	Temps de réponse (moy.)	Jetons d'entrée	Jetons de sortie	Jetons de raisonnement
Gemini 2.5 Flash	8.4	10.0	75.0%	0		6.30s	492	255	10,233
Gemma 4 31B	10.0	10.0	100.0%	0		12.89s	816	962	2,046

Programmation	Score	Cohérence	Taux de réussite par tentative	Tests instables	Tests corrects	Temps de réponse (moy.)	Jetons d'entrée	Jetons de sortie	Jetons de raisonnement
Gemini 2.5 Flash	7.8	10.0	66.7%	0		41.01s	6,669	543	32,303
Gemma 4 31B	4.3	5.8	22.2%	1		219.76s	5,568	11,098	33,212

Combiné	Score	Cohérence	Taux de réussite par tentative	Tests instables	Tests corrects	Temps de réponse (moy.)	Jetons d'entrée	Jetons de sortie	Jetons de raisonnement
Gemini 2.5 Flash	10.0	10.0	100.0%	0		28.44s	12,522	303	11,922
Gemma 4 31B	3.0	10.0	0.0%	0		0ms	0	0	0

Analyse et extraction des données	Score	Cohérence	Taux de réussite par tentative	Tests instables	Tests corrects	Temps de réponse (moy.)	Jetons d'entrée	Jetons de sortie	Jetons de raisonnement
Gemini 2.5 Flash	10.0	10.0	100.0%	0		4.06s	7,257	279	2,325
Gemma 4 31B	10.0	10.0	100.0%	0		21.11s	8,334	1,822	2,951

Spécifique au domaine	Score	Cohérence	Taux de réussite par tentative	Tests instables	Tests corrects	Temps de réponse (moy.)	Jetons d'entrée	Jetons de sortie	Jetons de raisonnement
Gemini 2.5 Flash	5.9	7.2	55.6%	1		37.34s	633	18	80,702
Gemma 4 31B	7.7	10.0	66.7%	0		38.48s	876	4,349	8,985

Intelligence générale	Score	Cohérence	Taux de réussite par tentative	Tests instables	Tests corrects	Temps de réponse (moy.)	Jetons d'entrée	Jetons de sortie	Jetons de raisonnement
Gemini 2.5 Flash	4.8	10.0	0.0%	0		4.86s	486	92	1,899
Gemma 4 31B	10.0	10.0	100.0%	0		9.57s	567	105	888

Suivi des instructions	Score	Cohérence	Taux de réussite par tentative	Tests instables	Tests corrects	Temps de réponse (moy.)	Jetons d'entrée	Jetons de sortie	Jetons de raisonnement
Gemini 2.5 Flash	9.8	10.0	100.0%	0		2.62s	615	69	1,203
Gemma 4 31B	10.0	10.0	100.0%	0		12.76s	777	533	2,035

Résolution d'énigmes	Score	Cohérence	Taux de réussite par tentative	Tests instables	Tests corrects	Temps de réponse (moy.)	Jetons d'entrée	Jetons de sortie	Jetons de raisonnement
Gemini 2.5 Flash	7.7	10.0	66.7%	0		3.18s	558	126	2,499
Gemma 4 31B	9.9	10.0	100.0%	0		26.91s	801	1,795	5,595

Appel d'outils	Score	Cohérence	Taux de réussite par tentative	Tests instables	Tests corrects	Temps de réponse (moy.)	Jetons d'entrée	Jetons de sortie	Jetons de raisonnement
Gemini 2.5 Flash	10.0	10.0	100.0%	0		6.20s	5,088	234	1,140
Gemma 4 31B	3.0	10.0	0.0%	0		0ms	0	0	0

Culture générale	Score	Cohérence	Taux de réussite par tentative	Tests instables	Tests corrects	Temps de réponse (moy.)	Jetons d'entrée	Jetons de sortie	Jetons de raisonnement
Gemini 2.5 Flash	3.0	10.0	0.0%	0		2.76s	156	11	919
Gemma 4 31B	3.0	10.0	0.0%	0		90.14s	218	1,692	10,014

Comparaison rapide

Changer la paire de comparaison