Navigation
Advertise here

Gemini 2.5 Flash vs Step 3.5 Flash (medium)

Gemini 2.5 Flash mène au score moyen avec 5.5 vs 5.4. Gemini 2.5 Flash a le coût de benchmark le plus bas avec $0.017 vs $0.105. Gemini 2.5 Flash est plus rapide avec 6.00s vs 190.48s, avec des taux de réussite de 37.7% vs 49.3%.

Benchmarks générés à partir des suites de tests AI BENCHY le: 2026-10-01

Modèles comparés

Rang
#266
Total des jetons de sortie
1,890
Temps de réponse (moy.)
6.00s
Coût total
$0.017
Rang
#276
Total des jetons de sortie
607,130
Temps de réponse (moy.)
190.48s
Coût total
$0.105
Modèle recommandé Gemini 2.5 Flash

Il obtient le meilleur score ici (5.5) tout en coûtant environ 6.3x moins que Step 3.5 Flash (medium).

Comparaison détaillée

Métrique Gemini 2.5 Flash Gemini 2.5 Flash none Sortie: 2025-06-17 Step 3.5 Flash Step 3.5 Flash medium Sortie: 2026-02-01
Score 5.5 5.4
Rang #266 #276
Fiabilité 10.0 10.0
Cohérence 9.6 8.3
Tentatives 69/69 66/69
Tests corrects
Taux de réussite par tentative 37.7% 49.3%
Tests instables 1 3
Exécutions totales 69 66
Coût par résultat 0.209 1.047
Coût total $0.017 $0.105
Prix d'entrée $0.300 / 1M $0.100 / 1M
Prix de sortie $2.500 / 1M $0.300 / 1M
Total des jetons d'entrée 39,886 139,086
Jetons de sortie 1,890 193,584
Jetons de raisonnement 0 413,546
Temps de réponse (moy.) 6.00s 190.48s
Temps de réponse (max) 118.00s 1597.85s
Temps de réponse (total) 138.04s 3238.23s
Paramètres ~350B au total (~20B actifs) 196B au total (11B actifs)
Disponibilité Source fermée Open source

Génération showcase de modèles

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#266 Gemini 2.5 Flash

none
SVG invalide
Coût
$0.164
Temps
215.5s
Tokens
65,659 tok

#276 Step 3.5 Flash

medium
Coût
$0.008
Temps
277.1s
Tokens
23,695 tok

Meilleurs modèles par score

Score vs coût total

Temps de réponse (moy.)

Score vs Temps de réponse (moy.)

Total des jetons de sortie

Score vs Total des jetons de sortie

Répartition par catégorie

Programmation Score Cohérence Taux de réussite par tentative Tests instables Tests corrects Temps de réponse (moy.) Jetons d'entrée Jetons de sortie Jetons de raisonnement
Gemini 2.5 Flash 5.5 10.0 33.3% 0 736ms 8,122 483 0
Step 3.5 Flash 2.4 5.2 0.0% 0 258.38s 2,211 13,207 22,429

Comparaison rapide

Changer la paire de comparaison