Navigation
AI BENCHY
Advertise here

AI BENCHY Compare

Google: Gemini 3.1 Pro Preview vs StepFun: Step 3.7 Flash

Benchmarks générés à partir des suites de tests AI BENCHY le: 2026-05-29

Métrique Gemini 3.1 Pro Preview Gemini 3.1 Pro Preview medium Sortie: 2026-02-19 Step 3.7 Flash Step 3.7 Flash low Sortie: 2026-05-29
Score 9.3 7.4
Rang #4 #60
Fiabilité 10.0 10.0
Cohérence 10.0 8.7
Tests corrects
Taux de réussite par tentative 90.0% 68.3%
Tests instables 0 3
Exécutions totales 60 60
Coût par résultat 5.587 2.796
Coût total $1.006 $0.336
Prix d'entrée $2.000 / 1M $0.200 / 1M
Prix de sortie $12.000 / 1M $1.150 / 1M
Jetons de sortie 1,971 285,209
Jetons de raisonnement 75,384 0
Temps de réponse (moy.) 20.77s 16.06s
Temps de réponse (max) 88.68s 124.75s
Temps de réponse (total) 269.96s 321.11s

Meilleurs modèles par score

Score vs coût total

Temps de réponse (moy.)

Score vs Temps de réponse (moy.)

Total des jetons de sortie

Score vs Total des jetons de sortie

Répartition par catégorie

Astuces anti-IA Score Cohérence Taux de réussite par tentative Tests instables Tests corrects Temps de réponse (moy.) Jetons de sortie Jetons de raisonnement
Gemini 3.1 Pro Preview 10.0 10.0 100.0% 0 7.90s 112 3,218
Step 3.7 Flash 8.7 7.9 91.7% 1 4.02s 10,896 0
Programmation Score Cohérence Taux de réussite par tentative Tests instables Tests corrects Temps de réponse (moy.) Jetons de sortie Jetons de raisonnement
Gemini 3.1 Pro Preview 7.0 9.8 50.0% 0 54.28s 429 37,735
Step 3.7 Flash 10.0 10.0 100.0% 0 9.43s 14,569 0
Combiné Score Cohérence Taux de réussite par tentative Tests instables Tests corrects Temps de réponse (moy.) Jetons de sortie Jetons de raisonnement
Gemini 3.1 Pro Preview 9.5 10.0 100.0% 0 40.61s 432 9,281
Step 3.7 Flash 10.0 10.0 100.0% 0 7.98s 6,426 0
Analyse et extraction des données Score Cohérence Taux de réussite par tentative Tests instables Tests corrects Temps de réponse (moy.) Jetons de sortie Jetons de raisonnement
Gemini 3.1 Pro Preview 10.0 10.0 100.0% 0 7.72s 279 3,904
Step 3.7 Flash 7.3 5.8 83.3% 1 2.29s 2,667 0
Spécifique au domaine Score Cohérence Taux de réussite par tentative Tests instables Tests corrects Temps de réponse (moy.) Jetons de sortie Jetons de raisonnement
Gemini 3.1 Pro Preview 7.7 10.0 66.7% 0 32.73s 18 12,424
Step 3.7 Flash 5.3 7.2 44.4% 1 43.31s 104,487 0
Intelligence générale Score Cohérence Taux de réussite par tentative Tests instables Tests corrects Temps de réponse (moy.) Jetons de sortie Jetons de raisonnement
Gemini 3.1 Pro Preview 10.0 10.0 100.0% 0 11.77s 108 1,179
Step 3.7 Flash 3.4 9.3 0.0% 0 7.00s 4,604 0
Suivi des instructions Score Cohérence Taux de réussite par tentative Tests instables Tests corrects Temps de réponse (moy.) Jetons de sortie Jetons de raisonnement
Gemini 3.1 Pro Preview 10.0 10.0 100.0% 0 9.56s 72 2,236
Step 3.7 Flash 9.8 10.0 100.0% 0 1.58s 1,857 0
Résolution d'énigmes Score Cohérence Taux de réussite par tentative Tests instables Tests corrects Temps de réponse (moy.) Jetons de sortie Jetons de raisonnement
Gemini 3.1 Pro Preview 10.0 10.0 100.0% 0 6.90s 235 3,128
Step 3.7 Flash 5.5 9.9 33.3% 0 1.84s 3,564 0
Appel d'outils Score Cohérence Taux de réussite par tentative Tests instables Tests corrects Temps de réponse (moy.) Jetons de sortie Jetons de raisonnement
Gemini 3.1 Pro Preview 10.0 10.0 100.0% 0 23.15s 274 982
Step 3.7 Flash 10.0 10.0 100.0% 0 3.25s 1,360 0
Culture générale Score Cohérence Taux de réussite par tentative Tests instables Tests corrects Temps de réponse (moy.) Jetons de sortie Jetons de raisonnement
Gemini 3.1 Pro Preview 10.0 10.0 100.0% 0 6.27s 12 1,297
Step 3.7 Flash 3.0 10.0 0.0% 0 124.75s 134,779 0

Comparaison rapide

Changer la paire de comparaison