Navigatie
AI BENCHY
Vergelijken Grafieken Methodologie
โค๏ธ Made by XCS
Your ad here

AI BENCHY Compare

Google: Gemini 2.5 Flash vs StepFun: Step 3.5 Flash

Vergelijken:

Benchmarks gegenereerd uit AI BENCHY-testsuites op: 2026-03-06

Metriek Google: Gemini 2.5 Flash medium Releasedatum: 2025-06-17 StepFun: Step 3.5 Flash medium Releasedatum: 2026-02-01 Gratis beschikbaar
Rang #16 #13
Gem. score 7.4 7.4
Consistentie 9.5 9.1
Kosten per resultaat 2.619 0.000
Totale kosten $0.288 $0.000
Correcte tests
Slaagpercentage per poging 72.9% 68.8%
Instabiele tests 1 2
Totaal runs 48 (16 x 3) 48 (16 x 3)
Uitvoer-tokens 1,370 71,452
Redeneer-tokens 110,522 155,147
Responstijd (gem.) 12.35s 29.10s
Responstijd (max) 95.48s 170.45s
Responstijd (totaal) 197.62s 290.96s

Topmodellen op score

Score vs totale kosten

Responstijd (gem.)

Gem. score vs Responstijd (gem.)

Categorie-uitsplitsing

Anti-AI-trucs Score Consistentie Slaagpercentage per poging Instabiele tests Correcte tests Responstijd (gem.) Uitvoer-tokens Redeneer-tokens
Google: Gemini 2.5 Flash 7.3 10.0 66.7% 0 6.98s 249 8,832
StepFun: Step 3.5 Flash 10.0 10.0 100.0% 0 18.54s 13,924 17,208
Gecombineerd Score Consistentie Slaagpercentage per poging Instabiele tests Correcte tests Responstijd (gem.) Uitvoer-tokens Redeneer-tokens
Google: Gemini 2.5 Flash 10.0 10.0 100.0% 0 28.44s 303 11,922
StepFun: Step 3.5 Flash 10.0 10.0 100.0% 0 29.57s 1,176 12,984
Gegevensparsering en extractie Score Consistentie Slaagpercentage per poging Instabiele tests Correcte tests Responstijd (gem.) Uitvoer-tokens Redeneer-tokens
Google: Gemini 2.5 Flash 9.9 10.0 100.0% 0 4.06s 279 2,325
StepFun: Step 3.5 Flash 10.0 10.0 100.0% 0 15.01s 600 13,886
Domeinspecifiek Score Consistentie Slaagpercentage per poging Instabiele tests Correcte tests Responstijd (gem.) Uitvoer-tokens Redeneer-tokens
Google: Gemini 2.5 Flash 4.0 7.2 55.6% 1 37.34s 18 80,702
StepFun: Step 3.5 Flash 4.0 7.2 44.4% 1 170.45s 45,350 90,436
Algemene intelligentie Score Consistentie Slaagpercentage per poging Instabiele tests Correcte tests Responstijd (gem.) Uitvoer-tokens Redeneer-tokens
Google: Gemini 2.5 Flash 4.0 10.0 0.0% 0 4.86s 92 1,899
StepFun: Step 3.5 Flash 6.0 10.0 0.0% 0 6.54s 2,214 2,584
Instructies opvolgen Score Consistentie Slaagpercentage per poging Instabiele tests Correcte tests Responstijd (gem.) Uitvoer-tokens Redeneer-tokens
Google: Gemini 2.5 Flash 9.5 10.0 100.0% 0 2.62s 69 1,203
StepFun: Step 3.5 Flash 9.0 6.8 83.3% 1 4.98s 2,284 3,412
Puzzle Solving Score Consistentie Slaagpercentage per poging Instabiele tests Correcte tests Responstijd (gem.) Uitvoer-tokens Redeneer-tokens
Google: Gemini 2.5 Flash 7.0 10.0 66.7% 0 3.94s 126 2,499
StepFun: Step 3.5 Flash 4.0 10.0 33.3% 0 7.72s 5,629 10,835
Toolaanroepen Score Consistentie Slaagpercentage per poging Instabiele tests Correcte tests Responstijd (gem.) Uitvoer-tokens Redeneer-tokens
Google: Gemini 2.5 Flash 10.0 10.0 100.0% 0 6.20s 234 1,140
StepFun: Step 3.5 Flash 10.0 10.0 100.0% 0 11.91s 275 3,802

Snelle vergelijking

Vergelijkingspaar wisselen