Navigatie
AI BENCHY
Advertise here

AI BENCHY Compare

OpenAI: GPT-5.4 vs StepFun: Step 3.7 Flash

Samenvatting

De gemiddelde score is vrijwel gelijk met 8.5 vs 8.5. Step 3.7 Flash (medium) heeft lagere benchmarkkosten met $0.376 vs $1.210. Step 3.7 Flash (medium) is sneller met 20.35s vs 22.35s, met slagingspercentages van 76.2% vs 73.0%.

Aanbevolen modelStep 3.7 Flash (medium)Het heeft hier de beste score (8.5) en kost ongeveer 3.2x minder dan GPT-5.4 (medium).

Benchmarks gegenereerd uit AI BENCHY-testsuites op: 2026-07-14

Metriek GPT-5.4 GPT-5.4 medium Releasedatum: 2026-03-05 Step 3.7 Flash Step 3.7 Flash medium Releasedatum: 2026-05-29
Score 8.5 8.5
Rang #20 #23
Betrouwbaarheid 10.0 9.9
Consistentie 8.6 9.3
Correcte tests
Slaagpercentage per poging 76.2% 73.0%
Instabiele tests 4 2
Totaal runs 63 61
Kosten per resultaat 8.640 2.686
Totale kosten $1.210 $0.376
Invoerprijs $2.500 / 1M $0.200 / 1M
Uitvoerprijs $15.000 / 1M $1.150 / 1M
Totaal aantal invoer-tokens 34,108 39,981
Uitvoer-tokens 2,242 319,958
Redeneer-tokens 72,707 0
Responstijd (gem.) 22.35s 20.35s
Responstijd (max) 100.41s 113.98s
Responstijd (totaal) 469.29s 427.42s

Generatie-showcase

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#20 GPT-5.4

medium
Kosten
$0.214
Tijd
199.6s
Tokens
14,349 tok

#23 Step 3.7 Flash

medium
Kosten
$0.006
Tijd
46.2s
Tokens
4,466 tok

Topmodellen op score

Score vs totale kosten

Responstijd (gem.)

Score vs Responstijd (gem.)

Totaal aantal uitvoer-tokens

Score vs Totaal aantal uitvoer-tokens

Categorie-uitsplitsing

Programmeren Score Consistentie Slaagpercentage per poging Instabiele tests Correcte tests Responstijd (gem.) Invoer-tokens Uitvoer-tokens Redeneer-tokens
GPT-5.4 8.8 7.8 88.9% 1 44.36s 7,305 433 24,216
Step 3.7 Flash 8.8 7.8 88.9% 1 27.42s 7,437 44,797 0

Snelle vergelijking

Vergelijkingspaar wisselen