AI BENCHY
Advertise here
#32

Step 3.7 Flash

Stepfun Releasedatum: 2026-05-29 Getest op: 2026-05-29 11:49 stepfun/step-3.7-flash::medium
(high) (medium) (low)

Samenvatting

Step 3.7 Flash scoort 7.9 op AI BENCHY en staat op #32. Het model heeft 9.9 betrouwbaarheid, een slagingspercentage van 71.7%, $0.404 totale kosten en 20.29s gemiddelde responstijd.

Wat Step 3.7 Flash uniek maakt: Het valt het meest op in Domeinspecifiek, waar het #1 staat, terwijl Puzzeloplossing het zwakste gebied is met #16.

Score

7.9

Consistentie

9.2

Betrouwbaarheid

9.9

Totale kosten (huidige prijs)

$0.404

Totaal aantal uitvoer-tokens

344,492

Totaal aantal invoer-tokens

0

Invoerprijs

$0.200 / 1M

Uitvoerprijs

$1.150 / 1M

Correcte tests

Foute tests: 7

Slaagpercentage per poging: 71.7%

Instabiele tests

2

Instabiele tests hadden gemengde uitkomsten over runs (minstens één geslaagd en één gefaald).

Responstijd (gem.)

20.29s

Responstijd (max): 136.44s

Responstijd (totaal): 405.79s

Verkeerd antwoord: 5 Instructies niet gevolgd: 1 Geen antwoord: 1

Generatie-showcase

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#32 Step 3.7 Flash

medium
Kosten
$0.006
Tijd
46.2s
Tokens
4,466 tok

Rungeschiedenis

Getest op Score Betrouwbaarheid Correcte tests Totale kosten Vergelijken
2026-06-04 13:52 Nieuwe test toegevoegd 8.0 9.9 $0.376 Vergelijken
2026-05-29 11:49 Eerste run 7.9 9.9 $0.404 Huidige run

Runvergelijking

RunScoreConsistentieBetrouwbaarheidCorrecte testsInstabiele testsTotaal aantal uitvoer-tokensTotaal aantal invoer-tokensTotale kostenResponstijd (gem.)
2026-05-29 11:49 · Eerste run7.99.29.913/202344,4920$0.40420.29s
2026-06-04 13:52 · Nieuwe test toegevoegd8.09.39.914/212319,95839,981$0.37620.35s
Verschil-0.1-0.10.0-10+24534-39981+$0.028-64ms

Deze twee runs gebruikten verschillende benchmarksets, dus de verschillen weerspiegelen zowel modelveranderingen als suitewijzigingen.

Grafieken

Kies eerst het eerste model en klik daarna op een tweede model om een zij-aan-zijpagina te openen.

Totaal aantal uitvoer-tokens

Score vs Totaal aantal uitvoer-tokens

Snelle vergelijking

Step 3.7 FlashmediumvsGPT-5.2 ChatnoneStep 3.7 FlashmediumvsSeed-2.0-LitemediumStep 3.7 FlashmediumvsGPT-5.2mediumStep 3.7 FlashmediumvsGPT-5.4mediumStep 3.7 FlashmediumvsGrok 4.5mediumStep 3.7 FlashmediumvsGemini 3.5 FlashhighStep 3.7 FlashmediumvsGemini 3 Flash PreviewmediumStep 3.7 FlashmediumvsNemotron 3 Ultra 550b A55bmediumGratis beschikbaarStep 3.7 FlashmediumvsGPT-5.5low

Categorie-uitsplitsing

Categorie Score Consistentie Correcte tests
Anti-AI-trucs 8.7 7.9
Programmeren 8.2 6.7
Gecombineerd 10.0 10.0
Gegevensparsering en extractie 10.0 10.0
Domeinspecifiek 7.7 10.0
Algemene intelligentie 4.0 10.0
Instructies opvolgen 9.8 10.0
Puzzeloplossing 5.7 9.9
Toolaanroepen 10.0 10.0
Algemene kennis 3.0 10.0

Vergeleken modellen