AI BENCHY
Advertise here
#27

Step 3.7 Flash

Stepfun Releasedatum: 2026-05-29 Getest op: 2026-07-16 22:50 stepfun/step-3.7-flash::medium
198B totaal (11B actief)MoEOpen-source
(high) (medium) (low)

Samenvatting

Step 3.7 Flash scoort 8.0 op AI BENCHY en staat op #27. Het model heeft 9.9 betrouwbaarheid, een slagingspercentage van 72.7%, $0.515 totale kosten en 26.37s gemiddelde responstijd.

Wat Step 3.7 Flash uniek maakt: Het valt het meest op in Domeinspecifiek, waar het #1 staat, terwijl Algemene intelligentie het zwakste gebied is met #18.

Modelgegevens

Onderzocht op 2026-08-12

Gerapporteerd
Parameters
198B totaal (11B actief)
Architectuur
MoE
Beschikbaarheid
Open-source
Licentie
Apache-2.0
Bron voor parameters Bron voor beschikbaarheid

Score

8.0

Consistentie

8.9

Betrouwbaarheid

9.9

Totale kosten (huidige prijs)

$0.515

Totaal aantal uitvoer-tokens

427,572

Totaal aantal invoer-tokens

114,062

Invoerprijs

$0.200 / 1M

Uitvoerprijs

$1.150 / 1M

Correcte tests

Foute tests: 8

Slaagpercentage per poging: 72.7%

Benchmarkdekking: 64/66 pogingen

Instabiele tests

3

Instabiele tests hadden gemengde uitkomsten over runs (minstens één geslaagd en één gefaald).

Responstijd (gem.)

26.37s

Responstijd (max): 152.83s

Responstijd (totaal): 580.25s

Verkeerd antwoord: 5 Instructies niet gevolgd: 1 Ongeldige toolaanroep: 1 Geen antwoord: 1

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#27 Step 3.7 Flash

medium
Kosten
$0.006
Tijd
46.2s
Tokens
4,466 tok

Rungeschiedenis

Getest op Score Betrouwbaarheid Correcte tests Totale kosten Vergelijken
2026-08-14 02:31 Hertest 7.9 10.0 $0.495 Vergelijken
2026-07-16 22:50 Nieuwe test toegevoegd 8.0 9.9 $0.515 Huidige run
2026-06-04 13:52 Nieuwe test toegevoegd 8.0 9.9 $0.376 Vergelijken
2026-05-29 11:49 Eerste run 7.9 9.9 $0.404 Vergelijken

Deze run gebruikte een andere benchmarkset. Houd rekening met suitewijzigingen bij het lezen van historische verschuivingen.

Runvergelijking

RunBenchmarkdekkingScoreConsistentieBetrouwbaarheidCorrecte testsInstabiele testsTotaal aantal uitvoer-tokensTotaal aantal invoer-tokensTotale kostenResponstijd (gem.)
2026-07-16 22:50 · Nieuwe test toegevoegd64/66 pogingen8.08.99.914/223427,572114,062$0.51526.37s
2026-06-04 13:52 · Nieuwe test toegevoegd61/63 pogingen8.09.39.914/212319,95839,981$0.37620.35s
Verschil—0.0-0.40.00+1+107614+74081+$0.139+6021ms

De benchmarkdekking verschilt: 64/66 pogingen (Doel: 3 herhalingen per test) tegenover 61/63 pogingen (Doel: 3 herhalingen per test). Totalen en herhalingsgevoelige statistieken zijn niet direct vergelijkbaar.

Deze twee runs gebruikten verschillende benchmarksets, dus de verschillen weerspiegelen zowel modelveranderingen als suitewijzigingen.

Prijsgeschiedenis

Historische prijsgegevens voor dit model van OpenRouter.

Datum Invoerprijs Uitvoerprijs
2026-06-04 15:40 $0.200 / 1M $1.150 / 1M

Grafieken

Kies eerst het eerste model en klik daarna op een tweede model om een zij-aan-zijpagina te openen.

Totaal aantal uitvoer-tokens

Score vs Totaal aantal uitvoer-tokens

Snelle vergelijking

Step 3.7 FlashmediumvsGPT-5.2 ChatnoneStep 3.7 FlashmediumvsQwen3.8 27BlowStep 3.7 FlashmediumvsKimi K3maxStep 3.7 FlashmediumvsQwen3.7 PlusmediumStep 3.7 FlashmediumvsGPT-5.6 TerrahighStep 3.7 FlashmediumvsQwen3.6 PlusmediumStep 3.7 FlashmediumvsInklingmediumStep 3.7 FlashmediumvsGemini 3.5 Flash LitemediumStep 3.7 FlashmediumvsGLM 5.2highStep 3.7 FlashmediumvsGLM 5.2medium

Categorie-uitsplitsing

Categorie Score Consistentie Correcte tests
Anti-AI-trucs 8.7 7.9
Programmeren 8.8 7.8
Gecombineerd 7.3 5.8
Gegevensparsering en extractie 10.0 10.0
Domeinspecifiek 7.7 10.0
Algemene intelligentie 4.0 10.0
Instructies opvolgen 9.8 10.0
Puzzeloplossing 5.7 9.9
Toolaanroepen 10.0 10.0
Algemene kennis 3.0 10.0

Vergeleken modellen