Navigatie
AI BENCHY
Advertise here

AI BENCHY Compare

Anthropic: Claude Opus 4.8 vs StepFun: Step 3.7 Flash

Samenvatting

De gemiddelde score is vrijwel gelijk met 7.7 vs 7.7. Step 3.7 Flash (low) heeft lagere benchmarkkosten met $0.341 vs $1.270. Claude Opus 4.8 (low) is sneller met 10.83s vs 15.74s, met slagingspercentages van 79.4% vs 68.3%.

Aanbevolen modelStep 3.7 Flash (low)Het heeft hier de beste score (7.7) en kost ongeveer 3.7x minder dan Claude Opus 4.8 (low).

Benchmarks gegenereerd uit AI BENCHY-testsuites op: 2026-07-14

Metriek Claude Opus 4.8 Claude Opus 4.8 low Releasedatum: 2026-05-28 Step 3.7 Flash Step 3.7 Flash low Releasedatum: 2026-05-29
Score 7.7 7.7
Rang #47 #51
Betrouwbaarheid 10.0 10.0
Consistentie 8.8 8.4
Correcte tests
Slaagpercentage per poging 79.4% 68.3%
Instabiele tests 3 4
Totaal runs 63 63
Kosten per resultaat 8.466 2.840
Totale kosten $1.270 $0.341
Invoerprijs $5.000 / 1M $0.200 / 1M
Uitvoerprijs $25.000 / 1M $1.150 / 1M
Totaal aantal invoer-tokens 60,946 40,101
Uitvoer-tokens 31,771 289,325
Redeneer-tokens 6,831 0
Responstijd (gem.) 10.83s 15.74s
Responstijd (max) 127.97s 124.75s
Responstijd (totaal) 227.39s 330.63s

Generatie-showcase

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#47 Claude Opus 4.8

low
Kosten
$0.031
Tijd
14.1s
Tokens
1,345 tok

#51 Step 3.7 Flash

low
Ongeldige SVG
Kosten
$0.004
Tijd
25.3s
Tokens
3,072 tok

Topmodellen op score

Score vs totale kosten

Responstijd (gem.)

Score vs Responstijd (gem.)

Totaal aantal uitvoer-tokens

Score vs Totaal aantal uitvoer-tokens

Categorie-uitsplitsing

Programmeren Score Consistentie Slaagpercentage per poging Instabiele tests Correcte tests Responstijd (gem.) Invoer-tokens Uitvoer-tokens Redeneer-tokens
Claude Opus 4.8 6.6 4.6 77.8% 2 7.58s 10,590 3,637 809
Step 3.7 Flash 8.2 7.2 88.9% 1 9.46s 7,437 18,685 0

Snelle vergelijking

Vergelijkingspaar wisselen