Navigatie
Advertise here

Mercury 2.5 (high) vs Step 3.7 Flash (low)

Step 3.7 Flash (low) leidt in gemiddelde score met 7.2 vs 6.5. Mercury 2.5 (high) heeft lagere benchmarkkosten met $0.044 vs $0.449. Mercury 2.5 (high) is sneller met 7.62s vs 20.72s, met slagingspercentages van 59.4% vs 63.8%.

Benchmarks gegenereerd uit AI BENCHY-testsuites op: 2026-10-24

Vergeleken modellen

Rang
#234
Totaal aantal uitvoer-tokens
193,676
Responstijd (gem.)
7.62s
Totale kosten
$0.044
Rang
#179
Totaal aantal uitvoer-tokens
339,108
Responstijd (gem.)
20.72s
Totale kosten
$0.449
Aanbevolen model Mercury 2.5 (high)

De score blijft dicht bij de beste score hier (6.5 vs 7.2) en het kost ongeveer 10.3x minder dan Step 3.7 Flash (low).

Gedetailleerde vergelijking

Metriek Mercury 2.5 Mercury 2.5 high Releasedatum: 2026-09-08 Step 3.7 Flash Step 3.7 Flash low Releasedatum: 2026-05-29
Score 6.5 7.2
Rang #234 #179
Betrouwbaarheid 9.8 10.0
Consistentie 8.7 7.9
Pogingen 69/69 69/69
Correcte tests
Slaagpercentage per poging 59.4% 63.8%
Instabiele tests 4 6
Totaal runs 69 69
Kosten per resultaat 0.362 4.078
Totale kosten $0.044 $0.449
Invoerprijs $0.040 / 1M $0.200 / 1M
Uitvoerprijs $0.150 / 1M $1.150 / 1M
Prijs voor cachelezen $0.004 / 1M $0.040 / 1M
Prijs voor cacheschrijven n.v.t. n.v.t.
Totaal aantal invoer-tokens 358,562 292,685
Uitvoer-tokens 4,266 339,108
Redeneer-tokens 189,410 0
Responstijd (gem.) 7.62s 20.72s
Responstijd (max) 80.30s 124.75s
Responstijd (totaal) 175.36s 476.67s
Parameters ~100B 198B totaal (11B actief)
Beschikbaarheid Gesloten broncode Open-source

Cacheprijzen gelden voor invoertokens. Lezen hergebruikt opgeslagen prompts; schrijven slaat ze op en kan extra kosten. Voor uitvoertokens geldt de uitvoerprijs.

Model generatie-showcase

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#234 Mercury 2.5

high
Kosten
$0.001
Tijd
3.5s
Tokens
2,447 tok

#179 Step 3.7 Flash

low
Ongeldige SVG
Kosten
$0.004
Tijd
25.3s
Tokens
3,072 tok

Topmodellen op score

Score vs totale kosten

Responstijd (gem.)

Score vs Responstijd (gem.)

Totaal aantal uitvoer-tokens

Score vs Totaal aantal uitvoer-tokens

Categorie-uitsplitsing

Programmeren Score Consistentie Slaagpercentage per poging Instabiele tests Correcte tests Responstijd (gem.) Invoer-tokens Uitvoer-tokens Redeneer-tokens
Mercury 2.5 6.4 7.8 44.4% 1 6.58s 7,757 415 44,012
Step 3.7 Flash 8.2 7.2 88.9% 1 9.46s 7,437 18,685 0

Vergelijkingspaar wisselen