Navigatie
Advertise here

Mercury 2.5 Preview (high) vs Step 3.7 Flash (high)

Step 3.7 Flash (high) leidt in gemiddelde score met 6.6 vs 6.5. Mercury 2.5 Preview (high) heeft lagere benchmarkkosten met $0.040 vs $1.478. Mercury 2.5 Preview (high) is sneller met 7.61s vs 72.72s, met slagingspercentages van 65.2% vs 58.0%.

Benchmarks gegenereerd uit AI BENCHY-testsuites op: 2026-10-12

Vergeleken modellen

Rang
#207
Totaal aantal uitvoer-tokens
180,597
Responstijd (gem.)
7.61s
Totale kosten
$0.040
Rang
#203
Totaal aantal uitvoer-tokens
1,100,052
Responstijd (gem.)
72.72s
Totale kosten
$1.478
Aanbevolen model Mercury 2.5 Preview (high)

De score blijft dicht bij de beste score hier (6.5 vs 6.6) en het kost ongeveer 37.9x minder dan Step 3.7 Flash (high).

Gedetailleerde vergelijking

Metriek Mercury 2.5 Preview Mercury 2.5 Preview high Releasedatum: 2026-09-02 Step 3.7 Flash Step 3.7 Flash high Releasedatum: 2026-05-29
Score 6.5 6.6
Rang #207 #203
Betrouwbaarheid 9.9 10.0
Consistentie 8.0 8.5
Pogingen 69/69 69/69
Correcte tests
Slaagpercentage per poging 65.2% 58.0%
Instabiele tests 6 4
Totaal runs 69 69
Kosten per resultaat 0.319 12.267
Totale kosten $0.040 $1.478
Invoerprijs $0.040 / 1M $0.200 / 1M
Uitvoerprijs $0.150 / 1M $1.150 / 1M
Prijs voor cachelezen n.v.t. $0.040 / 1M
Prijs voor cacheschrijven n.v.t. n.v.t.
Totaal aantal invoer-tokens 298,512 421,200
Uitvoer-tokens 3,178 1,100,052
Redeneer-tokens 177,419 0
Responstijd (gem.) 7.61s 72.72s
Responstijd (max) 86.84s 364.99s
Responstijd (totaal) 175.08s 1672.53s
Parameters ~100B 198B totaal (11B actief)
Beschikbaarheid Gesloten broncode Open-source

Cacheprijzen gelden voor invoertokens. Lezen hergebruikt opgeslagen prompts; schrijven slaat ze op en kan extra kosten. Voor uitvoertokens geldt de uitvoerprijs.

Model generatie-showcase

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#207 Mercury 2.5 Preview

high
Kosten
$0.001
Tijd
4.5s
Tokens
3,851 tok

#203 Step 3.7 Flash

high
Kosten
$0.007
Tijd
63.6s
Tokens
6,030 tok

Topmodellen op score

Score vs totale kosten

Responstijd (gem.)

Score vs Responstijd (gem.)

Totaal aantal uitvoer-tokens

Score vs Totaal aantal uitvoer-tokens

Categorie-uitsplitsing

Programmeren Score Consistentie Slaagpercentage per poging Instabiele tests Correcte tests Responstijd (gem.) Invoer-tokens Uitvoer-tokens Redeneer-tokens
Mercury 2.5 Preview 6.7 7.8 55.6% 1 6.13s 7,751 485 42,569
Step 3.7 Flash 4.0 6.0 22.2% 1 206.21s 6,057 327,340 0

Vergelijkingspaar wisselen