Navigatie
AD
Track all your projects in one dashboard. Get 📊stats, 🔥heatmaps and 👀recordings in one self-hosted dashboard.
uxwizz.com

Mercury 2.5 (high) vs Step 3.7 Flash (low)

Step 3.7 Flash (low) leidt in gemiddelde score met 7.1 vs 7.1. Mercury 2.5 (high) heeft lagere benchmarkkosten met $0.031 vs $0.390. Mercury 2.5 (high) is sneller met 4.32s vs 17.87s, met slagingspercentages van 62.1% vs 63.6%.

Benchmarks gegenereerd uit AI BENCHY-testsuites op: 2026-09-08

Vergeleken modellen

Rang
#134
Totaal aantal uitvoer-tokens
174,547
Responstijd (gem.)
4.32s
Totale kosten
$0.031
Rang
#132
Totaal aantal uitvoer-tokens
320,393
Responstijd (gem.)
17.87s
Totale kosten
$0.390
Aanbevolen model Mercury 2.5 (high)

De score blijft dicht bij de beste score hier (7.1 vs 7.1) en het kost ongeveer 12.6x minder dan Step 3.7 Flash (low).

Gedetailleerde vergelijking

Metriek Mercury 2.5 Mercury 2.5 high Releasedatum: 2026-09-08 Step 3.7 Flash Step 3.7 Flash low Releasedatum: 2026-05-29
Score 7.1 7.1
Rang #134 #132
Betrouwbaarheid 9.7 10.0
Consistentie 8.6 8.1
Pogingen 66/66 66/66
Correcte tests
Slaagpercentage per poging 62.1% 63.6%
Instabiele tests 4 5
Totaal runs 66 66
Kosten per resultaat 0.259 3.539
Totale kosten $0.031 $0.390
Invoerprijs $0.040 / 1M $0.200 / 1M
Uitvoerprijs $0.150 / 1M $1.150 / 1M
Totaal aantal invoer-tokens 120,068 103,842
Uitvoer-tokens 3,402 320,393
Redeneer-tokens 171,145 0
Responstijd (gem.) 4.32s 17.87s
Responstijd (max) 23.63s 124.75s
Responstijd (totaal) 95.06s 393.04s
Parameters ~100B 198B totaal (11B actief)
Beschikbaarheid Gesloten broncode Open-source

Model generatie-showcase

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#134 Mercury 2.5

high
Kosten
$0.001
Tijd
3.5s
Tokens
2,447 tok

#132 Step 3.7 Flash

low
Ongeldige SVG
Kosten
$0.004
Tijd
25.3s
Tokens
3,072 tok

Topmodellen op score

Score vs totale kosten

Responstijd (gem.)

Score vs Responstijd (gem.)

Totaal aantal uitvoer-tokens

Score vs Totaal aantal uitvoer-tokens

Categorie-uitsplitsing

Programmeren Score Consistentie Slaagpercentage per poging Instabiele tests Correcte tests Responstijd (gem.) Invoer-tokens Uitvoer-tokens Redeneer-tokens
Mercury 2.5 6.4 7.8 44.4% 1 6.58s 7,757 415 44,012
Step 3.7 Flash 8.2 7.2 88.9% 1 9.46s 7,437 18,685 0

Snelle vergelijking

Vergelijkingspaar wisselen