Navigatie
AI BENCHY
AD
Track all your projects in one dashboard. Get 📊stats, 🔥heatmaps and 👀recordings in one self-hosted dashboard.
uxwizz.com

Mercury 2.5 Preview vs GPT-4o-mini

De gemiddelde score is vrijwel gelijk met 4.9 vs 5.0. GPT-4o-mini heeft lagere benchmarkkosten met $0.010 vs $0.018. GPT-4o-mini is sneller met 1.92s vs 3.51s, met slagingspercentages van 30.3% vs 22.7%.

Benchmarks gegenereerd uit AI BENCHY-testsuites op: 2026-09-02

Rang
#259
Totaal aantal uitvoer-tokens
82,585
Responstijd (gem.)
3.51s
Totale kosten
$0.018
Rang
#257
Totaal aantal uitvoer-tokens
2,913
Responstijd (gem.)
1.92s
Totale kosten
$0.010
Aanbevolen model GPT-4o-mini

Het heeft hier de beste score (5.0) en kost ongeveer 1.8x minder dan Mercury 2.5 Preview.

Gedetailleerde vergelijking

Metriek Mercury 2.5 Preview Mercury 2.5 Preview none Releasedatum: 2026-09-02 GPT-4o-mini GPT-4o-mini none Releasedatum: 2024-07-18
Score 4.9 5.0
Rang #259 #257
Betrouwbaarheid 10.0 10.0
Consistentie 8.3 9.9
Pogingen 66/66 66/66
Correcte tests
Slaagpercentage per poging 30.3% 22.7%
Instabiele tests 5 0
Totaal runs 66 66
Kosten per resultaat 0.440 0.195
Totale kosten $0.018 $0.010
Invoerprijs $0.040 / 1M $0.150 / 1M
Uitvoerprijs $0.150 / 1M $0.600 / 1M
Totaal aantal invoer-tokens 130,296 53,145
Uitvoer-tokens 82,585 2,913
Redeneer-tokens 0 0
Responstijd (gem.) 3.51s 1.92s
Responstijd (max) 60.70s 7.58s
Responstijd (totaal) 77.28s 30.71s
Parameters ~100B ~8B
Beschikbaarheid Gesloten broncode Gesloten broncode

Model generatie-showcase

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#259 Mercury 2.5 Preview

none
Ongeldige SVG
Kosten
$0.001
Tijd
3.3s
Tokens
3,122 tok

#257 GPT-4o-mini

none
Kosten
$0.001
Tijd
6.6s
Tokens
742 tok

Topmodellen op score

Score vs totale kosten

Responstijd (gem.)

Score vs Responstijd (gem.)

Totaal aantal uitvoer-tokens

Score vs Totaal aantal uitvoer-tokens

Categorie-uitsplitsing

Programmeren Score Consistentie Slaagpercentage per poging Instabiele tests Correcte tests Responstijd (gem.) Invoer-tokens Uitvoer-tokens Redeneer-tokens
Mercury 2.5 Preview 4.7 7.9 22.2% 1 459ms 7,850 650 0
GPT-4o-mini 3.2 9.6 0.0% 0 1.63s 7,314 367 0

Snelle vergelijking

Vergelijkingspaar wisselen