Navigatie
AI BENCHY
Advertise here

Mercury 2.5 Preview (medium) vs GPT-5.4 Mini (medium)

De gemiddelde score is vrijwel gelijk met 7.5 vs 7.5. Mercury 2.5 Preview (medium) heeft lagere benchmarkkosten met $0.024 vs $0.786. Mercury 2.5 Preview (medium) is sneller met 3.58s vs 26.72s, met slagingspercentages van 69.7% vs 68.2%.

Benchmarks gegenereerd uit AI BENCHY-testsuites op: 2026-09-02

Rang
#91
Totaal aantal uitvoer-tokens
127,034
Responstijd (gem.)
3.58s
Totale kosten
$0.024
Rang
#92
Totaal aantal uitvoer-tokens
158,344
Responstijd (gem.)
26.72s
Totale kosten
$0.786
Aanbevolen model Mercury 2.5 Preview (medium)

Het heeft hier de beste score (7.5) en kost ongeveer 33.3x minder dan GPT-5.4 Mini (medium).

Gedetailleerde vergelijking

Metriek Mercury 2.5 Preview Mercury 2.5 Preview medium Releasedatum: 2026-09-02 GPT-5.4 Mini GPT-5.4 Mini medium Releasedatum: 2026-03-17
Score 7.5 7.5
Rang #91 #92
Betrouwbaarheid 10.0 10.0
Consistentie 9.6 8.1
Pogingen 66/66 66/66
Correcte tests
Slaagpercentage per poging 69.7% 68.2%
Instabiele tests 1 5
Totaal runs 66 66
Kosten per resultaat 0.158 6.546
Totale kosten $0.024 $0.786
Invoerprijs $0.040 / 1M $0.750 / 1M
Uitvoerprijs $0.150 / 1M $4.500 / 1M
Totaal aantal invoer-tokens 112,713 97,164
Uitvoer-tokens 5,436 6,211
Redeneer-tokens 121,598 152,133
Responstijd (gem.) 3.58s 26.72s
Responstijd (max) 17.84s 138.75s
Responstijd (totaal) 78.66s 587.90s
Parameters ~100B ~400B totaal (~17B actief)
Beschikbaarheid Gesloten broncode Gesloten broncode

Model generatie-showcase

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#91 Mercury 2.5 Preview

medium
Kosten
$0.001
Tijd
2.7s
Tokens
2,241 tok

#92 GPT-5.4 Mini

medium
Kosten
$0.056
Tijd
95.5s
Tokens
12,464 tok

Topmodellen op score

Score vs totale kosten

Responstijd (gem.)

Score vs Responstijd (gem.)

Totaal aantal uitvoer-tokens

Score vs Totaal aantal uitvoer-tokens

Categorie-uitsplitsing

Programmeren Score Consistentie Slaagpercentage per poging Instabiele tests Correcte tests Responstijd (gem.) Invoer-tokens Uitvoer-tokens Redeneer-tokens
Mercury 2.5 Preview 7.8 10.0 66.7% 0 3.86s 7,839 552 22,126
GPT-5.4 Mini 8.4 7.4 88.9% 1 57.87s 7,305 467 40,902

Snelle vergelijking

Vergelijkingspaar wisselen