Navigatie
AI BENCHY
Advertise here

Mercury 2.5 Preview vs Mistral Small 4 (medium)

Mistral Small 4 (medium) leidt in gemiddelde score met 5.1 vs 4.9. Mercury 2.5 Preview heeft lagere benchmarkkosten met $0.018 vs $0.097. Mercury 2.5 Preview is sneller met 3.51s vs 10.80s, met slagingspercentages van 30.3% vs 43.9%.

Benchmarks gegenereerd uit AI BENCHY-testsuites op: 2026-09-02

Rang
#259
Totaal aantal uitvoer-tokens
82,585
Responstijd (gem.)
3.51s
Totale kosten
$0.018
Rang
#246
Totaal aantal uitvoer-tokens
133,597
Responstijd (gem.)
10.80s
Totale kosten
$0.097
Aanbevolen model Mercury 2.5 Preview

De score blijft dicht bij de beste score hier (4.9 vs 5.1) en het kost ongeveer 5.5x minder dan Mistral Small 4 (medium).

Gedetailleerde vergelijking

Metriek Mercury 2.5 Preview Mercury 2.5 Preview none Releasedatum: 2026-09-02 Mistral Small 4 Mistral Small 4 medium Releasedatum: 2026-03-16
Score 4.9 5.1
Rang #259 #246
Betrouwbaarheid 10.0 10.0
Consistentie 8.3 7.0
Pogingen 66/66 66/66
Correcte tests
Slaagpercentage per poging 30.3% 43.9%
Instabiele tests 5 8
Totaal runs 66 66
Kosten per resultaat 0.440 1.923
Totale kosten $0.018 $0.097
Invoerprijs $0.040 / 1M $0.150 / 1M
Uitvoerprijs $0.150 / 1M $0.600 / 1M
Totaal aantal invoer-tokens 130,296 140,559
Uitvoer-tokens 82,585 40,268
Redeneer-tokens 0 93,329
Responstijd (gem.) 3.51s 10.80s
Responstijd (max) 60.70s 59.15s
Responstijd (totaal) 77.28s 237.60s
Parameters ~100B 119B totaal (6B actief)
Beschikbaarheid Gesloten broncode Open-source

Model generatie-showcase

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#259 Mercury 2.5 Preview

none
Ongeldige SVG
Kosten
$0.001
Tijd
3.3s
Tokens
3,122 tok

#246 Mistral Small 4

medium
Kosten
$0.006
Tijd
47.9s
Tokens
9,857 tok

Topmodellen op score

Score vs totale kosten

Responstijd (gem.)

Score vs Responstijd (gem.)

Totaal aantal uitvoer-tokens

Score vs Totaal aantal uitvoer-tokens

Categorie-uitsplitsing

Programmeren Score Consistentie Slaagpercentage per poging Instabiele tests Correcte tests Responstijd (gem.) Invoer-tokens Uitvoer-tokens Redeneer-tokens
Mercury 2.5 Preview 4.7 7.9 22.2% 1 459ms 7,850 650 0
Mistral Small 4 4.4 5.1 33.3% 2 39.98s 7,636 11,635 54,715

Snelle vergelijking

Vergelijkingspaar wisselen