AI BENCHY
AD
Track all your projects in one dashboard. Get 📊stats, 🔥heatmaps and 👀recordings in one self-hosted dashboard.
uxwizz.com
#143

Mercury 2

Inception Releasedatum: 2026-02-24 Getest op: 2026-05-22 00:39 inception/mercury-2::none
(medium) (none)

Samenvatting

Mercury 2 scoort 4.6 op AI BENCHY en staat op #143. Het model heeft 10.0 betrouwbaarheid, een slagingspercentage van 25.0%, $0.009 totale kosten en 614ms gemiddelde responstijd.

Wat Mercury 2 uniek maakt: Het valt het meest op in Algemene intelligentie, waar het #3 staat, terwijl Anti-AI-trucs het zwakste gebied is met #13. Het is opvallend snel vergeleken met vergelijkbare modellen.

Score

4.6

Consistentie

9.1

Totaal aantal uitvoer-tokens

2,984

Totaal aantal invoer-tokens

0

Invoerprijs

$0.250 / 1M

Uitvoerprijs

$0.750 / 1M

Correcte tests

Foute tests: 16

Slaagpercentage per poging: 25.0%

Instabiele tests

2

Instabiele tests hadden gemengde uitkomsten over runs (minstens één geslaagd en één gefaald).

Responstijd (gem.)

614ms

Responstijd (max): 1.27s

Responstijd (totaal): 12.28s

Generatie-showcase

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#143 Mercury 2

none
Kosten
$0.002
Tijd
1.8s
Tokens
1,514 tok

Rungeschiedenis

Getest op Score Betrouwbaarheid Correcte tests Totale kosten Vergelijken
2026-06-04 14:27 Nieuwe test toegevoegd 4.5 10.0 $0.011 Vergelijken
2026-05-22 00:39 Suite gewijzigd 4.6 10.0 $0.009 Huidige run
2026-04-11 01:44 Eerste geregistreerde run 4.8 n.v.t. $0.007 Vergelijken

Deze run gebruikte een andere benchmarkset. Houd rekening met suitewijzigingen bij het lezen van historische verschuivingen.

Runvergelijking

RunScoreConsistentieBetrouwbaarheidCorrecte testsInstabiele testsTotaal aantal uitvoer-tokensTotaal aantal invoer-tokensTotale kostenResponstijd (gem.)
2026-05-22 00:39 · Suite gewijzigd4.69.110.04/2022,9840$0.009614ms
2026-06-04 14:27 · Nieuwe test toegevoegd4.59.210.04/2124,43928,113$0.011653ms
Verschil+0.1-0.10.000-1455-28113-$0.002-39ms

Deze twee runs gebruikten verschillende benchmarksets, dus de verschillen weerspiegelen zowel modelveranderingen als suitewijzigingen.

Grafieken

Kies eerst het eerste model en klik daarna op een tweede model om een zij-aan-zijpagina te openen.

Totaal aantal uitvoer-tokens

Score vs Totaal aantal uitvoer-tokens

Snelle vergelijking

Categorie-uitsplitsing

Categorie Score Consistentie Correcte tests
Anti-AI-trucs 3.0 10.0
Programmeren 3.5 9.4
Gecombineerd 3.0 10.0
Gegevensparsering en extractie 7.3 5.9
Domeinspecifiek 5.3 7.2
Algemene intelligentie 4.8 10.0
Instructies opvolgen 6.5 10.0
Puzzeloplossing 3.1 10.0
Toolaanroepen 10.0 10.0
Algemene kennis 3.0 10.0

Vergeleken modellen