AD
Track all your projects in one dashboard. Get 📊stats, 🔥heatmaps and 👀recordings in one self-hosted dashboard.
uxwizz.com
#99

Mercury 2

Inception Releasedatum: 2026-02-24 Getest op: 2026-04-11 01:44 inception/mercury-2::none
~100BOverigGesloten broncodeGeschat
(medium) (none)

Samenvatting

Mercury 2 scoort 4.8 op AI BENCHY en staat op #99. Het model heeft n.v.t. betrouwbaarheid, een slagingspercentage van 27.8%, $0.007 totale kosten en 613ms gemiddelde responstijd.

Wat Mercury 2 uniek maakt: Het valt het meest op in Domeinspecifiek, waar het #4 staat, terwijl Anti-AI-trucs het zwakste gebied is met #18. De totale benchmarkkosten zijn ongewoon laag voor dit scoreniveau. Het is opvallend snel vergeleken met vergelijkbare modellen.

Modelgegevens

Onderzocht op 2026-08-12

Geschat
Parameters
~100B
Architectuur
Overig
Beschikbaarheid
Gesloten broncode
Licentie
-

Beste schatting op basis van openbare informatie; de leverancier heeft niet alle waarden bekendgemaakt.

Score

4.8

Consistentie

9.0

Betrouwbaarheid

n.v.t.

Totaal aantal uitvoer-tokens

1,625

Totaal aantal invoer-tokens

0

Invoerprijs

$0.250 / 1M

Uitvoerprijs

$0.750 / 1M

Prijs voor cachelezen

n.v.t.

Prijs voor cacheschrijven

n.v.t.

Cacheprijzen gelden voor invoertokens. Lezen hergebruikt opgeslagen prompts; schrijven slaat ze op en kan extra kosten. Voor uitvoertokens geldt de uitvoerprijs.

Correcte tests

Foute tests: 14

Slaagpercentage per poging: 27.8%

Instabiele tests

2

Instabiele tests hadden gemengde uitkomsten over runs (minstens één geslaagd en één gefaald).

Responstijd (gem.)

613ms

Responstijd (max): 1.27s

Responstijd (totaal): 11.04s

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#99 Mercury 2

none
Kosten
$0.002
Tijd
1.8s
Tokens
1,514 tok

Rungeschiedenis

Getest op Score Betrouwbaarheid Correcte tests Totale kosten Vergelijken
2026-08-14 03:05 Hertest 4.7 10.0 $0.030 Vergelijken
2026-07-16 23:13 Nieuwe test toegevoegd 4.6 10.0 $0.030 Vergelijken
2026-06-04 14:27 Nieuwe test toegevoegd 4.5 10.0 $0.011 Vergelijken
2026-05-22 00:39 Suite gewijzigd 4.6 10.0 $0.009 Vergelijken
2026-04-11 01:44 Eerste geregistreerde run 4.8 n.v.t. $0.007 Huidige run

Runvergelijking

RunBenchmarkdekkingScoreConsistentieBetrouwbaarheidCorrecte testsInstabiele testsTotaal aantal uitvoer-tokensTotaal aantal invoer-tokensTotale kostenResponstijd (gem.)
2026-04-11 01:44 · Eerste geregistreerde run54/54 pogingen4.89.0n.v.t.4/1821,6250$0.007613ms
2026-08-14 03:05 · Hertest66/66 pogingen4.79.210.04/2229,58489,637$0.030825ms
Verschil—+0.1-0.200-7959-89637-$0.024-211ms

De benchmarkdekking verschilt: 54/54 pogingen (Doel: 3 herhalingen per test) tegenover 66/66 pogingen (Doel: 3 herhalingen per test). Totalen en herhalingsgevoelige statistieken zijn niet direct vergelijkbaar.

Deze twee runs gebruikten verschillende benchmarksets, dus de verschillen weerspiegelen zowel modelveranderingen als suitewijzigingen.

Grafieken

Kies eerst het eerste model en klik daarna op een tweede model om een zij-aan-zijpagina te openen.

Totaal aantal uitvoer-tokens

Score vs Totaal aantal uitvoer-tokens

Snelle vergelijking

Categorie-uitsplitsing

Categorie Score Consistentie Correcte tests
Anti-AI-trucs 3.0 10.0
Programmeren 3.6 8.9
Gecombineerd 3.0 10.0
Gegevensparsering en extractie 7.3 5.9
Domeinspecifiek 5.3 7.2
Algemene intelligentie 4.8 10.0
Instructies opvolgen 6.5 10.0
Puzzeloplossing 3.1 10.0
Toolaanroepen 10.0 10.0

Vergeleken modellen