AI BENCHY
Advertise here
#143

Mercury 2

Inception Releasedatum: 2026-02-24 Getest op: 2026-05-22 00:39 inception/mercury-2::none
~100BOverigGesloten broncodeGeschat
(medium) (none)

Samenvatting

Mercury 2 scoort 4.6 op AI BENCHY en staat op #143. Het model heeft 10.0 betrouwbaarheid, een slagingspercentage van 25.0%, $0.009 totale kosten en 614ms gemiddelde responstijd.

Wat Mercury 2 uniek maakt: De totale benchmarkkosten zijn ongewoon laag voor dit scoreniveau. Het is opvallend snel vergeleken met vergelijkbare modellen.

Modelgegevens

Onderzocht op 2026-08-12

Geschat
Parameters
~100B
Architectuur
Overig
Beschikbaarheid
Gesloten broncode
Licentie
-

Beste schatting op basis van openbare informatie; de leverancier heeft niet alle waarden bekendgemaakt.

Bron voor parameters Bron voor beschikbaarheid

Score

4.6

Consistentie

9.1

Betrouwbaarheid

10.0

Totale kosten (huidige prijs)

$0.009

Totaal aantal uitvoer-tokens

2,984

Totaal aantal invoer-tokens

0

Invoerprijs

$0.250 / 1M

Uitvoerprijs

$0.750 / 1M

Correcte tests

Foute tests: 16

Slaagpercentage per poging: 25.0%

Instabiele tests

2

Instabiele tests hadden gemengde uitkomsten over runs (minstens één geslaagd en één gefaald).

Responstijd (gem.)

614ms

Responstijd (max): 1.27s

Responstijd (totaal): 12.28s

Verkeerd antwoord: 15 Instructies niet gevolgd: 1

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#143 Mercury 2

none
Kosten
$0.002
Tijd
1.8s
Tokens
1,514 tok

Rungeschiedenis

Getest op Score Betrouwbaarheid Correcte tests Totale kosten Vergelijken
2026-08-14 03:05 Hertest 4.7 10.0 $0.030 Vergelijken
2026-07-16 23:13 Nieuwe test toegevoegd 4.6 10.0 $0.030 Vergelijken
2026-06-04 14:27 Nieuwe test toegevoegd 4.5 10.0 $0.011 Vergelijken
2026-05-22 00:39 Suite gewijzigd 4.6 10.0 $0.009 Huidige run
2026-04-11 01:44 Eerste geregistreerde run 4.8 n.v.t. $0.007 Vergelijken

Deze run gebruikte een andere benchmarkset. Houd rekening met suitewijzigingen bij het lezen van historische verschuivingen.

Grafieken

Kies eerst het eerste model en klik daarna op een tweede model om een zij-aan-zijpagina te openen.

Totaal aantal uitvoer-tokens

Score vs Totaal aantal uitvoer-tokens

Snelle vergelijking

Mercury 2nonevsCobuddymediumMercury 2nonevsGranite 4.2 8BhighMercury 2nonevsTrinity Large PreviewnoneMercury 2nonevsQwen3 Coder NextmediumMercury 2nonevsGLM 4.7 FlashnoneMercury 2nonevsMiniMax M2.5mediumMercury 2nonevsKAT-Coder-Air V2.5noneMercury 2nonevsLaguna S 2.1noneGratis beschikbaarMercury 2nonevsTrinity Large ThinkinghighMercury 2nonevsGLM 4.7 Flashmedium

Categorie-uitsplitsing

Categorie Score Consistentie Correcte tests
Anti-AI-trucs 3.0 10.0
Programmeren 3.5 9.4
Gecombineerd 3.0 10.0
Gegevensparsering en extractie 7.3 5.9
Domeinspecifiek 5.3 7.2
Algemene intelligentie 4.8 10.0
Instructies opvolgen 6.5 10.0
Puzzeloplossing 3.1 10.0
Toolaanroepen 10.0 10.0
Algemene kennis 3.0 10.0

Vergeleken modellen