#99 Mercury 2
none- Kosten
- $0.002
- Tijd
- 1.8s
- Tokens
- 1,514 tok
Samenvatting
Mercury 2 scoort 4.8 op AI BENCHY en staat op #99. Het model heeft n.v.t. betrouwbaarheid, een slagingspercentage van 27.8%, $0.007 totale kosten en 613ms gemiddelde responstijd.
Wat Mercury 2 uniek maakt: De totale benchmarkkosten zijn ongewoon laag voor dit scoreniveau. Het is opvallend snel vergeleken met vergelijkbare modellen.
4.8
Consistentie
9.0
n.v.t.
Totaal aantal uitvoer-tokens
1,625
Totaal aantal invoer-tokens
0
Invoerprijs
$0.250 / 1M
Uitvoerprijs
$0.750 / 1M
Instabiele tests
2
Instabiele tests hadden gemengde uitkomsten over runs (minstens één geslaagd en één gefaald).
Prompt: Create a detailed SVG illustration of a hamster playing table tennis.
Rungeschiedenis
| Getest op | Score | Betrouwbaarheid | Correcte tests | Totale kosten | Vergelijken |
|---|---|---|---|---|---|
| 2026-07-16 23:13 Nieuwe test toegevoegd | 4.6 | 10.0 | $0.030 | Vergelijken | |
| 2026-06-04 14:27 Nieuwe test toegevoegd | 4.5 | 10.0 | $0.011 | Vergelijken | |
| 2026-05-22 00:39 Suite gewijzigd | 4.6 | 10.0 | $0.009 | Vergelijken | |
| 2026-04-11 01:44 Eerste geregistreerde run | 4.8 | n.v.t. | $0.007 | Huidige run |
Runvergelijking
| Run | Score | Consistentie | Betrouwbaarheid | Correcte tests | Instabiele tests | Totaal aantal uitvoer-tokens | Totaal aantal invoer-tokens | Totale kosten | Responstijd (gem.) |
|---|---|---|---|---|---|---|---|---|---|
| 2026-04-11 01:44 · Eerste geregistreerde run | 4.8 | 9.0 | n.v.t. | 4/18 | 2 | 1,625 | 0 | $0.007 | 613ms |
| 2026-07-16 23:13 · Nieuwe test toegevoegd | 4.6 | 9.2 | 10.0 | 4/22 | 2 | 9,564 | 88,704 | $0.030 | 829ms |
| Verschil | +0.2 | -0.2 | 0 | 0 | -7939 | -88704 | -$0.023 | -216ms |
Deze twee runs gebruikten verschillende benchmarksets, dus de verschillen weerspiegelen zowel modelveranderingen als suitewijzigingen.
Kies eerst het eerste model en klik daarna op een tweede model om een zij-aan-zijpagina te openen.
| Categorie | Score | Consistentie | Correcte tests |
|---|---|---|---|
| Anti-AI-trucs | 3.0 | 10.0 | |
| Programmeren | 3.6 | 8.9 | |
| Gecombineerd | 3.0 | 10.0 | |
| Gegevensparsering en extractie | 7.3 | 5.9 | |
| Domeinspecifiek | 5.3 | 7.2 | |
| Algemene intelligentie | 4.8 | 10.0 | |
| Instructies opvolgen | 6.5 | 10.0 | |
| Puzzeloplossing | 3.1 | 10.0 | |
| Toolaanroepen | 10.0 | 10.0 |