AI BENCHY
Advertise here

#153

Mercury 2

Inception Veröffentlichung: 2026-02-24 Getestet am: 2026-05-22 00:39 inception/mercury-2::none
(medium) (none)

Punktzahl

4.6

Konsistenz

9.1

Gesamte Ausgabe-Token

3,001

Gesamte Eingabe-Token

25,515

Eingabepreis

$0.250 / 1M

Ausgabepreis

$0.750 / 1M

Korrekte Tests

Falsche Tests: 16

Erfolgsquote pro Versuch: 25.0%

Instabile Tests

2

Instabile Tests hatten gemischte Ergebnisse über Läufe hinweg (mindestens ein Erfolg und ein Fehlschlag).

Antwortzeit (Durchschnitt)

614ms

Antwortzeit (Maximum): 1.27s

Antwortzeit (Gesamt): 12.28s

Testverlauf

Getestet am Punktzahl Zuverlässigkeit Korrekte Tests Gesamtkosten Vergleichen
2026-05-22 00:39 Suite geändert 4.6 10.0 $0.009 Aktueller Lauf
2026-04-11 01:44 Erster erfasster Lauf 4.8 k. A. $0.007 Vergleichen

Dieser Lauf nutzte eine andere Benchmark-Suite. Berücksichtige Suite-Änderungen bei der historischen Einordnung.

Laufvergleich

LaufPunktzahlKonsistenzZuverlässigkeitKorrekte TestsInstabile TestsGesamte Ausgabe-TokenGesamte Eingabe-TokenGesamtkostenAntwortzeit (Durchschnitt)
2026-05-22 00:39 · Aktueller Lauf4.69.110.04/2023,00125,515$0.009614ms
2026-04-11 01:44 · Erster erfasster Lauf4.89.0k. A.4/1821,6250$0.007613ms
Differenz-0.2+0.100+1376+25515+$0.003+1ms

Diese beiden Läufe nutzten unterschiedliche Benchmark-Suiten, daher spiegeln die Deltas sowohl Modell- als auch Suite-Änderungen wider.

Preisverlauf

Historische Preisdaten für dieses Modell von OpenRouter.

Datum Eingabepreis Ausgabepreis
2026-06-03 21:35 $0.250 / 1M $0.750 / 1M

Diagramme

Wähle zuerst das erste Modell und klicke dann ein zweites Modell, um eine Seite im direkten Vergleich zu öffnen.

Gesamte Ausgabe-Token

Punktzahl vs Gesamte Ausgabe-Token

Schnellvergleich

Kategorieaufschlüsselung

Kategorie Punktzahl Konsistenz Korrekte Tests
Anti-KI-Tricks 3.0 10.0
Programmierung 3.5 9.4
Kombiniert 3.0 10.0
Datenanalyse und -extraktion 7.3 5.9
Domänenspezifisch 5.3 7.2
Allgemeine Intelligenz 4.8 10.0
Befolgung von Anweisungen 6.5 10.0
Rätsellösen 3.1 10.0
Werkzeugaufrufe 10.0 10.0
Allgemeinwissen 3.0 10.0

Verglichene Modelle