Navigation
AD
Track all your projects in one dashboard. Get 📊stats, 🔥heatmaps and 👀recordings in one self-hosted dashboard.
uxwizz.com

Ember-1 (high) vs Mercury 2 (medium)

Ember-1 (high) führt beim Durchschnittsscore mit 7.1 vs 7.0. Mercury 2 (medium) hat die niedrigeren Benchmark-Kosten mit $0.094 vs $1.798. Mercury 2 (medium) ist schneller mit 2.95s vs 56.77s, mit Erfolgsraten von 71.2% vs 53.0%.

Benchmarks aus AI BENCHY-Test-Suites generiert am: 2026-09-28

Verglichene Modelle

Rang
#158
Gesamte Ausgabe-Token
110,125
Antwortzeit (Durchschnitt)
56.77s
Gesamtkosten
$1.798
Rang
#166
Gesamte Ausgabe-Token
87,554
Antwortzeit (Durchschnitt)
2.95s
Gesamtkosten
$0.094
Empfohlenes Modell Mercury 2 (medium)

Die Punktzahl bleibt nah an der besten hier (7.0 vs 7.1) und es kostet etwa 19.3x weniger als Ember-1 (high).

Detaillierter Vergleich

Metrik Ember-1 Ember-1 high Veröffentlichung: 2026-09-28 Mercury 2 Mercury 2 medium Veröffentlichung: 2026-02-24
Punktzahl 7.1 7.0
Rang #158 #166
Zuverlässigkeit 8.0 10.0
Konsistenz 7.3 8.4
Versuche 66/66 66/66
Korrekte Tests
Erfolgsquote pro Versuch 71.2% 53.0%
Instabile Tests 7 4
Gesamtläufe 66 66
Kosten pro Ergebnis 14.981 0.933
Gesamtkosten $1.798 $0.094
Eingabepreis $3.000 / 1M $0.250 / 1M
Ausgabepreis $15.000 / 1M $0.750 / 1M
Gesamte Eingabe-Token 48,577 110,515
Ausgabe-Token 7,345 10,325
Denk-Token 102,780 77,229
Antwortzeit (Durchschnitt) 56.77s 2.95s
Antwortzeit (Maximum) 255.06s 14.63s
Antwortzeit (Gesamt) 1248.88s 61.89s
Parameter ~2.8T insgesamt (~104B aktiv) ~100B
Verfügbarkeit Geschlossen Geschlossen

Modell-Generierungs-Showcase

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#158 Ember-1

high
Kosten
$0.038
Zeit
55.1s
Token
2,671 tok

#166 Mercury 2

medium
Kosten
$0.002
Zeit
2.1s
Token
1,702 tok

Top-Modelle nach Score

Score vs. Gesamtkosten

Antwortzeit (Durchschnitt)

Punktzahl vs Antwortzeit (Durchschnitt)

Gesamte Ausgabe-Token

Punktzahl vs Gesamte Ausgabe-Token

Kategorieaufschlüsselung

Programmierung Punktzahl Konsistenz Erfolgsquote pro Versuch Instabile Tests Korrekte Tests Antwortzeit (Durchschnitt) Eingabe-Token Ausgabe-Token Denk-Token
Ember-1 8.2 7.2 88.9% 1 72.23s 7,144 1,281 23,093
Mercury 2 8.2 7.7 77.8% 1 2.04s 7,065 296 11,328

Schnellvergleich

Vergleichspaar wechseln