Navigation
Advertise here

Mercury 2.5 Preview (high) vs Beam 1.0 501B A23B (medium)

Beam 1.0 501B A23B (medium) führt beim Durchschnittsscore mit 6.6 vs 6.5. Mercury 2.5 Preview (high) hat die niedrigeren Benchmark-Kosten mit $0.040 vs $0.499. Beam 1.0 501B A23B (medium) ist schneller mit 6.27s vs 7.61s, mit Erfolgsraten von 65.2% vs 65.2%.

Benchmarks aus AI BENCHY-Test-Suites generiert am: 2026-10-17

Verglichene Modelle

Rang
#224
Gesamte Ausgabe-Token
180,597
Antwortzeit (Durchschnitt)
7.61s
Gesamtkosten
$0.040
Rang
#220
Gesamte Ausgabe-Token
98,521
Antwortzeit (Durchschnitt)
6.27s
Gesamtkosten
$0.499
Empfohlenes Modell Mercury 2.5 Preview (high)

Die Punktzahl bleibt nah an der besten hier (6.5 vs 6.6) und es kostet etwa 12.8x weniger als Beam 1.0 501B A23B (medium).

Detaillierter Vergleich

Metrik Mercury 2.5 Preview Mercury 2.5 Preview high Veröffentlichung: 2026-09-02 Beam 1.0 501B A23B Beam 1.0 501B A23B medium Veröffentlichung: 2026-10-17
Punktzahl 6.5 6.6
Rang #224 #220
Zuverlässigkeit 9.9 10.0
Konsistenz 8.0 9.3
Versuche 69/69 69/69
Korrekte Tests
Erfolgsquote pro Versuch 65.2% 65.2%
Instabile Tests 6 2
Gesamtläufe 69 69
Kosten pro Ergebnis 0.319 3.561
Gesamtkosten $0.040 $0.499
Eingabepreis $0.040 / 1M $1.000 / 1M
Ausgabepreis $0.150 / 1M $3.000 / 1M
Preis für Cache-Lesen k. A. $0.100 / 1M
Preis für Cache-Schreiben k. A. k. A.
Gesamte Eingabe-Token 298,512 202,937
Ausgabe-Token 3,178 4,328
Denk-Token 177,419 94,193
Antwortzeit (Durchschnitt) 7.61s 6.27s
Antwortzeit (Maximum) 86.84s 31.55s
Antwortzeit (Gesamt) 175.08s 144.28s
Parameter ~100B 501B insgesamt (23B aktiv)
Verfügbarkeit Geschlossen Open Source

Cache-Preise gelten für Eingabetokens. Lesen nutzt gespeicherte Prompts erneut; Schreiben speichert sie und kann mehr kosten. Für Ausgabetokens gilt der Ausgabepreis.

Modell-Generierungs-Showcase

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#224 Mercury 2.5 Preview

high
Kosten
$0.001
Zeit
4.5s
Token
3,851 tok

#220 Beam 1.0 501B A23B

medium
Kosten
$0.005
Zeit
11.8s
Token
4,267 tok

Top-Modelle nach Score

Score vs. Gesamtkosten

Antwortzeit (Durchschnitt)

Punktzahl vs Antwortzeit (Durchschnitt)

Gesamte Ausgabe-Token

Punktzahl vs Gesamte Ausgabe-Token

Kategorieaufschlüsselung

Programmierung Punktzahl Konsistenz Erfolgsquote pro Versuch Instabile Tests Korrekte Tests Antwortzeit (Durchschnitt) Eingabe-Token Ausgabe-Token Denk-Token
Mercury 2.5 Preview 6.7 7.8 55.6% 1 6.13s 7,751 485 42,569
Beam 1.0 501B A23B 10.0 10.0 100.0% 0 11.81s 7,791 440 27,204

Vergleichspaar wechseln