Navigasi
Advertise here

Mercury 2.5 (high) vs Beam 1.0 501B A23B (medium)

Beam 1.0 501B A23B (medium) unggul dalam skor rata-rata dengan 6.6 vs 6.5. Mercury 2.5 (high) memiliki biaya benchmark lebih rendah di $0.044 vs $0.499. Beam 1.0 501B A23B (medium) lebih cepat di 6.27s vs 7.62s, dengan tingkat keberhasilan 59.4% vs 65.2%.

Benchmark dihasilkan dari suite pengujian AI BENCHY pada: 2026-10-17

Model yang Dibandingkan

Peringkat
#225
Total token output
193,676
Waktu respons (rata-rata)
7.62s
Total Biaya
$0.044
Peringkat
#220
Total token output
98,521
Waktu respons (rata-rata)
6.27s
Total Biaya
$0.499
Model yang direkomendasikan Mercury 2.5 (high)

Its score stays close to the best score here (6.5 vs 6.6), while costing about 11.5x less than Beam 1.0 501B A23B (medium).

Perbandingan terperinci

Metrik Mercury 2.5 Mercury 2.5 high Rilis: 2026-09-08 Beam 1.0 501B A23B Beam 1.0 501B A23B medium Rilis: 2026-10-17
Skor 6.5 6.6
Peringkat #225 #220
Keandalan 9.8 10.0
Konsistensi 8.7 9.3
Percobaan 69/69 69/69
Tes benar
Tingkat lulus per percobaan 59.4% 65.2%
Tes tidak stabil 4 2
Total Run 69 69
Biaya per hasil 0.362 3.561
Total Biaya $0.044 $0.499
Harga input $0.040 / 1M $1.000 / 1M
Harga output $0.150 / 1M $3.000 / 1M
Harga baca cache $0.004 / 1M $0.100 / 1M
Harga tulis cache T/A T/A
Total token input 358,562 202,937
Token output 4,266 4,328
Token penalaran 189,410 94,193
Waktu respons (rata-rata) 7.62s 6.27s
Waktu respons (maks) 80.30s 31.55s
Waktu respons (total) 175.36s 144.28s
Parameter ~100B 501B total (23B aktif)
Ketersediaan Tertutup Sumber terbuka

Harga cache berlaku untuk token input. Pembacaan memakai kembali prompt tersimpan; penulisan menyimpannya dan dapat menambah biaya. Token output menggunakan harga output.

Showcase generasi model

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#225 Mercury 2.5

high
Biaya
$0.001
Waktu
3.5s
Token
2,447 tok

#220 Beam 1.0 501B A23B

medium
Biaya
$0.005
Waktu
11.8s
Token
4,267 tok

Model teratas berdasarkan skor

Skor vs Total Biaya

Waktu respons (rata-rata)

Skor vs Waktu respons (rata-rata)

Total token output

Skor vs Total token output

Rincian Kategori

Pemrograman Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token input Token output Token penalaran
Mercury 2.5 6.4 7.8 44.4% 1 6.58s 7,757 415 44,012
Beam 1.0 501B A23B 10.0 10.0 100.0% 0 11.81s 7,791 440 27,204

Ganti Pasangan Perbandingan