Navigasi
Advertise here

Mercury 2.5 Preview (medium) vs Beam 1.0 501B A23B (medium)

Mercury 2.5 Preview (medium) unggul dalam skor rata-rata dengan 6.8 vs 6.6. Mercury 2.5 Preview (medium) memiliki biaya benchmark lebih rendah di $0.039 vs $0.499. Beam 1.0 501B A23B (medium) lebih cepat di 6.27s vs 6.66s, dengan tingkat keberhasilan 66.7% vs 65.2%.

Benchmark dihasilkan dari suite pengujian AI BENCHY pada: 2026-10-17

Model yang Dibandingkan

Peringkat
#199
Total token output
150,107
Waktu respons (rata-rata)
6.66s
Total Biaya
$0.039
Peringkat
#220
Total token output
98,521
Waktu respons (rata-rata)
6.27s
Total Biaya
$0.499
Model yang direkomendasikan Mercury 2.5 Preview (medium)

It has the best score here (6.8), while costing about 13.0x less than Beam 1.0 501B A23B (medium).

Perbandingan terperinci

Metrik Mercury 2.5 Preview Mercury 2.5 Preview medium Rilis: 2026-09-02 Beam 1.0 501B A23B Beam 1.0 501B A23B medium Rilis: 2026-10-17
Skor 6.8 6.6
Peringkat #199 #220
Keandalan 10.0 10.0
Konsistensi 9.6 9.3
Percobaan 69/69 69/69
Tes benar
Tingkat lulus per percobaan 66.7% 65.2%
Tes tidak stabil 1 2
Total Run 69 69
Biaya per hasil 0.244 3.561
Total Biaya $0.039 $0.499
Harga input $0.040 / 1M $1.000 / 1M
Harga output $0.150 / 1M $3.000 / 1M
Harga baca cache T/A $0.100 / 1M
Harga tulis cache T/A T/A
Total token input 397,291 202,937
Token output 6,355 4,328
Token penalaran 143,752 94,193
Waktu respons (rata-rata) 6.66s 6.27s
Waktu respons (maks) 74.63s 31.55s
Waktu respons (total) 153.29s 144.28s
Parameter ~100B 501B total (23B aktif)
Ketersediaan Tertutup Sumber terbuka

Harga cache berlaku untuk token input. Pembacaan memakai kembali prompt tersimpan; penulisan menyimpannya dan dapat menambah biaya. Token output menggunakan harga output.

Showcase generasi model

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#199 Mercury 2.5 Preview

medium
Biaya
$0.001
Waktu
2.7s
Token
2,241 tok

#220 Beam 1.0 501B A23B

medium
Biaya
$0.005
Waktu
11.8s
Token
4,267 tok

Model teratas berdasarkan skor

Skor vs Total Biaya

Waktu respons (rata-rata)

Skor vs Waktu respons (rata-rata)

Total token output

Skor vs Total token output

Rincian Kategori

Pemrograman Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token input Token output Token penalaran
Mercury 2.5 Preview 7.8 10.0 66.7% 0 3.86s 7,839 552 22,126
Beam 1.0 501B A23B 10.0 10.0 100.0% 0 11.81s 7,791 440 27,204

Ganti Pasangan Perbandingan