Navigasi
Advertise here

Mercury 2.5 Preview — high vs medium

medium unggul dalam skor rata-rata dengan 6.8 vs 6.5. medium memiliki biaya benchmark lebih rendah di $0.039 vs $0.040. medium lebih cepat di 6.66s vs 7.61s, dengan tingkat keberhasilan 65.2% vs 66.7%.

Benchmark dihasilkan dari suite pengujian AI BENCHY pada: 2026-10-16

Model yang Dibandingkan

Peringkat
#223
Total token output
180,597
Waktu respons (rata-rata)
7.61s
Total Biaya
$0.040
Peringkat
#199
Total token output
150,107
Waktu respons (rata-rata)
6.66s
Total Biaya
$0.039
Model yang direkomendasikan medium

Model ini memiliki skor tertinggi dalam perbandingan ini (6.8) dan keseimbangan terbaik antara biaya dan waktu respons di antara 2 model.

Perbandingan terperinci

Metrik Mercury 2.5 Preview Mercury 2.5 Preview high Rilis: 2026-09-02 Mercury 2.5 Preview Mercury 2.5 Preview medium Rilis: 2026-09-02
Skor 6.5 6.8
Peringkat #223 #199
Keandalan 9.9 10.0
Konsistensi 8.0 9.6
Percobaan 69/69 69/69
Tes benar
Tingkat lulus per percobaan 65.2% 66.7%
Tes tidak stabil 6 1
Total Run 69 69
Biaya per hasil 0.319 0.244
Total Biaya $0.040 $0.039
Harga input $0.040 / 1M $0.040 / 1M
Harga output $0.150 / 1M $0.150 / 1M
Harga baca cache T/A T/A
Harga tulis cache T/A T/A
Total token input 298,512 397,291
Token output 3,178 6,355
Token penalaran 177,419 143,752
Waktu respons (rata-rata) 7.61s 6.66s
Waktu respons (maks) 86.84s 74.63s
Waktu respons (total) 175.08s 153.29s
Parameter ~100B ~100B
Ketersediaan Tertutup Tertutup

Harga cache berlaku untuk token input. Pembacaan memakai kembali prompt tersimpan; penulisan menyimpannya dan dapat menambah biaya. Token output menggunakan harga output.

Showcase generasi model

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#223 Mercury 2.5 Preview

high
Biaya
$0.001
Waktu
4.5s
Token
3,851 tok

#199 Mercury 2.5 Preview

medium
Biaya
$0.001
Waktu
2.7s
Token
2,241 tok

Model teratas berdasarkan skor

Skor vs Total Biaya

Waktu respons (rata-rata)

Skor vs Waktu respons (rata-rata)

Total token output

Skor vs Total token output

Rincian Kategori

Pemrograman Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token input Token output Token penalaran
Mercury 2.5 Preview 6.7 7.8 55.6% 1 6.13s 7,751 485 42,569
Mercury 2.5 Preview 7.8 10.0 66.7% 0 3.86s 7,839 552 22,126

Ganti Pasangan Perbandingan