Navigasi
Advertise here

Mercury 2.5 (high) vs GPT-6 Luna (low)

Skor rata-rata hampir imbang di 7.1 vs 7.0. GPT-6 Luna (low) memiliki biaya benchmark lebih rendah di $0.020 vs $0.031. Mercury 2.5 (high) lebih cepat di 4.32s vs 21.96s, dengan tingkat keberhasilan 62.1% vs 62.1%.

Benchmark dihasilkan dari suite pengujian AI BENCHY pada: 2026-09-23

Model yang Dibandingkan

Peringkat
#156
Total token output
174,547
Waktu respons (rata-rata)
4.32s
Total Biaya
$0.031
Peringkat
#159
Total token output
22,605
Waktu respons (rata-rata)
21.96s
Total Biaya
$0.020
Model yang direkomendasikan Mercury 2.5 (high)

It has the best score here (7.1), while responding about 5.1x faster than GPT-6 Luna (low).

Perbandingan terperinci

Metrik Mercury 2.5 Mercury 2.5 high Rilis: 2026-09-08 GPT-6 Luna GPT-6 Luna low Rilis: 2026-09-23
Skor 7.1 7.0
Peringkat #156 #159
Keandalan 9.7 9.6
Konsistensi 8.6 8.5
Percobaan 66/66 66/66
Tes benar
Tingkat lulus per percobaan 62.1% 62.1%
Tes tidak stabil 4 4
Total Run 66 66
Biaya per hasil 0.259 0.176
Total Biaya $0.031 $0.020
Harga input $0.040 / 1M $0.100 / 1M
Harga output $0.150 / 1M $0.500 / 1M
Total token input 120,068 80,159
Token output 3,402 4,623
Token penalaran 171,145 17,982
Waktu respons (rata-rata) 4.32s 21.96s
Waktu respons (maks) 23.63s 89.37s
Waktu respons (total) 95.06s 483.19s
Parameter ~100B ~400B total (~17B aktif)
Ketersediaan Tertutup Tertutup

Showcase generasi model

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#156 Mercury 2.5

high
Biaya
$0.001
Waktu
3.5s
Token
2,447 tok

#159 GPT-6 Luna

low
Biaya
$0.002
Waktu
19.2s
Token
2,598 tok

Model teratas berdasarkan skor

Skor vs Total Biaya

Waktu respons (rata-rata)

Skor vs Waktu respons (rata-rata)

Total token output

Skor vs Total token output

Rincian Kategori

Pemrograman Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token input Token output Token penalaran
Mercury 2.5 6.4 7.8 44.4% 1 6.58s 7,757 415 44,012
GPT-6 Luna 6.0 7.2 55.6% 1 15.39s 7,302 493 6,655

Perbandingan Cepat

Ganti Pasangan Perbandingan