Navigasi
Advertise here

DeepSeek V4 Pro vs Mercury 2.5 (medium)

Skor rata-rata hampir imbang di 6.8 vs 6.8. Mercury 2.5 (medium) memiliki biaya benchmark lebih rendah di $0.022 vs $0.208. Mercury 2.5 (medium) lebih cepat di 3.19s vs 11.71s, dengan tingkat keberhasilan 47.0% vs 65.2%.

Benchmark dihasilkan dari suite pengujian AI BENCHY pada: 2026-09-08

Model yang Dibandingkan

Peringkat
#154
Total token output
35,547
Waktu respons (rata-rata)
11.71s
Total Biaya
$0.208
Peringkat
#157
Total token output
120,129
Waktu respons (rata-rata)
3.19s
Total Biaya
$0.022
Model yang direkomendasikan Mercury 2.5 (medium)

It has the best score here (6.8), while costing about 9.6x less than DeepSeek V4 Pro.

Perbandingan terperinci

Metrik DeepSeek V4 Pro DeepSeek V4 Pro none Rilis: 2026-04-24 Mercury 2.5 Mercury 2.5 medium Rilis: 2026-09-08
Skor 6.8 6.8
Peringkat #154 #157
Keandalan 10.0 9.8
Konsistensi 8.6 8.6
Percobaan 66/66 66/66
Tes benar
Tingkat lulus per percobaan 47.0% 65.2%
Tes tidak stabil 4 4
Total Run 66 66
Biaya per hasil 1.061 0.181
Total Biaya $0.208 $0.022
Harga input $0.947 / 1M $0.040 / 1M
Harga output $1.893 / 1M $0.150 / 1M
Total token input 148,078 91,402
Token output 35,547 3,138
Token penalaran 0 116,991
Waktu respons (rata-rata) 11.71s 3.19s
Waktu respons (maks) 119.44s 9.87s
Waktu respons (total) 257.67s 70.18s
Parameter 1.6T total (49B aktif) ~100B
Ketersediaan Sumber terbuka Tertutup

Showcase generasi model

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#154 DeepSeek V4 Pro

none
Reached the allocated time limit (300 seconds) without receiving showcase output.
Biaya
$0.000
Waktu
300.0s
Token
0 tok

#157 Mercury 2.5

medium
Biaya
$0.001
Waktu
3.8s
Token
3,386 tok

Model teratas berdasarkan skor

Skor vs Total Biaya

Waktu respons (rata-rata)

Skor vs Waktu respons (rata-rata)

Total token output

Skor vs Total token output

Rincian Kategori

Pemrograman Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token input Token output Token penalaran
DeepSeek V4 Pro 5.6 10.0 33.3% 0 13.38s 7,275 5,500 0
Mercury 2.5 5.0 5.1 44.5% 2 3.70s 7,807 488 21,857

Perbandingan Cepat

Ganti Pasangan Perbandingan