Navigasi
AI BENCHY
Advertise here

Mercury 2.5 Preview (high) vs Qwen3.6 35B A3B (medium)

Skor rata-rata hampir imbang di 6.6 vs 6.6. Mercury 2.5 Preview (high) memiliki biaya benchmark lebih rendah di $0.030 vs $0.672. Mercury 2.5 Preview (high) lebih cepat di 4.01s vs 58.49s, dengan tingkat keberhasilan 65.2% vs 57.6%.

Benchmark dihasilkan dari suite pengujian AI BENCHY pada: 2026-09-02

Peringkat
#157
Total token output
163,505
Waktu respons (rata-rata)
4.01s
Total Biaya
$0.030
Peringkat
#156
Total token output
743,292
Waktu respons (rata-rata)
58.49s
Total Biaya
$0.672
Model yang direkomendasikan Mercury 2.5 Preview (high)

It has the best score here (6.6), while costing about 23.0x less than Qwen3.6 35B A3B (medium).

Perbandingan terperinci

Metrik Mercury 2.5 Preview Mercury 2.5 Preview high Rilis: 2026-09-02 Qwen3.6 35B A3B Qwen3.6 35B A3B medium Rilis: 2026-04-20
Skor 6.6 6.6
Peringkat #157 #156
Keandalan 10.0 10.0
Konsistensi 8.2 9.2
Percobaan 66/66 66/66
Tes benar
Tingkat lulus per percobaan 65.2% 57.6%
Tes tidak stabil 5 2
Total Run 66 66
Biaya per hasil 0.243 6.212
Total Biaya $0.030 $0.672
Harga input $0.040 / 1M $0.100 / 1M
Harga output $0.150 / 1M $0.900 / 1M
Total token input 115,759 85,148
Token output 2,562 61,736
Token penalaran 160,943 681,556
Waktu respons (rata-rata) 4.01s 58.49s
Waktu respons (maks) 17.71s 817.57s
Waktu respons (total) 88.25s 1169.83s
Parameter ~100B 35B total (3B aktif)
Ketersediaan Tertutup Sumber terbuka

Showcase generasi model

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#157 Mercury 2.5 Preview

high
Biaya
$0.001
Waktu
4.5s
Token
3,851 tok

#156 Qwen3.6 35B A3B

medium
SVG tidak valid
Biaya
$0.000
Waktu
300.0s
Token
0 tok

Model teratas berdasarkan skor

Skor vs Total Biaya

Waktu respons (rata-rata)

Skor vs Waktu respons (rata-rata)

Total token output

Skor vs Total token output

Rincian Kategori

Pemrograman Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token input Token output Token penalaran
Mercury 2.5 Preview 6.7 7.8 55.6% 1 6.13s 7,751 485 42,569
Qwen3.6 35B A3B 7.7 10.0 66.7% 0 50.55s 5,051 7,929 37,223

Perbandingan Cepat

Ganti Pasangan Perbandingan