Claude Sonnet 5.5 (medium) vs Mercury 2 (medium)

Model yang Dibandingkan

Peringkat: #222
Total token output: 37,748
Waktu respons (rata-rata): 8.03s
Total Biaya: $1.100

Peringkat: #218
Total token output: 96,943
Waktu respons (rata-rata): 4.40s
Total Biaya: $0.121

Model yang direkomendasikan Mercury 2 (medium)

It has the best score here (6.6), while costing about 9.2x less than Claude Sonnet 5.5 (medium).

Perbandingan terperinci

Metrik	Claude Sonnet 5.5 Claude Sonnet 5.5 medium Rilis: 2026-09-29	Mercury 2 Mercury 2 medium Rilis: 2026-02-24

Metrik	Claude Sonnet 5.5 Claude Sonnet 5.5 medium Rilis: 2026-09-29	Mercury 2 Mercury 2 medium Rilis: 2026-02-24
Skor	6.5	6.6
Peringkat	#222	#218
Keandalan	10.0	10.0
Konsistensi	9.7	8.1
Percobaan	69/69	69/69
Tes benar
Tingkat lulus per percobaan	40.6%	53.6%
Tes tidak stabil	1	5
Total Run	69	69
Biaya per hasil	12.221	1.201
Total Biaya	$1.100	$0.121
Harga input	$2.000 / 1M	$0.250 / 1M
Harga output	$10.000 / 1M	$0.750 / 1M
Harga baca cache	$0.200 / 1M	$0.025 / 1M
Harga tulis cache	$2.500 / 1M	T/A
Total token input	361,183	189,300
Token output	26,609	10,854
Token penalaran	11,139	86,089
Waktu respons (rata-rata)	8.03s	4.40s
Waktu respons (maks)	51.18s	34.92s
Waktu respons (total)	184.80s	96.81s
Parameter	~1T total (~100B aktif)	~100B
Ketersediaan	Tertutup	Tertutup

Harga cache berlaku untuk token input. Pembacaan memakai kembali prompt tersimpan; penulisan menyimpannya dan dapat menambah biaya. Token output menggunakan harga output.

Showcase generasi model

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#222 Claude Sonnet 5.5

medium

Biaya: $0.024
Waktu: 17.4s
Token: 2,525 tok

#218 Mercury 2

medium

Biaya: $0.002
Waktu: 2.1s
Token: 1,702 tok

Model teratas berdasarkan skor

Skor vs Total Biaya

Waktu respons (rata-rata)

Skor vs Waktu respons (rata-rata)

Total token output

Skor vs Total token output

Rincian Kategori

Kategori:

Tugas agen	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Claude Sonnet 5.5	10.0	10.0	100.0%	0		51.18s	190,412	3,424	1,344
Mercury 2	4.7	1.6	66.7%	1		34.92s	78,785	529	8,860

Trik anti-AI	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Claude Sonnet 5.5	6.5	10.0	50.0%	0		2.54s	858	1,697	0
Mercury 2	6.9	9.9	50.0%	0		1.12s	554	2,546	2,609

Pemrograman	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Claude Sonnet 5.5	3.4	9.7	0.0%	0		6.07s	10,608	6,767	0
Mercury 2	8.2	7.7	77.8%	1		2.04s	7,065	296	11,328

Gabungan	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Claude Sonnet 5.5	8.5	10.0	50.0%	0		23.58s	133,232	7,780	5,241
Mercury 2	6.7	9.1	50.0%	0		7.84s	87,365	6,533	20,474

Parsing dan ekstraksi data	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Claude Sonnet 5.5	6.5	10.0	50.0%	0		2.56s	10,515	696	0
Mercury 2	7.3	5.9	83.3%	1		1.11s	6,234	183	1,656

Spesifik domain	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Claude Sonnet 5.5	3.0	10.0	0.0%	0		8.78s	990	4,137	2,729
Mercury 2	2.9	4.4	22.2%	2		8.06s	1,638	53	31,177

Kecerdasan umum	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Claude Sonnet 5.5	5.1	3.4	33.3%	1		2.27s	714	324	0
Mercury 2	4.8	10.0	0.0%	0		821ms	456	137	542

Kepatuhan instruksi	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Claude Sonnet 5.5	6.3	10.0	50.0%	0		1.88s	921	346	0
Mercury 2	10.0	10.0	100.0%	0		1.07s	340	14	958

Pemecahan teka-teki	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Claude Sonnet 5.5	7.7	10.0	66.7%	0		2.43s	912	876	0
Mercury 2	5.4	10.0	33.3%	0		949ms	601	361	2,781

Pemanggilan alat	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Claude Sonnet 5.5	10.0	10.0	100.0%	0		4.75s	11,757	354	0
Mercury 2	10.0	10.0	100.0%	0		1.89s	6,080	180	1,956

Pengetahuan umum	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Claude Sonnet 5.5	3.0	10.0	0.0%	0		8.57s	264	208	1,825
Mercury 2	3.0	10.0	0.0%	0		2.58s	182	22	3,748

Ganti Pasangan Perbandingan

Mercury 2mediumvsStep 3.7 Flashhigh Claude Sonnet 5.5mediumvsMercury 2.5 Previewhigh Mercury 2mediumvsLongCat 2.0low Mercury 2mediumvsKAT-Coder-Pro V2.5low Claude Sonnet 5.5mediumvsMercury 2.5high Claude Sonnet 5.5mediumvsBeam 1.0 501B A23Bxhigh Claude Sonnet 5.5mediumvsKAT-Coder-Pro V2.5low Claude Sonnet 5.5mediumvsGLM 5.3low Claude Sonnet 5.5mediumvsGLM 5.1none Claude Sonnet 5.5mediumvsStep 3.7 Flashhigh Mercury 2mediumvsGLM 5.2none Claude Sonnet 5.5mediumvsKAT-Coder-Pro V2.5high