Mercury 2.5 (low) vs GPT-4o-mini

Model yang Dibandingkan

Model yang direkomendasikan Mercury 2.5 (low)

It has the strongest score in this comparison (5.1) and the best overall balance of cost and response time across all 2 models.

Metrik	Mercury 2.5 Mercury 2.5 low Rilis: 2026-09-08	GPT-4o-mini GPT-4o-mini none Rilis: 2024-07-18

Metrik	Mercury 2.5 Mercury 2.5 low Rilis: 2026-09-08	GPT-4o-mini GPT-4o-mini none Rilis: 2024-07-18
Skor	5.1	5.0
Peringkat	#265	#274
Keandalan	9.8	10.0
Konsistensi	8.1	9.9
Percobaan	66/66	66/66
Tes benar
Tingkat lulus per percobaan	39.4%	22.7%
Tes tidak stabil	5	0
Total Run	66	66
Biaya per hasil	0.177	0.195
Total Biaya	$0.011	$0.010
Harga input	$0.040 / 1M	$0.150 / 1M
Harga output	$0.150 / 1M	$0.600 / 1M
Total token input	138,020	53,145
Token output	6,083	2,913
Token penalaran	27,636	0
Waktu respons (rata-rata)	1.35s	1.92s
Waktu respons (maks)	7.48s	7.58s
Waktu respons (total)	29.74s	30.71s
Parameter	~100B	~8B
Ketersediaan	Tertutup	Tertutup

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

low

none

Kategori:

Trik anti-AI	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Mercury 2.5	6.9	7.9	66.7%	1		799ms	772	209	2,969
GPT-4o-mini	4.8	10.0	25.0%	0		1.34s	618	186	0

Pemrograman	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Mercury 2.5	5.5	10.0	33.3%	0		972ms	7,909	521	2,269
GPT-4o-mini	3.2	9.6	0.0%	0		1.63s	7,314	367	0

Gabungan	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Mercury 2.5	3.0	10.0	0.0%	0		5.16s	107,683	3,750	11,351
GPT-4o-mini	3.0	10.0	0.0%	0		6.32s	29,916	1,497	0

Parsing dan ekstraksi data	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Mercury 2.5	6.5	10.0	50.0%	0		1.06s	8,322	739	1,499
GPT-4o-mini	10.0	10.0	100.0%	0		1.27s	7,161	183	0

Spesifik domain	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Mercury 2.5	3.6	7.2	22.2%	1		846ms	851	57	2,265
GPT-4o-mini	3.0	10.0	0.0%	0		743ms	741	17	0

Kecerdasan umum	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Mercury 2.5	4.4	9.9	0.0%	0		819ms	525	99	748
GPT-4o-mini	4.0	10.0	0.0%	0		909ms	480	66	0

Kepatuhan instruksi	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Mercury 2.5	2.9	6.0	16.7%	1		972ms	518	48	1,026
GPT-4o-mini	6.3	10.0	50.0%	0		1.11s	666	69	0

Pemecahan teka-teki	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Mercury 2.5	5.9	4.5	66.7%	2		792ms	768	249	2,214
GPT-4o-mini	3.5	10.0	0.0%	0		1.21s	651	308	0

Pemanggilan alat	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Mercury 2.5	9.8	10.0	100.0%	0		2.72s	10,440	388	2,537
GPT-4o-mini	10.0	10.0	100.0%	0		2.51s	5,400	205	0

Pengetahuan umum	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Mercury 2.5	3.0	10.0	0.0%	0		782ms	232	23	758
GPT-4o-mini	3.0	10.0	0.0%	0		794ms	198	15	0

Ganti Pasangan Perbandingan