Mercury 2.5 Preview (medium) vs Grok 4.7 (high)

Model yang Dibandingkan

Model yang direkomendasikan Mercury 2.5 Preview (medium)

It has the best score here (7.5), while costing about 92.5x less than Grok 4.7 (high).

Metrik	Mercury 2.5 Preview Mercury 2.5 Preview medium Rilis: 2026-09-02	Grok 4.7 Grok 4.7 high Rilis: 2026-09-21

Metrik	Mercury 2.5 Preview Mercury 2.5 Preview medium Rilis: 2026-09-02	Grok 4.7 Grok 4.7 high Rilis: 2026-09-21
Skor	7.5	7.5
Peringkat	#115	#110
Keandalan	10.0	9.5
Konsistensi	9.6	7.6
Percobaan	66/66	66/66
Tes benar
Tingkat lulus per percobaan	69.7%	75.8%
Tes tidak stabil	1	7
Total Run	66	66
Biaya per hasil	0.158	16.765
Total Biaya	$0.024	$2.180
Harga input	$0.040 / 1M	$1.600 / 1M
Harga output	$0.150 / 1M	$4.800 / 1M
Total token input	112,713	113,892
Token output	5,436	6,907
Token penalaran	121,598	409,179
Waktu respons (rata-rata)	3.58s	113.10s
Waktu respons (maks)	17.84s	573.57s
Waktu respons (total)	78.66s	2488.20s
Parameter	~100B	~1.7T total (~170B aktif)
Ketersediaan	Tertutup	Tertutup

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

medium

high

Kategori:

Trik anti-AI	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Mercury 2.5 Preview	10.0	10.0	100.0%	0		1.43s	781	203	7,921
Grok 4.7	8.7	7.9	91.7%	1		27.98s	2,743	111	14,914

Pemrograman	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Mercury 2.5 Preview	7.8	10.0	66.7%	0		3.86s	7,839	552	22,126
Grok 4.7	6.0	4.6	66.7%	2		335.92s	10,266	353	199,976

Gabungan	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Mercury 2.5 Preview	6.5	10.0	50.0%	0		13.86s	92,663	3,607	41,588
Grok 4.7	8.6	6.9	83.3%	1		129.30s	75,277	5,730	60,640

Parsing dan ekstraksi data	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Mercury 2.5 Preview	10.0	10.0	100.0%	0		2.77s	8,292	514	11,354
Grok 4.7	10.0	10.0	100.0%	0		8.65s	8,937	225	4,043

Spesifik domain	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Mercury 2.5 Preview	5.3	7.2	44.4%	1		3.72s	853	62	17,120
Grok 4.7	5.3	7.2	44.4%	1		306.71s	1,980	10	98,585

Kecerdasan umum	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Mercury 2.5 Preview	5.0	10.0	0.0%	0		2.09s	538	99	3,375
Grok 4.7	4.1	2.7	33.3%	1		17.06s	1,077	52	3,238

Kepatuhan instruksi	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Mercury 2.5 Preview	9.8	10.0	100.0%	0		1.35s	744	96	3,987
Grok 4.7	8.4	6.9	83.3%	1		14.15s	1,857	57	6,421

Pemecahan teka-teki	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Mercury 2.5 Preview	10.0	10.0	100.0%	0		1.87s	771	274	7,323
Grok 4.7	10.0	10.0	100.0%	0		19.88s	2,430	178	10,706

Pemanggilan alat	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Mercury 2.5 Preview	3.0	10.0	0.0%	0		2.37s	0	0	0
Grok 4.7	10.0	10.0	100.0%	0		5.08s	8,536	177	568

Pengetahuan umum	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Mercury 2.5 Preview	3.0	10.0	0.0%	0		4.13s	232	29	6,804
Grok 4.7	3.0	10.0	0.0%	0		62.44s	789	14	10,088

Ganti Pasangan Perbandingan