Mercury 2.5 (low) vs Inkling

Model yang Dibandingkan

Model yang direkomendasikan Mercury 2.5 (low)

Its score stays close to the best score here (5.1 vs 5.2), while costing about 13.9x less than Inkling.

Metrik	Mercury 2.5 Mercury 2.5 low Rilis: 2026-09-08	Inkling Inkling none Rilis: 2026-07-18

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

low

none

Provider returned error

Kategori:

Trik anti-AI	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Mercury 2.5	6.9	7.9	66.7%	1		799ms	772	209	2,969
Inkling	4.8	10.0	25.0%	0		1.43s	678	261	0

Pemrograman	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Mercury 2.5	5.5	10.0	33.3%	0		972ms	7,909	521	2,269
Inkling	4.5	10.0	0.0%	0		1.01s	7,356	436	0

Gabungan	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Mercury 2.5	3.0	10.0	0.0%	0		5.16s	107,683	3,750	11,351
Inkling	2.9	5.8	16.7%	1		25.74s	80,195	8,777	0

Parsing dan ekstraksi data	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Mercury 2.5	6.5	10.0	50.0%	0		1.06s	8,322	739	1,499
Inkling	10.0	10.0	100.0%	0		1.14s	7,056	279	0

Spesifik domain	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Mercury 2.5	3.6	7.2	22.2%	1		846ms	851	57	2,265
Inkling	5.3	10.0	33.3%	0		1.18s	786	45	0

Kecerdasan umum	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Mercury 2.5	4.4	9.9	0.0%	0		819ms	525	99	748
Inkling	5.0	10.0	0.0%	0		859ms	495	156	0

Kepatuhan instruksi	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Mercury 2.5	2.9	6.0	16.7%	1		972ms	518	48	1,026
Inkling	6.3	10.0	50.0%	0		1.72s	696	72	0

Pemecahan teka-teki	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Mercury 2.5	5.9	4.5	66.7%	2		792ms	768	249	2,214
Inkling	5.6	9.9	33.3%	0		931ms	696	291	0

Pemanggilan alat	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Mercury 2.5	9.8	10.0	100.0%	0		2.72s	10,440	388	2,537
Inkling	3.0	10.0	0.0%	0		2.50s	5,949	213	0

Pengetahuan umum	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Mercury 2.5	3.0	10.0	0.0%	0		782ms	232	23	758
Inkling	3.0	10.0	0.0%	0		670ms	213	24	0

Ganti Pasangan Perbandingan