Granite 4.2 8B (high) vs Mercury 2.5

Model yang Dibandingkan

Model yang direkomendasikan Mercury 2.5

Its score stays close to the best score here (3.9 vs 4.6), while costing about 5.3x less than Granite 4.2 8B (high).

Metrik	Granite 4.2 8B Granite 4.2 8B high Rilis: 2026-09-02	Mercury 2.5 Mercury 2.5 none Rilis: 2026-09-08

Metrik	Granite 4.2 8B Granite 4.2 8B high Rilis: 2026-09-02	Mercury 2.5 Mercury 2.5 none Rilis: 2026-09-08
Skor	4.6	3.9
Peringkat	#293	#312
Keandalan	7.6	10.0
Konsistensi	6.3	7.5
Percobaan	66/66	66/66
Tes benar
Tingkat lulus per percobaan	39.4%	25.8%
Tes tidak stabil	10	7
Total Run	66	66
Biaya per hasil	2.085	0.782
Total Biaya	$0.084	$0.016
Harga input	$0.100 / 1M	$0.040 / 1M
Harga output	$0.150 / 1M	$0.150 / 1M
Total token input	43,278	123,740
Token output	181,083	71,143
Token penalaran	431,132	0
Waktu respons (rata-rata)	235.89s	2.45s
Waktu respons (maks)	685.87s	36.48s
Waktu respons (total)	5189.64s	53.83s
Parameter	8B	~100B
Ketersediaan	Sumber terbuka	Tertutup

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

high

Provider returned error

none

Kategori:

Trik anti-AI	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Granite 4.2 8B	6.9	5.8	75.0%	2		205.31s	507	8,350	12,250
Mercury 2.5	3.8	8.3	16.7%	1		469ms	808	310	0

Pemrograman	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Granite 4.2 8B	3.8	4.3	33.3%	2		515.34s	7,047	42,438	154,749
Mercury 2.5	3.7	7.0	22.2%	1		12.50s	7,888	61,297	0

Gabungan	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Granite 4.2 8B	5.0	6.8	33.3%	1		570.43s	18,410	16,478	60,329
Mercury 2.5	3.0	10.0	0.0%	0		3.24s	94,347	7,982	0

Parsing dan ekstraksi data	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Granite 4.2 8B	3.8	5.8	33.3%	1		56.55s	6,779	1,368	3,999
Mercury 2.5	2.8	1.7	33.3%	2		885ms	8,352	754	0

Spesifik domain	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Granite 4.2 8B	2.9	7.2	11.1%	1		167.15s	498	81,004	122,013
Mercury 2.5	5.3	7.2	44.4%	1		533ms	872	49	0

Kecerdasan umum	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Granite 4.2 8B	5.5	10.0	0.0%	0		16.37s	534	5,762	5,800
Mercury 2.5	4.3	9.9	0.0%	0		438ms	540	138	0

Kepatuhan instruksi	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Granite 4.2 8B	6.4	5.8	66.7%	1		87.47s	483	2,191	13,223
Mercury 2.5	4.9	6.9	33.3%	1		493ms	758	69	0

Pemecahan teka-teki	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Granite 4.2 8B	2.9	4.4	22.2%	2		202.69s	467	14,348	19,827
Mercury 2.5	3.7	7.2	22.2%	1		515ms	788	250	0

Pemanggilan alat	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Granite 4.2 8B	10.0	10.0	100.0%	0		15.08s	8,331	893	4,841
Mercury 2.5	10.0	10.0	100.0%	0		1.23s	9,150	275	0

Pengetahuan umum	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Granite 4.2 8B	3.0	10.0	0.0%	0		252.49s	222	8,251	34,101
Mercury 2.5	3.0	10.0	0.0%	0		384ms	237	19	0

Ganti Pasangan Perbandingan