Granite 4.2 8B vs Mercury 2.5

Model yang Dibandingkan

Model yang direkomendasikan Mercury 2.5

Its score stays close to the best score here (3.9 vs 4.3), while costing about 1.6x less than Granite 4.2 8B.

Metrik	Granite 4.2 8B Granite 4.2 8B none Rilis: 2026-09-02	Mercury 2.5 Mercury 2.5 none Rilis: 2026-09-08

Metrik	Granite 4.2 8B Granite 4.2 8B none Rilis: 2026-09-02	Mercury 2.5 Mercury 2.5 none Rilis: 2026-09-08
Skor	4.3	3.9
Peringkat	#302	#312
Keandalan	8.6	10.0
Konsistensi	9.3	7.5
Percobaan	66/66	66/66
Tes benar
Tingkat lulus per percobaan	16.7%	25.8%
Tes tidak stabil	2	7
Total Run	66	66
Biaya per hasil	0.847	0.782
Total Biaya	$0.026	$0.016
Harga input	$0.100 / 1M	$0.040 / 1M
Harga output	$0.150 / 1M	$0.150 / 1M
Total token input	57,786	123,740
Token output	130,805	71,143
Token penalaran	0	0
Waktu respons (rata-rata)	86.27s	2.45s
Waktu respons (maks)	747.17s	36.48s
Waktu respons (total)	1897.96s	53.83s
Parameter	8B	~100B
Ketersediaan	Sumber terbuka	Tertutup

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

none

Provider returned error

none

Kategori:

Trik anti-AI	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Granite 4.2 8B	4.9	8.1	33.3%	1		17.77s	669	6,026	0
Mercury 2.5	3.8	8.3	16.7%	1		469ms	808	310	0

Pemrograman	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Granite 4.2 8B	5.5	10.0	33.3%	0		105.60s	8,358	47,944	0
Mercury 2.5	3.7	7.0	22.2%	1		12.50s	7,888	61,297	0

Gabungan	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Granite 4.2 8B	3.0	10.0	0.0%	0		424.28s	30,500	29,755	0
Mercury 2.5	3.0	10.0	0.0%	0		3.24s	94,347	7,982	0

Parsing dan ekstraksi data	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Granite 4.2 8B	2.9	5.8	16.7%	1		1.05s	7,629	237	0
Mercury 2.5	2.8	1.7	33.3%	2		885ms	8,352	754	0

Spesifik domain	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Granite 4.2 8B	3.0	10.0	0.0%	0		53.62s	696	38,145	0
Mercury 2.5	5.3	7.2	44.4%	1		533ms	872	49	0

Kecerdasan umum	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Granite 4.2 8B	5.0	10.0	0.0%	0		770ms	534	153	0
Mercury 2.5	4.3	9.9	0.0%	0		438ms	540	138	0

Kepatuhan instruksi	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Granite 4.2 8B	3.0	10.0	0.0%	0		79.50s	375	1,275	0
Mercury 2.5	4.9	6.9	33.3%	1		493ms	758	69	0

Pemecahan teka-teki	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Granite 4.2 8B	3.0	10.0	0.0%	0		107.60s	472	6,964	0
Mercury 2.5	3.7	7.2	22.2%	1		515ms	788	250	0

Pemanggilan alat	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Granite 4.2 8B	10.0	10.0	100.0%	0		1.39s	8,331	291	0
Mercury 2.5	10.0	10.0	100.0%	0		1.23s	9,150	275	0

Pengetahuan umum	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Granite 4.2 8B	3.0	10.0	0.0%	0		14.60s	222	15	0
Mercury 2.5	3.0	10.0	0.0%	0		384ms	237	19	0

Ganti Pasangan Perbandingan