Granite 4.1 8B vs Mercury 2.5

Model yang Dibandingkan

Model yang direkomendasikan Granite 4.1 8B

It has the best score here (4.0), while costing about 2.5x less than Mercury 2.5.

Metrik	Granite 4.1 8B Granite 4.1 8B none Rilis: 2026-05-01	Mercury 2.5 Mercury 2.5 none Rilis: 2026-09-08

Metrik	Granite 4.1 8B Granite 4.1 8B none Rilis: 2026-05-01	Mercury 2.5 Mercury 2.5 none Rilis: 2026-09-08
Skor	4.0	3.9
Peringkat	#309	#312
Keandalan	10.0	10.0
Konsistensi	10.0	7.5
Percobaan	66/66	66/66
Tes benar
Tingkat lulus per percobaan	9.1%	25.8%
Tes tidak stabil	0	7
Total Run	66	66
Biaya per hasil	0.315	0.782
Total Biaya	$0.007	$0.016
Harga input	$0.050 / 1M	$0.040 / 1M
Harga output	$0.100 / 1M	$0.150 / 1M
Total token input	113,836	123,740
Token output	5,996	71,143
Token penalaran	0	0
Waktu respons (rata-rata)	1.44s	2.45s
Waktu respons (maks)	16.67s	36.48s
Waktu respons (total)	31.75s	53.83s
Parameter	8B	~100B
Ketersediaan	Sumber terbuka	Tertutup

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

none

none

Kategori:

Trik anti-AI	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Granite 4.1 8B	4.9	10.0	25.0%	0		844ms	645	903	0
Mercury 2.5	3.8	8.3	16.7%	1		469ms	808	310	0

Pemrograman	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Granite 4.1 8B	4.5	10.0	0.0%	0		775ms	8,344	525	0
Mercury 2.5	3.7	7.0	22.2%	1		12.50s	7,888	61,297	0

Gabungan	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Granite 4.1 8B	3.0	10.0	0.0%	0		9.28s	86,631	3,481	0
Mercury 2.5	3.0	10.0	0.0%	0		3.24s	94,347	7,982	0

Parsing dan ekstraksi data	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Granite 4.1 8B	3.0	10.0	0.0%	0		575ms	7,617	195	0
Mercury 2.5	2.8	1.7	33.3%	2		885ms	8,352	754	0

Spesifik domain	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Granite 4.1 8B	3.0	10.0	0.0%	0		287ms	777	24	0
Mercury 2.5	5.3	7.2	44.4%	1		533ms	872	49	0

Kecerdasan umum	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Granite 4.1 8B	4.0	10.0	0.0%	0		499ms	528	115	0
Mercury 2.5	4.3	9.9	0.0%	0		438ms	540	138	0

Kepatuhan instruksi	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Granite 4.1 8B	3.6	9.9	0.0%	0		344ms	687	66	0
Mercury 2.5	4.9	6.9	33.3%	1		493ms	758	69	0

Pemecahan teka-teki	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Granite 4.1 8B	3.2	10.0	0.0%	0		608ms	672	432	0
Mercury 2.5	3.7	7.2	22.2%	1		515ms	788	250	0

Pemanggilan alat	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Granite 4.1 8B	10.0	10.0	100.0%	0		2.17s	7,719	243	0
Mercury 2.5	10.0	10.0	100.0%	0		1.23s	9,150	275	0

Pengetahuan umum	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Granite 4.1 8B	3.0	10.0	0.0%	0		306ms	216	12	0
Mercury 2.5	3.0	10.0	0.0%	0		384ms	237	19	0

Ganti Pasangan Perbandingan