Granite 4.1 8B vs Mercury 2

Model yang direkomendasikan Mercury 2

It has the best score here (4.6), while responding about 1.8x faster than Granite 4.1 8B.

Perbandingan terperinci

Metrik	Granite 4.1 8B Granite 4.1 8B none Rilis: 2026-05-01	Mercury 2 Mercury 2 none Rilis: 2026-02-24

Metrik	Granite 4.1 8B Granite 4.1 8B none Rilis: 2026-05-01	Mercury 2 Mercury 2 none Rilis: 2026-02-24
Skor	4.0	4.6
Peringkat	#224	#211
Keandalan	10.0	10.0
Konsistensi	10.0	9.2
Tes benar
Tingkat lulus per percobaan	9.1%	22.7%
Tes tidak stabil	0	2
Total Run	66	66
Biaya per hasil	0.315	0.734
Total Biaya	$0.007	$0.030
Harga input	$0.050 / 1M	$0.250 / 1M
Harga output	$0.100 / 1M	$0.750 / 1M
Total token input	113,827	88,704
Token output	5,996	9,564
Token penalaran	0	0
Waktu respons (rata-rata)	1.45s	829ms
Waktu respons (maks)	16.67s	4.52s
Waktu respons (total)	31.96s	18.24s

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

none

none

Kategori:

Trik anti-AI	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Granite 4.1 8B	4.9	10.0	25.0%	0		844ms	645	903	0
Mercury 2	3.0	10.0	0.0%	0		483ms	631	286	0

Pemrograman	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Granite 4.1 8B	4.5	10.0	0.0%	0		775ms	8,344	525	0
Mercury 2	3.4	9.6	0.0%	0		1.03s	7,229	3,088	0

Gabungan	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Granite 4.1 8B	3.0	10.0	0.0%	0		9.28s	86,631	3,481	0
Mercury 2	3.0	10.0	0.0%	0		2.56s	65,412	5,256	0

Parsing dan ekstraksi data	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Granite 4.1 8B	3.0	10.0	0.0%	0		575ms	7,617	195	0
Mercury 2	7.3	5.9	83.3%	1		667ms	6,362	180	0

Spesifik domain	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Granite 4.1 8B	3.0	10.0	0.0%	0		357ms	768	24	0
Mercury 2	5.3	7.2	44.4%	1		534ms	784	46	0

Kecerdasan umum	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Granite 4.1 8B	4.0	10.0	0.0%	0		499ms	528	115	0
Mercury 2	4.8	10.0	0.0%	0		628ms	495	159	0

Kepatuhan instruksi	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Granite 4.1 8B	3.6	9.9	0.0%	0		344ms	687	66	0
Mercury 2	6.5	10.0	50.0%	0		551ms	691	82	0

Pemecahan teka-teki	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Granite 4.1 8B	3.2	10.0	0.0%	0		608ms	672	432	0
Mercury 2	3.1	10.0	0.0%	0		535ms	694	251	0

Pemanggilan alat	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Granite 4.1 8B	10.0	10.0	100.0%	0		2.17s	7,719	243	0
Mercury 2	10.0	10.0	100.0%	0		1.27s	6,193	197	0

Pengetahuan umum	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Granite 4.1 8B	3.0	10.0	0.0%	0		306ms	216	12	0
Mercury 2	3.0	10.0	0.0%	0		548ms	213	19	0

Ganti Pasangan Perbandingan