AI BENCHY Compare

IBM: Granite 4.1 8B vs Z.ai: GLM 5 Turbo

Ringkasan

Perbandingan benchmark Granite 4.1 8B vs GLM 5 Turbo: GLM 5 Turbo unggul dalam skor rata-rata dengan 5.3 vs 4.0. Granite 4.1 8B memiliki biaya benchmark lebih rendah di $0.003 vs $0.047. Granite 4.1 8B lebih cepat di 728ms vs 2.82s, dengan tingkat keberhasilan 9.5% vs 31.8%.

Model yang direkomendasikan: Granite 4.1 8B - It offers the best overall trade-off: a competitive score (4.0), lower cost than GLM 5 Turbo, and balanced response time.

Benchmark dihasilkan dari suite pengujian AI BENCHY pada: 2026-06-12

Metrik	Granite 4.1 8B Granite 4.1 8B none Rilis: 2026-05-01	GLM 5 Turbo GLM 5 Turbo none Rilis: 2026-03-15

Metrik	Granite 4.1 8B Granite 4.1 8B none Rilis: 2026-05-01	GLM 5 Turbo GLM 5 Turbo none Rilis: 2026-03-15
Skor	4.0	5.3
Peringkat	#163	#128
Keandalan	10.0	10.0
Konsistensi	10.0	9.3
Tes benar
Tingkat lulus per percobaan	9.5%	31.8%
Tes tidak stabil	0	2
Total Run	63	63
Biaya per hasil	0.131	0.655
Total Biaya	$0.003	$0.047
Harga input	$0.050 / 1M	$1.200 / 1M
Harga output	$0.100 / 1M	$4.000 / 1M
Total token input	46,285	32,525
Token output	2,911	1,815
Token penalaran	0	0
Waktu respons (rata-rata)	728ms	2.82s
Waktu respons (maks)	2.17s	8.21s
Waktu respons (total)	15.29s	59.29s

Generation showcase

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#163 IBM: Granite 4.1 8B

none

Cost: $0.001
Time: 3.2s
Tokens: 491 tok

#128 GLM 5 Turbo

none

Cost: $0.047
Time: 129.2s
Tokens: 11,775 tok

Model teratas berdasarkan skor

Skor vs Total Biaya

Waktu respons (rata-rata)

Skor vs Waktu respons (rata-rata)

Total token output

Skor vs Total token output

Rincian Kategori

Trik anti-AI	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Granite 4.1 8B	4.9	10.0	25.0%	0		844ms	645	903	0
GLM 5 Turbo	3.0	10.0	0.0%	0		2.84s	555	382	0

Pemrograman	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Granite 4.1 8B	4.5	10.0	0.0%	0		775ms	8,344	525	0
GLM 5 Turbo	3.9	7.8	11.1%	1		2.41s	7,256	529	0

Gabungan	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Granite 4.1 8B	3.0	10.0	0.0%	0		1.88s	19,089	396	0
GLM 5 Turbo	3.0	10.0	0.0%	0		4.89s	8,133	144	0

Parsing dan ekstraksi data	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Granite 4.1 8B	3.0	10.0	0.0%	0		575ms	7,617	195	0
GLM 5 Turbo	10.0	10.0	100.0%	0		2.47s	7,107	204	0

Spesifik domain	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Granite 4.1 8B	3.0	10.0	0.0%	0		357ms	768	24	0
GLM 5 Turbo	5.3	10.0	33.3%	0		1.97s	687	25	0

Kecerdasan umum	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Granite 4.1 8B	4.0	10.0	0.0%	0		499ms	528	115	0
GLM 5 Turbo	4.2	9.9	0.0%	0		2.18s	477	48	0

Kepatuhan instruksi	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Granite 4.1 8B	3.6	9.9	0.0%	0		344ms	687	66	0
GLM 5 Turbo	6.5	10.0	50.0%	0		2.13s	636	65	0

Pemecahan teka-teki	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Granite 4.1 8B	3.2	10.0	0.0%	0		608ms	672	432	0
GLM 5 Turbo	5.5	7.4	44.4%	1		2.65s	609	180	0

Pemanggilan alat	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Granite 4.1 8B	10.0	10.0	100.0%	0		2.17s	7,719	243	0
GLM 5 Turbo	10.0	10.0	100.0%	0		8.21s	6,879	222	0

Pengetahuan umum	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Granite 4.1 8B	3.0	10.0	0.0%	0		306ms	216	12	0
GLM 5 Turbo	3.0	10.0	0.0%	0		2.37s	186	16	0

Perbandingan Cepat

Ganti Pasangan Perbandingan

MiniMax M2.7mediumvsGLM 5 Turbonone Granite 4.1 8BnonevsQwen3.5-9Bmedium Mistral Small 4mediumvsGLM 5 Turbonone Granite 4.1 8BnonevsGLM 4.7 Flashmedium CobuddymediumvsGLM 5 Turbonone MiniMax M2.5mediumvsGLM 5 Turbonone Qwen3 Coder NextmediumvsGLM 5 Turbonone Granite 4.1 8BnonevsQwen3 Coder Nextmedium Granite 4.1 8BnonevsMiniMax M2.5medium Gemini 3.1 Flash LiteminimalvsGLM 5 Turbonone CobuddymediumvsGranite 4.1 8Bnone DeepSeek V4 ProhighvsGLM 5 Turbonone