AI BENCHY Compare

Mistral: Mistral Small 4 vs Qwen: Qwen3.5-35B-A3B

Benchmark dihasilkan dari suite pengujian AI BENCHY pada: 2026-03-17

Metrik	Mistral Small 4 Mistral Small 4 medium Rilis: 2026-03-16	Qwen3.5-35B-A3B Qwen3.5-35B-A3B none Rilis: 2026-02-24

Metrik	Mistral Small 4 Mistral Small 4 medium Rilis: 2026-03-16	Qwen3.5-35B-A3B Qwen3.5-35B-A3B none Rilis: 2026-02-24
Peringkat	#55	#49
Skor	5.6	5.9
Konsistensi	7.0	8.6
Biaya per hasil	0.502	0.237
Total Biaya	$0.026	$0.015
Tes benar
Tingkat lulus per percobaan	49.0%	47.1%
Tes tidak stabil	6	3
Total Run	51	51
Token output	12,288	3,761
Token penalaran	28,112	0
Waktu respons (rata-rata)	4.18s	3.89s
Waktu respons (maks)	25.25s	47.43s
Waktu respons (total)	71.03s	66.07s

Model teratas berdasarkan skor

Skor vs Total Biaya

Waktu respons (rata-rata)

Skor vs Waktu respons (rata-rata)

Total token output

Skor vs Total token output

Rincian Kategori

Trik anti-AI	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token output	Token penalaran
Mistral Small 4	5.6	3.8	66.7%	3		2.67s	4,055	4,778
Qwen3.5-35B-A3B	3.4	7.9	16.7%	1		1.43s	574	0

Gabungan	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token output	Token penalaran
Mistral Small 4	3.0	10.0	0.0%	0		25.25s	2,612	10,700
Qwen3.5-35B-A3B	3.0	10.0	0.0%	0		47.43s	1,833	0

Parsing dan ekstraksi data	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token output	Token penalaran
Mistral Small 4	7.3	5.9	83.3%	1		1.23s	335	723
Qwen3.5-35B-A3B	10.0	10.0	100.0%	0		1.16s	243	0

Spesifik domain	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token output	Token penalaran
Mistral Small 4	5.3	7.2	44.4%	1		6.11s	2,621	6,904
Qwen3.5-35B-A3B	7.7	10.0	66.7%	0		485ms	15	0

Kecerdasan umum	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token output	Token penalaran
Mistral Small 4	4.8	10.0	0.0%	0		2.05s	821	828
Qwen3.5-35B-A3B	6.5	3.4	66.7%	1		1.19s	114	0

Kepatuhan instruksi	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token output	Token penalaran
Mistral Small 4	7.3	5.8	83.3%	1		1.38s	540	1,031
Qwen3.5-35B-A3B	6.3	10.0	50.0%	0		809ms	63	0

Puzzle Solving	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token output	Token penalaran
Mistral Small 4	3.4	9.7	0.0%	0		2.00s	983	2,338
Qwen3.5-35B-A3B	3.9	7.4	22.2%	1		1.34s	655	0

Pemanggilan alat	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token output	Token penalaran
Mistral Small 4	10.0	10.0	100.0%	0		3.50s	321	810
Qwen3.5-35B-A3B	10.0	10.0	100.0%	0		2.30s	264	0

Perbandingan Cepat

Ganti Pasangan Perbandingan

MiniMax M2.5mediumTersedia gratisvsQwen3.5-35B-A3Bnone Mistral Small 4mediumvsGLM 5 Turbonone Mistral Small 4mediumvsGLM 4.7 Flashnone Mistral Small 4mediumvsQwen3.5-27Bnone Mistral Small 4mediumvsGPT-5.4none gpt-oss-120bmediumTersedia gratisvsQwen3.5-35B-A3Bnone Mistral Small 4mediumvsQwen3.5-122B-A10Bnone Mistral Small 4mediumvsGrok 4.20 Betanone Mistral Small 4mediumvsKimi K2.5none Mistral Small 4mediumvsHunter Alphanone Trinity Large PreviewnoneTersedia gratisvsMistral Small 4medium Gemini 2.5 FlashnonevsMistral Small 4medium