AI BENCHY Compare

Cobuddy vs Mistral: Mistral Small 4

Benchmark dihasilkan dari suite pengujian AI BENCHY pada: 2026-05-29

Metrik	Cobuddy Cobuddy medium Rilis: 2026-05-06	Mistral Small 4 Mistral Small 4 none Rilis: 2026-03-16

Metrik	Cobuddy Cobuddy medium Rilis: 2026-05-06	Mistral Small 4 Mistral Small 4 none Rilis: 2026-03-16
Skor	5.8	5.0
Peringkat	#114	#140
Keandalan	10.0	10.0
Konsistensi	7.4	9.5
Tes benar
Tingkat lulus per percobaan	50.0%	28.3%
Tes tidak stabil	6	1
Total Run	60	60
Biaya per hasil	0.000	0.131
Total Biaya	$0.000	$0.007
Harga input	$0.000 / 1M	$0.150 / 1M
Harga output	$0.000 / 1M	$0.600 / 1M
Token output	1,677	2,192
Token penalaran	116,703	0
Waktu respons (rata-rata)	39.90s	629ms
Waktu respons (maks)	309.02s	1.72s
Waktu respons (total)	797.98s	12.59s

Model teratas berdasarkan skor

Skor vs Total Biaya

Waktu respons (rata-rata)

Skor vs Waktu respons (rata-rata)

Total token output

Skor vs Total token output

Rincian Kategori

Trik anti-AI	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token output	Token penalaran
Cobuddy	8.7	7.9	91.7%	1		10.00s	98	4,666
Mistral Small 4	3.4	7.9	16.7%	1		395ms	182	0

Pemrograman	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token output	Token penalaran
Cobuddy	4.1	5.1	33.3%	1		79.17s	358	30,138
Mistral Small 4	4.0	9.5	0.0%	0		1.03s	610	0

Gabungan	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token output	Token penalaran
Cobuddy	3.0	10.0	0.0%	0		47.38s	465	7,265
Mistral Small 4	3.0	10.0	0.0%	0		1.72s	496	0

Parsing dan ekstraksi data	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token output	Token penalaran
Cobuddy	6.3	5.8	66.7%	1		17.36s	275	5,591
Mistral Small 4	10.0	10.0	100.0%	0		822ms	261	0

Spesifik domain	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token output	Token penalaran
Cobuddy	2.9	4.4	22.2%	2		128.15s	10	49,454
Mistral Small 4	5.3	10.0	33.3%	0		367ms	28	0

Kecerdasan umum	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token output	Token penalaran
Cobuddy	4.2	9.9	0.0%	0		23.23s	76	3,782
Mistral Small 4	4.0	10.0	0.0%	0		729ms	205	0

Kepatuhan instruksi	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token output	Token penalaran
Cobuddy	9.8	10.0	100.0%	0		11.60s	64	2,842
Mistral Small 4	6.5	10.0	50.0%	0		380ms	69	0

Pemecahan teka-teki	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token output	Token penalaran
Cobuddy	3.6	7.2	22.2%	1		12.83s	189	5,808
Mistral Small 4	3.1	9.9	0.0%	0		399ms	111	0

Pemanggilan alat	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token output	Token penalaran
Cobuddy	10.0	10.0	100.0%	0		11.19s	133	294
Mistral Small 4	10.0	10.0	100.0%	0		1.40s	213	0

Pengetahuan umum	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token output	Token penalaran
Cobuddy	3.0	10.0	0.0%	0		36.98s	9	6,863
Mistral Small 4	3.0	10.0	0.0%	0		397ms	17	0

Perbandingan Cepat

Ganti Pasangan Perbandingan

CobuddymediumvsQwen3.6 27Bnone CobuddymediumvsQwen3.5-27Bnone CobuddymediumvsMiMo-V2-Pronone CobuddymediumvsQwen3.5-35B-A3Bnone CobuddymediumvsQwen3.5 Plus 2026-04-20none CobuddymediumvsGLM 5.1none CobuddymediumvsOwl Alphanone CobuddymediumvsGLM 4.7 Flashnone CobuddymediumvsSeed-2.0-Litenone CobuddymediumvsKimi K2.6noneTersedia gratis CobuddymediumvsGLM 5V Turbonone CobuddymediumvsGPT-5.4none