Mistral: Mistral Small 4 vs Thinking Machines: Inkling

Inkling unggul dalam skor rata-rata dengan 5.2 vs 5.1. Mistral Small 4 (medium) memiliki biaya benchmark lebih rendah di $0.096 vs $0.147. Inkling lebih cepat di 3.50s vs 10.77s, dengan tingkat keberhasilan 42.4% vs 28.8%.

Model yang direkomendasikanInklingIt has the best score here (5.2), while responding about 3.1x faster than Mistral Small 4 (medium).

Benchmark dihasilkan dari suite pengujian AI BENCHY pada: 2026-07-18

Metrik	Mistral Small 4 Mistral Small 4 medium Rilis: 2026-03-16	Inkling Inkling none Rilis: 2026-07-18

Metrik	Mistral Small 4 Mistral Small 4 medium Rilis: 2026-03-16	Inkling Inkling none Rilis: 2026-07-18
Skor	5.1	5.2
Peringkat	#163	#160
Keandalan	10.0	9.9
Konsistensi	7.0	9.6
Tes benar
Tingkat lulus per percobaan	42.4%	28.8%
Tes tidak stabil	8	1
Total Run	66	66
Biaya per hasil	1.913	2.448
Total Biaya	$0.096	$0.147
Harga input	$0.150 / 1M	$1.000 / 1M
Harga output	$0.600 / 1M	$4.050 / 1M
Total token input	140,494	104,111
Token output	39,462	10,551
Token penalaran	92,362	0
Waktu respons (rata-rata)	10.77s	3.50s
Waktu respons (maks)	59.15s	48.02s
Waktu respons (total)	236.94s	77.09s

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#163 Mistral Small 4

medium

Biaya: $0.006
Waktu: 47.9s
Token: 9,857 tok

#160 Thinking Machines: Inkling

none

Provider returned error

Biaya: $0.000
Waktu: 5.3s
Token: 0 tok

Model teratas berdasarkan skor

Skor vs Total Biaya

Waktu respons (rata-rata)

Skor vs Waktu respons (rata-rata)

Total token output

Skor vs Total token output

Rincian Kategori

Kategori:

Trik anti-AI	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Mistral Small 4	5.6	3.8	66.7%	3		2.67s	708	4,055	4,778
Inkling	4.8	10.0	25.0%	0		1.43s	678	261	0

Pemrograman	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Mistral Small 4	4.4	5.1	33.3%	2		39.98s	7,636	11,635	54,715
Inkling	4.5	10.0	0.0%	0		1.01s	7,356	436	0

Gabungan	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Mistral Small 4	3.0	10.0	0.0%	0		32.40s	116,624	17,890	18,384
Inkling	2.9	5.8	16.7%	1		25.74s	80,195	8,777	0

Parsing dan ekstraksi data	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Mistral Small 4	7.3	5.9	83.3%	1		1.23s	6,171	335	723
Inkling	10.0	10.0	100.0%	0		1.14s	7,056	279	0

Spesifik domain	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Mistral Small 4	5.3	7.2	44.4%	1		6.11s	742	2,621	6,904
Inkling	5.3	10.0	33.3%	0		1.45s	777	42	0

Kecerdasan umum	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Mistral Small 4	4.8	10.0	0.0%	0		2.05s	519	821	828
Inkling	5.0	10.0	0.0%	0		859ms	495	156	0

Kepatuhan instruksi	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Mistral Small 4	7.3	5.8	83.3%	1		1.38s	729	540	1,031
Inkling	6.3	10.0	50.0%	0		1.72s	696	72	0

Pemecahan teka-teki	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Mistral Small 4	3.4	9.7	0.0%	0		2.17s	735	1,226	2,632
Inkling	5.6	9.9	33.3%	0		931ms	696	291	0

Pemanggilan alat	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Mistral Small 4	10.0	10.0	100.0%	0		3.50s	6,420	321	810
Inkling	3.0	10.0	0.0%	0		2.50s	5,949	213	0

Pengetahuan umum	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Mistral Small 4	3.0	10.0	0.0%	0		5.92s	210	18	1,557
Inkling	3.0	10.0	0.0%	0		670ms	213	24	0

Perbandingan Cepat

Ganti Pasangan Perbandingan