Mistral: Mistral Small 4 vs Thinking Machines: Inkling

Inkling лидирует по среднему баллу: 5.2 vs 5.1. Mistral Small 4 (medium) имеет более низкую стоимость benchmark: $0.096 vs $0.147. Inkling быстрее: 3.50s vs 10.77s, с долей успешных попыток 42.4% vs 28.8%.

Рекомендуемая модельInklingЗдесь у него лучший балл (5.2), и он отвечает примерно в 3.1 раза быстрее, чем Mistral Small 4 (medium).

Бенчмарки сгенерированы из тестовых наборов AI BENCHY в: 2026-07-18

Метрика	Mistral Small 4 Mistral Small 4 medium Релиз: 2026-03-16	Inkling Inkling none Релиз: 2026-07-18

Метрика	Mistral Small 4 Mistral Small 4 medium Релиз: 2026-03-16	Inkling Inkling none Релиз: 2026-07-18
Оценка	5.1	5.2
Ранг	#163	#160
Надежность	10.0	9.9
Стабильность	7.0	9.6
Тестов верно
Доля успешных попыток	42.4%	28.8%
Нестабильные тесты	8	1
Всего запусков	66	66
Стоимость за результат	1.913	2.448
Общая стоимость	$0.096	$0.147
Цена входа	$0.150 / 1M	$1.000 / 1M
Цена выхода	$0.600 / 1M	$4.050 / 1M
Общее число входных токенов	140,494	104,111
Выходные токены	39,462	10,551
Токены рассуждений	92,362	0
Время ответа (среднее)	10.77s	3.50s
Время ответа (макс.)	59.15s	48.02s
Время ответа (суммарно)	236.94s	77.09s

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#163 Mistral Small 4

medium

Стоимость: $0.006
Время: 47.9s
Токены: 9,857 tok

#160 Thinking Machines: Inkling

none

Provider returned error

Стоимость: $0.000
Время: 5.3s
Токены: 0 tok

Лучшие модели по оценке

Оценка vs общая стоимость

Время ответа (среднее)

Оценка vs Время ответа (среднее)

Общее число выходных токенов

Оценка vs Общее число выходных токенов

Разбивка по категориям

Категория:

Анти-ИИ уловки	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Mistral Small 4	5.6	3.8	66.7%	3		2.67s	708	4,055	4,778
Inkling	4.8	10.0	25.0%	0		1.43s	678	261	0

Программирование	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Mistral Small 4	4.4	5.1	33.3%	2		39.98s	7,636	11,635	54,715
Inkling	4.5	10.0	0.0%	0		1.01s	7,356	436	0

Комбинированный	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Mistral Small 4	3.0	10.0	0.0%	0		32.40s	116,624	17,890	18,384
Inkling	2.9	5.8	16.7%	1		25.74s	80,195	8,777	0

Парсинг и извлечение данных	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Mistral Small 4	7.3	5.9	83.3%	1		1.23s	6,171	335	723
Inkling	10.0	10.0	100.0%	0		1.14s	7,056	279	0

Предметно-ориентированное	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Mistral Small 4	5.3	7.2	44.4%	1		6.11s	742	2,621	6,904
Inkling	5.3	10.0	33.3%	0		1.45s	777	42	0

Общий интеллект	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Mistral Small 4	4.8	10.0	0.0%	0		2.05s	519	821	828
Inkling	5.0	10.0	0.0%	0		859ms	495	156	0

Следование инструкциям	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Mistral Small 4	7.3	5.8	83.3%	1		1.38s	729	540	1,031
Inkling	6.3	10.0	50.0%	0		1.72s	696	72	0

Решение головоломок	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Mistral Small 4	3.4	9.7	0.0%	0		2.17s	735	1,226	2,632
Inkling	5.6	9.9	33.3%	0		931ms	696	291	0

Вызов инструментов	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Mistral Small 4	10.0	10.0	100.0%	0		3.50s	6,420	321	810
Inkling	3.0	10.0	0.0%	0		2.50s	5,949	213	0

Эрудиция	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
Mistral Small 4	3.0	10.0	0.0%	0		5.92s	210	18	1,557
Inkling	3.0	10.0	0.0%	0		670ms	213	24	0

Быстрое сравнение

Сменить пару сравнения