AI BENCHY Compare

North Mini Code vs Mistral: Mistral Small 4

Сводка

Сравнение benchmark North Mini Code vs Mistral Small 4: North Mini Code лидирует по среднему баллу: 5.8 vs 5.1. North Mini Code имеет более низкую стоимость benchmark: $0.000 vs $0.007. Mistral Small 4 быстрее: 630ms vs 106.18s, с долей успешных попыток 50.8% vs 27.0%.

Рекомендуемая модель: Mistral Small 4 - Его балл близок к лучшему здесь (5.1 против 5.8), и он отвечает примерно в 168.6 раза быстрее, чем North Mini Code.

Бенчмарки сгенерированы из тестовых наборов AI BENCHY в: 2026-07-02

Метрика	North Mini Code North Mini Code medium Релиз: 2026-06-18 Бесплатно доступно	Mistral Small 4 Mistral Small 4 none Релиз: 2026-03-16

Метрика	North Mini Code North Mini Code medium Релиз: 2026-06-18 Бесплатно доступно	Mistral Small 4 Mistral Small 4 none Релиз: 2026-03-16
Оценка	5.8	5.1
Ранг	#110	#134
Надежность	8.5	10.0
Стабильность	8.5	9.5
Тестов верно
Доля успешных попыток	50.8%	27.0%
Нестабильные тесты	4	1
Всего запусков	55	63
Стоимость за результат	0.000	0.139
Общая стоимость	$0.000	$0.007
Цена входа	$0.000 / 1M	$0.150 / 1M
Цена выхода	$0.000 / 1M	$0.600 / 1M
Общее число входных токенов	32,891	37,309
Выходные токены	424,772	2,201
Токены рассуждений	1,021,489	0
Время ответа (среднее)	106.18s	630ms
Время ответа (макс.)	357.05s	1.72s
Время ответа (суммарно)	2229.70s	13.22s

Генерация showcase

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#110 North Mini Code

medium

Стоимость: $0.000
Время: 51.8s
Токены: 12,460 tok

#134 Mistral Small 4

none

Стоимость: $0.002
Время: 10.4s
Токены: 2,370 tok

Лучшие модели по оценке

Оценка vs общая стоимость

Время ответа (среднее)

Оценка vs Время ответа (среднее)

Общее число выходных токенов

Оценка vs Общее число выходных токенов

Разбивка по категориям

Анти-ИИ уловки	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
North Mini Code	8.4	10.0	75.0%	0		64.79s	324	64,441	68,535
Mistral Small 4	3.4	7.9	16.7%	1		395ms	708	182	0

Программирование	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
North Mini Code	4.5	4.9	33.3%	2		320.43s	7,119	219,891	561,569
Mistral Small 4	3.7	9.7	0.0%	0		901ms	7,636	619	0

Комбинированный	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
North Mini Code	2.8	1.6	33.3%	1		323.07s	14,760	0	151,500
Mistral Small 4	3.0	10.0	0.0%	0		1.72s	11,640	496	0

Парсинг и извлечение данных	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
North Mini Code	10.0	10.0	100.0%	0		24.06s	6,819	240	2,659
Mistral Small 4	10.0	10.0	100.0%	0		822ms	7,914	261	0

Предметно-ориентированное	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
North Mini Code	5.3	7.2	44.4%	1		71.37s	621	8,483	104,079
Mistral Small 4	5.3	10.0	33.3%	0		367ms	798	28	0

Общий интеллект	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
North Mini Code	5.1	10.0	0.0%	0		25.08s	444	1,546	1,635
Mistral Small 4	4.0	10.0	0.0%	0		729ms	519	205	0

Следование инструкциям	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
North Mini Code	9.8	10.0	100.0%	0		15.43s	379	909	1,339
Mistral Small 4	6.5	10.0	50.0%	0		380ms	729	69	0

Решение головоломок	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
North Mini Code	3.3	10.0	0.0%	0		19.70s	543	2,215	2,485
Mistral Small 4	3.1	9.9	0.0%	0		399ms	735	111	0

Вызов инструментов	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
North Mini Code	10.0	10.0	100.0%	0		3.93s	1,776	41	563
Mistral Small 4	10.0	10.0	100.0%	0		1.40s	6,420	213	0

Эрудиция	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
North Mini Code	3.0	10.0	0.0%	0		305.02s	106	127,006	127,125
Mistral Small 4	3.0	10.0	0.0%	0		397ms	210	17	0

Быстрое сравнение

Сменить пару сравнения