AI BENCHY Compare

North Mini Code vs OpenAI: GPT-5.4 Mini

Сводка

Сравнение benchmark North Mini Code vs GPT-5.4 Mini: North Mini Code лидирует по среднему баллу: 5.8 vs 5.3. North Mini Code имеет более низкую стоимость benchmark: $0.000 vs $0.038. GPT-5.4 Mini быстрее: 1.13s vs 106.18s, с долей успешных попыток 50.8% vs 30.2%.

Рекомендуемая модель: GPT-5.4 Mini - Его балл близок к лучшему здесь (5.3 против 5.8), и он отвечает примерно в 93.6 раза быстрее, чем North Mini Code.

Бенчмарки сгенерированы из тестовых наборов AI BENCHY в: 2026-06-18

Метрика	North Mini Code North Mini Code medium Релиз: 2026-06-18 Бесплатно доступно	GPT-5.4 Mini GPT-5.4 Mini none Релиз: 2026-03-17

Метрика	North Mini Code North Mini Code medium Релиз: 2026-06-18 Бесплатно доступно	GPT-5.4 Mini GPT-5.4 Mini none Релиз: 2026-03-17
Оценка	5.8	5.3
Ранг	#107	#124
Надежность	8.5	10.0
Стабильность	8.5	8.8
Тестов верно
Доля успешных попыток	50.8%	30.2%
Нестабильные тесты	4	3
Всего запусков	55	63
Стоимость за результат	0.000	0.743
Общая стоимость	$0.000	$0.038
Цена входа	$0.000 / 1M	$0.750 / 1M
Цена выхода	$0.000 / 1M	$4.500 / 1M
Общее число входных токенов	32,891	34,244
Выходные токены	424,772	2,541
Токены рассуждений	1,021,489	0
Время ответа (среднее)	106.18s	1.13s
Время ответа (макс.)	357.05s	2.52s
Время ответа (суммарно)	2229.70s	23.82s

Генерация showcase

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#107 North Mini Code

medium

Стоимость: $0.000
Время: 51.8s
Токены: 12,460 tok

#124 GPT-5.4 Mini

none

Стоимость: $0.010
Время: 11.7s
Токены: 2,151 tok

Лучшие модели по оценке

Оценка vs общая стоимость

Время ответа (среднее)

Оценка vs Время ответа (среднее)

Общее число выходных токенов

Оценка vs Общее число выходных токенов

Разбивка по категориям

Анти-ИИ уловки	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
North Mini Code	8.4	10.0	75.0%	0		64.79s	324	64,441	68,535
GPT-5.4 Mini	3.1	8.1	8.3%	1		929ms	606	654	0

Программирование	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
North Mini Code	4.5	4.9	33.3%	2		320.43s	7,119	219,891	561,569
GPT-5.4 Mini	5.5	10.0	33.3%	0		913ms	7,305	401	0

Комбинированный	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
North Mini Code	2.8	1.6	33.3%	1		323.07s	14,760	0	151,500
GPT-5.4 Mini	3.0	10.0	0.0%	0		2.52s	11,019	298	0

Парсинг и извлечение данных	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
North Mini Code	10.0	10.0	100.0%	0		24.06s	6,819	240	2,659
GPT-5.4 Mini	10.0	10.0	100.0%	0		1.30s	7,140	222	0

Предметно-ориентированное	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
North Mini Code	5.3	7.2	44.4%	1		71.37s	621	8,483	104,079
GPT-5.4 Mini	3.5	4.4	33.3%	2		937ms	723	88	0

Общий интеллект	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
North Mini Code	5.1	10.0	0.0%	0		25.08s	444	1,546	1,635
GPT-5.4 Mini	4.8	10.0	0.0%	0		1.82s	477	174	0

Следование инструкциям	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
North Mini Code	9.8	10.0	100.0%	0		15.43s	379	909	1,339
GPT-5.4 Mini	6.3	10.0	50.0%	0		728ms	660	101	0

Решение головоломок	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
North Mini Code	3.3	10.0	0.0%	0		19.70s	543	2,215	2,485
GPT-5.4 Mini	5.4	10.0	33.3%	0		836ms	642	305	0

Вызов инструментов	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
North Mini Code	10.0	10.0	100.0%	0		3.93s	1,776	41	563
GPT-5.4 Mini	3.0	10.0	0.0%	0		2.32s	5,477	255	0

Эрудиция	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
North Mini Code	3.0	10.0	0.0%	0		305.02s	106	127,006	127,125
GPT-5.4 Mini	3.0	10.0	0.0%	0		1.33s	195	43	0

Быстрое сравнение

Сменить пару сравнения