North Mini Code (default) vs Mercury 2.5 Preview (default)

Средний балл практически равен: 4.7 vs 4.7. North Mini Code (default) имеет более низкую стоимость benchmark: $0.000 vs $0.023. Mercury 2.5 Preview (default) быстрее: 7.05s vs 29.47s, с долей успешных попыток 17.4% vs 29.0%.

Бенчмарки сгенерированы из тестовых наборов AI BENCHY в: 2026-10-16

Сравниваемые модели

Ранг: #355
Общее число выходных токенов: 26,954
Время ответа (среднее): 29.47s
Общая стоимость: $0.000

Ранг: #353
Общее число выходных токенов: 86,367
Время ответа (среднее): 7.05s
Общая стоимость: $0.023

Рекомендуемая модель Mercury 2.5 Preview (default)

Здесь у него лучший балл (4.7), и он отвечает примерно в 4.2 раза быстрее, чем North Mini Code (default).

Подробное сравнение

Метрика	North Mini Code North Mini Code default Релиз: 2026-06-18 Бесплатно доступно	Mercury 2.5 Preview Mercury 2.5 Preview default Релиз: 2026-09-02

Метрика	North Mini Code North Mini Code default Релиз: 2026-06-18 Бесплатно доступно	Mercury 2.5 Preview Mercury 2.5 Preview default Релиз: 2026-09-02
Оценка	4.7	4.7
Ранг	#355	#353
Надежность	8.9	9.9
Стабильность	9.9	8.3
Попытки	63/69	69/69
Тестов верно
Доля успешных попыток	17.4%	29.0%
Нестабильные тесты	0	5
Всего запусков	63	69
Стоимость за результат	0.000	0.559
Общая стоимость	$0.000	$0.023
Цена входа	$0.000 / 1M	$0.040 / 1M
Цена выхода	$0.000 / 1M	$0.150 / 1M
Цена чтения из кэша	Н/Д	Н/Д
Цена записи в кэш	Н/Д	Н/Д
Общее число входных токенов	177,989	250,541
Выходные токены	26,954	86,367
Токены рассуждений	0	0
Время ответа (среднее)	29.47s	7.05s
Время ответа (макс.)	159.85s	84.96s
Время ответа (суммарно)	677.70s	162.25s
Параметры	30B всего (3B активных)	~100B
Доступность	Открытый исходный код	Закрытая модель

Цены кэша относятся к входным токенам. Чтение повторно использует сохранённые запросы; запись сохраняет их и может стоить дороже. Выходные токены оплачиваются по цене вывода.

Генерация showcase моделей

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#355 North Mini Code

default

Стоимость: $0.000
Время: 266.1s
Токены: 63,551 tok

#353 Mercury 2.5 Preview

default

Неверный SVG

Стоимость: $0.001
Время: 3.3s
Токены: 3,122 tok

Лучшие модели по оценке

Оценка vs общая стоимость

Время ответа (среднее)

Оценка vs Время ответа (среднее)

Общее число выходных токенов

Оценка vs Общее число выходных токенов

Разбивка по категориям

Категория:

Агентные задачи	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
North Mini Code	3.0	10.0	0.0%	0		18.87s	47,488	168	0
Mercury 2.5 Preview	3.9	9.6	0.0%	0		84.96s	120,245	3,782	0

Анти-ИИ уловки	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
North Mini Code	3.0	10.0	0.0%	0		22.48s	402	4,075	0
Mercury 2.5 Preview	3.8	8.3	16.7%	1		655ms	812	256	0

Программирование	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
North Mini Code	3.9	10.0	0.0%	0		21.96s	7,119	504	0
Mercury 2.5 Preview	4.7	7.9	22.2%	1		459ms	7,850	650	0

Комбинированный	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
North Mini Code	3.2	9.3	0.0%	0		96.20s	111,493	21,428	0
Mercury 2.5 Preview	3.0	10.0	0.0%	0		31.28s	101,129	80,273	0

Парсинг и извлечение данных	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
North Mini Code	10.0	10.0	100.0%	0		28.00s	6,819	183	0
Mercury 2.5 Preview	6.3	5.8	66.7%	1		1.04s	8,333	672	0

Предметно-ориентированное	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
North Mini Code	3.0	10.0	0.0%	0		14.73s	630	14	0
Mercury 2.5 Preview	3.6	7.2	22.2%	1		631ms	875	40	0

Общий интеллект	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
North Mini Code	3.9	9.6	0.0%	0		34.77s	444	115	0
Mercury 2.5 Preview	5.0	10.0	0.0%	0		482ms	544	85	0

Следование инструкциям	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
North Mini Code	6.5	10.0	50.0%	0		30.68s	597	57	0
Mercury 2.5 Preview	6.3	10.0	50.0%	0		1.26s	753	73	0

Решение головоломок	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
North Mini Code	3.5	10.0	0.0%	0		24.43s	435	353	0
Mercury 2.5 Preview	5.6	7.4	44.4%	1		684ms	796	292	0

Вызов инструментов	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
North Mini Code	9.5	10.0	100.0%	0		3.64s	2,403	51	0
Mercury 2.5 Preview	10.0	10.0	100.0%	0		1.29s	8,969	229	0

Эрудиция	Оценка	Стабильность	Доля успешных попыток	Нестабильные тесты	Тестов верно	Время ответа (среднее)	Входные токены	Выходные токены	Токены рассуждений
North Mini Code	3.0	10.0	0.0%	0		37.37s	159	6	0
Mercury 2.5 Preview	3.0	10.0	0.0%	0		419ms	235	15	0

Сменить пару сравнения