- Ранг
- #294
- Общее число выходных токенов
- 66,576
- Время ответа (среднее)
- 8.32s
- Общая стоимость
- $0.048
KAT Coder AIR V2.5 (medium) vs Mistral Small 4
Средний балл практически равен: 5.1 vs 5.1. Mistral Small 4 имеет более низкую стоимость benchmark: $0.047 vs $0.048. Mistral Small 4 быстрее: 3.12s vs 8.32s, с долей успешных попыток 43.5% vs 24.6%.
Сравниваемые модели
- Ранг
- #292
- Общее число выходных токенов
- 10,913
- Время ответа (среднее)
- 3.12s
- Общая стоимость
- $0.047
Рекомендуемая модель
Mistral Small 4
Здесь у него лучший балл (5.1), и он отвечает примерно в 2.7 раза быстрее, чем KAT Coder AIR V2.5 (medium).
Подробное сравнение
| Метрика | KAT Coder AIR V2.5 KAT Coder AIR V2.5 medium | Mistral Small 4 Mistral Small 4 none |
|---|---|---|
| Оценка | 5.1 | 5.1 |
| Ранг | #294 | #292 |
| Надежность | 9.6 | 10.0 |
| Стабильность | 8.9 | 9.6 |
| Попытки | 69/69 | 69/69 |
| Тестов верно | ||
| Доля успешных попыток | 43.5% | 24.6% |
| Нестабильные тесты | 3 | 1 |
| Всего запусков | 69 | 69 |
| Стоимость за результат | 0.596 | 0.928 |
| Общая стоимость | $0.048 | $0.047 |
| Цена входа | $0.000 / 1M | $0.150 / 1M |
| Цена выхода | $0.000 / 1M | $0.600 / 1M |
| Общее число входных токенов | 51,369 | 265,602 |
| Выходные токены | 8,008 | 10,913 |
| Токены рассуждений | 58,568 | 0 |
| Время ответа (среднее) | 8.32s | 3.12s |
| Время ответа (макс.) | 48.19s | 45.46s |
| Время ответа (суммарно) | 191.40s | 71.87s |
| Параметры | ~35B всего (~3B активных) | 119B всего (6B активных) |
| Доступность | Закрытая модель | Открытый исходный код |
Генерация showcase моделей
Hamster playing table tennis
Prompt: Create a detailed SVG illustration of a hamster playing table tennis.
#294 KAT Coder AIR V2.5
medium- Стоимость
- $0.003
- Время
- 23.7s
- Токены
- 4,924 tok
#292 Mistral Small 4
none- Стоимость
- $0.002
- Время
- 10.4s
- Токены
- 2,370 tok
Лучшие модели по оценке
Оценка vs общая стоимость
Время ответа (среднее)
Оценка vs Время ответа (среднее)
Общее число выходных токенов
Оценка vs Общее число выходных токенов
Разбивка по категориям
| Агентные задачи | Оценка | Стабильность | Доля успешных попыток | Нестабильные тесты | Тестов верно | Время ответа (среднее) | Входные токены | Выходные токены | Токены рассуждений |
|---|---|---|---|---|---|---|---|---|---|
| KAT Coder AIR V2.5 | 3.0 | 10.0 | 0.0% | 0 | 1.05s | 0 | 0 | 0 | |
| Mistral Small 4 | 5.0 | 10.0 | 0.0% | 0 | 45.46s | 160,885 | 1,101 | 0 |
| Анти-ИИ уловки | Оценка | Стабильность | Доля успешных попыток | Нестабильные тесты | Тестов верно | Время ответа (среднее) | Входные токены | Выходные токены | Токены рассуждений |
|---|---|---|---|---|---|---|---|---|---|
| KAT Coder AIR V2.5 | 8.7 | 8.0 | 91.7% | 1 | 3.79s | 672 | 549 | 4,194 | |
| Mistral Small 4 | 3.4 | 7.9 | 16.7% | 1 | 395ms | 708 | 182 | 0 |
| Программирование | Оценка | Стабильность | Доля успешных попыток | Нестабильные тесты | Тестов верно | Время ответа (среднее) | Входные токены | Выходные токены | Токены рассуждений |
|---|---|---|---|---|---|---|---|---|---|
| KAT Coder AIR V2.5 | 3.6 | 7.0 | 22.2% | 1 | 23.37s | 7,893 | 5,199 | 29,973 | |
| Mistral Small 4 | 3.7 | 9.7 | 0.0% | 0 | 901ms | 7,636 | 619 | 0 |
| Комбинированный | Оценка | Стабильность | Доля успешных попыток | Нестабильные тесты | Тестов верно | Время ответа (среднее) | Входные токены | Выходные токены | Токены рассуждений |
|---|---|---|---|---|---|---|---|---|---|
| KAT Coder AIR V2.5 | 6.5 | 10.0 | 50.0% | 0 | 19.56s | 23,854 | 435 | 6,811 | |
| Mistral Small 4 | 3.0 | 10.0 | 0.0% | 0 | 7.44s | 79,039 | 8,107 | 0 |
| Парсинг и извлечение данных | Оценка | Стабильность | Доля успешных попыток | Нестабильные тесты | Тестов верно | Время ответа (среднее) | Входные токены | Выходные токены | Токены рассуждений |
|---|---|---|---|---|---|---|---|---|---|
| KAT Coder AIR V2.5 | 6.5 | 10.0 | 50.0% | 0 | 3.65s | 7,776 | 268 | 1,881 | |
| Mistral Small 4 | 10.0 | 10.0 | 100.0% | 0 | 822ms | 7,914 | 261 | 0 |
| Предметно-ориентированное | Оценка | Стабильность | Доля успешных попыток | Нестабильные тесты | Тестов верно | Время ответа (среднее) | Входные токены | Выходные токены | Токены рассуждений |
|---|---|---|---|---|---|---|---|---|---|
| KAT Coder AIR V2.5 | 3.0 | 10.0 | 0.0% | 0 | 6.58s | 668 | 673 | 4,670 | |
| Mistral Small 4 | 5.3 | 10.0 | 33.3% | 0 | 377ms | 807 | 28 | 0 |
| Общий интеллект | Оценка | Стабильность | Доля успешных попыток | Нестабильные тесты | Тестов верно | Время ответа (среднее) | Входные токены | Выходные токены | Токены рассуждений |
|---|---|---|---|---|---|---|---|---|---|
| KAT Coder AIR V2.5 | 5.0 | 10.0 | 0.0% | 0 | 9.81s | 516 | 189 | 557 | |
| Mistral Small 4 | 4.0 | 10.0 | 0.0% | 0 | 729ms | 519 | 205 | 0 |
| Следование инструкциям | Оценка | Стабильность | Доля успешных попыток | Нестабильные тесты | Тестов верно | Время ответа (среднее) | Входные токены | Выходные токены | Токены рассуждений |
|---|---|---|---|---|---|---|---|---|---|
| KAT Coder AIR V2.5 | 10.0 | 10.0 | 100.0% | 0 | 1.50s | 699 | 93 | 730 | |
| Mistral Small 4 | 6.5 | 10.0 | 50.0% | 0 | 380ms | 729 | 69 | 0 |
| Решение головоломок | Оценка | Стабильность | Доля успешных попыток | Нестабильные тесты | Тестов верно | Время ответа (среднее) | Входные токены | Выходные токены | Токены рассуждений |
|---|---|---|---|---|---|---|---|---|---|
| KAT Coder AIR V2.5 | 3.6 | 7.2 | 22.2% | 1 | 1.87s | 696 | 265 | 1,184 | |
| Mistral Small 4 | 3.1 | 9.9 | 0.0% | 0 | 399ms | 735 | 111 | 0 |
| Вызов инструментов | Оценка | Стабильность | Доля успешных попыток | Нестабильные тесты | Тестов верно | Время ответа (среднее) | Входные токены | Выходные токены | Токены рассуждений |
|---|---|---|---|---|---|---|---|---|---|
| KAT Coder AIR V2.5 | 10.0 | 10.0 | 100.0% | 0 | 4.77s | 8,391 | 317 | 906 | |
| Mistral Small 4 | 10.0 | 10.0 | 100.0% | 0 | 1.40s | 6,420 | 213 | 0 |
| Эрудиция | Оценка | Стабильность | Доля успешных попыток | Нестабильные тесты | Тестов верно | Время ответа (среднее) | Входные токены | Выходные токены | Токены рассуждений |
|---|---|---|---|---|---|---|---|---|---|
| KAT Coder AIR V2.5 | 3.0 | 10.0 | 0.0% | 0 | 15.74s | 204 | 20 | 7,662 | |
| Mistral Small 4 | 3.0 | 10.0 | 0.0% | 0 | 397ms | 210 | 17 | 0 |
Быстрое сравнение
Сменить пару сравнения
Mercury 2.5lowvsKAT Coder AIR V2.5mediumKAT Coder AIR V2.5mediumvsMiMo-V2.5-PrononeMercury 2.5lowvsMistral Small 4noneKAT Coder AIR V2.5highvsMistral Small 4noneMistral Small 4nonevsNemotron 3.5 LightninghighБесплатно доступноMistral Small 4nonevsLaguna S 2.1mediumБесплатно доступноKAT Coder AIR V2.5mediumvsNemotron 3.5 LightninghighБесплатно доступноMercury 2.5 PreviewlowvsKAT Coder AIR V2.5mediumMistral Small 4nonevsInkling SmalllowБесплатно доступноLing 3.0 FlashnonevsKAT Coder AIR V2.5mediumMercury 2.5 PreviewlowvsMistral Small 4noneKAT Coder AIR V2.5mediumvsInkling SmalllowБесплатно доступно