- Ранг
- #391
- Общее число выходных токенов
- 25,521
- Время ответа (среднее)
- 92.50s
- Общая стоимость
- $0.073
Command A+ (low) vs Decider V1.1 27B (default)
Command A+ (low) лидирует по среднему баллу: 3.0 vs 2.6. Decider V1.1 27B (default) имеет более низкую стоимость benchmark: $0.002 vs $0.073. Decider V1.1 27B (default) быстрее: 320ms vs 92.50s, с долей успешных попыток 1.5% vs 17.4%.
Сравниваемые модели
- Ранг
- #395
- Общее число выходных токенов
- 69
- Время ответа (среднее)
- 320ms
- Общая стоимость
- $0.002
Рекомендуемая модель
Decider V1.1 27B (default)
Его балл близок к лучшему здесь (2.6 против 3.0), при этом он примерно в 49.4 раза дешевле, чем Command A+ (low).
Подробное сравнение
| Метрика | Command A+ Command A+ low | Decider V1.1 27B Decider V1.1 27B default |
|---|---|---|
| Оценка | 3.0 | 2.6 |
| Ранг | #391 | #395 |
| Надежность | 3.5 | 10.0 |
| Стабильность | 9.6 | 5.2 |
| Попытки | 69/69 | 36/69 |
| Тестов верно | ||
| Доля успешных попыток | 1.5% | 17.4% |
| Нестабильные тесты | 1 | 0 |
| Всего запусков | 69 | 36 |
| Стоимость за результат | 0.000 | 0.037 |
| Общая стоимость | $0.073 | $0.002 |
| Цена входа | $0.300 / 1M | $0.020 / 1M |
| Цена выхода | $1.500 / 1M | $0.000 / 1M |
| Цена чтения из кэша | $0.150 / 1M | Н/Д |
| Цена записи в кэш | Н/Д | Н/Д |
| Общее число входных токенов | 114,874 | 73,557 |
| Выходные токены | 1,992 | 69 |
| Токены рассуждений | 23,529 | 0 |
| Время ответа (среднее) | 92.50s | 320ms |
| Время ответа (макс.) | 128.54s | 491ms |
| Время ответа (суммарно) | 2127.40s | 3.84s |
| Параметры | 218B всего (25B активных) | 27B |
| Доступность | Открытый исходный код | Открытый исходный код |
Цены кэша относятся к входным токенам. Чтение повторно использует сохранённые запросы; запись сохраняет их и может стоить дороже. Выходные токены оплачиваются по цене вывода.
Генерация showcase моделей
Hamster playing table tennis
Prompt: Create a detailed SVG illustration of a hamster playing table tennis.
#391 Command A+
low
Provider returned error
- Стоимость
- $0.000
- Время
- 0.2s
- Токены
- 0 tok
#395 Decider V1.1 27B
default
Для этой модели еще не сгенерирован результат showcase.
- Стоимость
- Н/Д
- Время
- -
- Токены
- 0 tok
Разбивка по категориям
| Агентные задачи | Оценка | Стабильность | Доля успешных попыток | Нестабильные тесты | Тестов верно | Время ответа (среднее) | Входные токены | Выходные токены | Токены рассуждений |
|---|---|---|---|---|---|---|---|---|---|
| Command A+ | 2.8 | 1.6 | 33.3% | 1 | 128.54s | 114,874 | 1,992 | 23,529 | |
| Decider V1.1 27B | 0.0 | 0.0 | 0.0% | 0 | 0ms | 0 | 0 | 0 |
| Анти-ИИ уловки | Оценка | Стабильность | Доля успешных попыток | Нестабильные тесты | Тестов верно | Время ответа (среднее) | Входные токены | Выходные токены | Токены рассуждений |
|---|---|---|---|---|---|---|---|---|---|
| Command A+ | 3.0 | 10.0 | 0.0% | 0 | 87.46s | 0 | 0 | 0 | |
| Decider V1.1 27B | 4.0 | 7.5 | 25.0% | 0 | 321ms | 7,161 | 9 | 0 |
| Программирование | Оценка | Стабильность | Доля успешных попыток | Нестабильные тесты | Тестов верно | Время ответа (среднее) | Входные токены | Выходные токены | Токены рассуждений |
|---|---|---|---|---|---|---|---|---|---|
| Command A+ | 3.0 | 10.0 | 0.0% | 0 | 86.43s | 0 | 0 | 0 | |
| Decider V1.1 27B | 4.9 | 6.7 | 33.3% | 0 | 305ms | 32,733 | 12 | 0 |
| Комбинированный | Оценка | Стабильность | Доля успешных попыток | Нестабильные тесты | Тестов верно | Время ответа (среднее) | Входные токены | Выходные токены | Токены рассуждений |
|---|---|---|---|---|---|---|---|---|---|
| Command A+ | 3.0 | 10.0 | 0.0% | 0 | 83.53s | 0 | 0 | 0 | |
| Decider V1.1 27B | 0.0 | 0.0 | 0.0% | 0 | 0ms | 0 | 0 | 0 |
| Парсинг и извлечение данных | Оценка | Стабильность | Доля успешных попыток | Нестабильные тесты | Тестов верно | Время ответа (среднее) | Входные токены | Выходные токены | Токены рассуждений |
|---|---|---|---|---|---|---|---|---|---|
| Command A+ | 3.0 | 10.0 | 0.0% | 0 | 85.39s | 0 | 0 | 0 | |
| Decider V1.1 27B | 6.5 | 10.0 | 50.0% | 0 | 286ms | 24,396 | 15 | 0 |
| Предметно-ориентированное | Оценка | Стабильность | Доля успешных попыток | Нестабильные тесты | Тестов верно | Время ответа (среднее) | Входные токены | Выходные токены | Токены рассуждений |
|---|---|---|---|---|---|---|---|---|---|
| Command A+ | 3.0 | 10.0 | 0.0% | 0 | 82.74s | 0 | 0 | 0 | |
| Decider V1.1 27B | 5.3 | 10.0 | 33.3% | 0 | 313ms | 2,874 | 9 | 0 |
| Общий интеллект | Оценка | Стабильность | Доля успешных попыток | Нестабильные тесты | Тестов верно | Время ответа (среднее) | Входные токены | Выходные токены | Токены рассуждений |
|---|---|---|---|---|---|---|---|---|---|
| Command A+ | 3.0 | 10.0 | 0.0% | 0 | 101.81s | 0 | 0 | 0 | |
| Decider V1.1 27B | 0.0 | 0.0 | 0.0% | 0 | 0ms | 0 | 0 | 0 |
| Следование инструкциям | Оценка | Стабильность | Доля успешных попыток | Нестабильные тесты | Тестов верно | Время ответа (среднее) | Входные токены | Выходные токены | Токены рассуждений |
|---|---|---|---|---|---|---|---|---|---|
| Command A+ | 3.0 | 10.0 | 0.0% | 0 | 105.69s | 0 | 0 | 0 | |
| Decider V1.1 27B | 1.5 | 5.0 | 0.0% | 0 | 333ms | 5,862 | 21 | 0 |
| Решение головоломок | Оценка | Стабильность | Доля успешных попыток | Нестабильные тесты | Тестов верно | Время ответа (среднее) | Входные токены | Выходные токены | Токены рассуждений |
|---|---|---|---|---|---|---|---|---|---|
| Command A+ | 3.0 | 10.0 | 0.0% | 0 | 95.76s | 0 | 0 | 0 | |
| Decider V1.1 27B | 1.7 | 3.3 | 0.0% | 0 | 422ms | 531 | 3 | 0 |
| Вызов инструментов | Оценка | Стабильность | Доля успешных попыток | Нестабильные тесты | Тестов верно | Время ответа (среднее) | Входные токены | Выходные токены | Токены рассуждений |
|---|---|---|---|---|---|---|---|---|---|
| Command A+ | 3.0 | 10.0 | 0.0% | 0 | 99.68s | 0 | 0 | 0 | |
| Decider V1.1 27B | 0.0 | 0.0 | 0.0% | 0 | 0ms | 0 | 0 | 0 |
| Эрудиция | Оценка | Стабильность | Доля успешных попыток | Нестабильные тесты | Тестов верно | Время ответа (среднее) | Входные токены | Выходные токены | Токены рассуждений |
|---|---|---|---|---|---|---|---|---|---|
| Command A+ | 3.0 | 10.0 | 0.0% | 0 | 103.52s | 0 | 0 | 0 | |
| Decider V1.1 27B | 0.0 | 0.0 | 0.0% | 0 | 0ms | 0 | 0 | 0 |
Быстрое сравнение
Сменить пару сравнения
Command A+lowvsJev 1.13defaultCommand A+lowvsGrok 4.20noneCommand A+nonevsDecider V1.1 27BdefaultCommand A+lowvsGPT-6 Luna DecisionsdefaultCommand A+lowvsKev 4BdefaultCommand A+highvsDecider V1.1 27BdefaultCommand A+lowvsLing 3.0 TinymediumCommand A+lowvsLing 3.0 TinyhighGemini 3 Flash PreviewhighvsDecider V1.1 27BdefaultCommand A+mediumvsDecider V1.1 27BdefaultDecider V1.1 27BdefaultvsGrok 4.20noneCommand A+lowvsNemotron 3.5 LightningnoneБесплатно доступно