- Ранг
- #277
- Общее число выходных токенов
- 11,832
- Время ответа (среднее)
- 22.65s
- Общая стоимость
- $0.786
Ember-1 vs Laguna XS 2.1
Ember-1 лидирует по среднему баллу: 5.4 vs 5.3. Laguna XS 2.1 имеет более низкую стоимость benchmark: $0.019 vs $0.786. Laguna XS 2.1 быстрее: 4.56s vs 22.65s, с долей успешных попыток 43.5% vs 29.0%.
Сравниваемые модели
- Ранг
- #283
- Общее число выходных токенов
- 23,173
- Время ответа (среднее)
- 4.56s
- Общая стоимость
- $0.019
Рекомендуемая модель
Laguna XS 2.1
Его балл близок к лучшему здесь (5.3 против 5.4), при этом он примерно в 41.4 раза дешевле, чем Ember-1.
Подробное сравнение
| Метрика | Ember-1 Ember-1 none | Laguna XS 2.1 Laguna XS 2.1 none Бесплатно доступно |
|---|---|---|
| Оценка | 5.4 | 5.3 |
| Ранг | #277 | #283 |
| Надежность | 8.8 | 10.0 |
| Стабильность | 8.6 | 9.1 |
| Попытки | 69/69 | 69/69 |
| Тестов верно | ||
| Доля успешных попыток | 43.5% | 29.0% |
| Нестабильные тесты | 4 | 3 |
| Всего запусков | 69 | 69 |
| Стоимость за результат | 9.817 | 0.380 |
| Общая стоимость | $0.786 | $0.019 |
| Цена входа | $3.000 / 1M | $0.060 / 1M |
| Цена выхода | $15.000 / 1M | $0.120 / 1M |
| Общее число входных токенов | 202,617 | 270,072 |
| Выходные токены | 11,832 | 23,173 |
| Токены рассуждений | 0 | 0 |
| Время ответа (среднее) | 22.65s | 4.56s |
| Время ответа (макс.) | 93.12s | 70.79s |
| Время ответа (суммарно) | 520.91s | 104.80s |
| Параметры | ~2.8T всего (~104B активных) | 33B всего (3B активных) |
| Доступность | Закрытая модель | Веса доступны |
Генерация showcase моделей
Hamster playing table tennis
Prompt: Create a detailed SVG illustration of a hamster playing table tennis.
#277 Ember-1
none- Стоимость
- $0.156
- Время
- 224.6s
- Токены
- 10,555 tok
#283 Laguna XS 2.1
none- Стоимость
- $0.001
- Время
- 27.6s
- Токены
- 4,344 tok
Лучшие модели по оценке
Оценка vs общая стоимость
Время ответа (среднее)
Оценка vs Время ответа (среднее)
Общее число выходных токенов
Оценка vs Общее число выходных токенов
Разбивка по категориям
| Агентные задачи | Оценка | Стабильность | Доля успешных попыток | Нестабильные тесты | Тестов верно | Время ответа (среднее) | Входные токены | Выходные токены | Токены рассуждений |
|---|---|---|---|---|---|---|---|---|---|
| Ember-1 | 6.1 | 3.1 | 66.7% | 1 | 92.87s | 175,191 | 9,168 | 0 | |
| Laguna XS 2.1 | 5.0 | 10.0 | 0.0% | 0 | 70.79s | 178,465 | 9,796 | 0 |
| Анти-ИИ уловки | Оценка | Стабильность | Доля успешных попыток | Нестабильные тесты | Тестов верно | Время ответа (среднее) | Входные токены | Выходные токены | Токены рассуждений |
|---|---|---|---|---|---|---|---|---|---|
| Ember-1 | 5.2 | 7.9 | 41.7% | 1 | 22.37s | 796 | 867 | 0 | |
| Laguna XS 2.1 | 5.3 | 8.3 | 33.3% | 1 | 755ms | 774 | 1,015 | 0 |
| Программирование | Оценка | Стабильность | Доля успешных попыток | Нестабильные тесты | Тестов верно | Время ответа (среднее) | Входные токены | Выходные токены | Токены рассуждений |
|---|---|---|---|---|---|---|---|---|---|
| Ember-1 | 5.5 | 10.0 | 33.3% | 0 | 1.94s | 7,485 | 393 | 0 | |
| Laguna XS 2.1 | 4.3 | 7.8 | 22.2% | 1 | 623ms | 7,995 | 562 | 0 |
| Комбинированный | Оценка | Стабильность | Доля успешных попыток | Нестабильные тесты | Тестов верно | Время ответа (среднее) | Входные токены | Выходные токены | Токены рассуждений |
|---|---|---|---|---|---|---|---|---|---|
| Ember-1 | 3.0 | 10.0 | 0.0% | 0 | 49.01s | 12,162 | 327 | 0 | |
| Laguna XS 2.1 | 3.0 | 10.0 | 0.0% | 0 | 10.39s | 64,647 | 10,328 | 0 |
| Парсинг и извлечение данных | Оценка | Стабильность | Доля успешных попыток | Нестабильные тесты | Тестов верно | Время ответа (среднее) | Входные токены | Выходные токены | Токены рассуждений |
|---|---|---|---|---|---|---|---|---|---|
| Ember-1 | 6.4 | 5.9 | 66.7% | 1 | 35.25s | 4,017 | 161 | 0 | |
| Laguna XS 2.1 | 10.0 | 10.0 | 100.0% | 0 | 768ms | 7,734 | 240 | 0 |
| Предметно-ориентированное | Оценка | Стабильность | Доля успешных попыток | Нестабильные тесты | Тестов верно | Время ответа (среднее) | Входные токены | Выходные токены | Токены рассуждений |
|---|---|---|---|---|---|---|---|---|---|
| Ember-1 | 5.3 | 10.0 | 33.3% | 0 | 21.61s | 804 | 68 | 0 | |
| Laguna XS 2.1 | 5.3 | 10.0 | 33.3% | 0 | 303ms | 843 | 14 | 0 |
| Общий интеллект | Оценка | Стабильность | Доля успешных попыток | Нестабильные тесты | Тестов верно | Время ответа (среднее) | Входные токены | Выходные токены | Токены рассуждений |
|---|---|---|---|---|---|---|---|---|---|
| Ember-1 | 5.0 | 10.0 | 0.0% | 0 | 2.28s | 540 | 160 | 0 | |
| Laguna XS 2.1 | 5.0 | 10.0 | 0.0% | 0 | 529ms | 537 | 128 | 0 |
| Следование инструкциям | Оценка | Стабильность | Доля успешных попыток | Нестабильные тесты | Тестов верно | Время ответа (среднее) | Входные токены | Выходные токены | Токены рассуждений |
|---|---|---|---|---|---|---|---|---|---|
| Ember-1 | 6.4 | 5.8 | 66.7% | 1 | 31.00s | 509 | 81 | 0 | |
| Laguna XS 2.1 | 3.8 | 5.8 | 33.3% | 1 | 364ms | 638 | 50 | 0 |
| Решение головоломок | Оценка | Стабильность | Доля успешных попыток | Нестабильные тесты | Тестов верно | Время ответа (среднее) | Входные токены | Выходные токены | Токены рассуждений |
|---|---|---|---|---|---|---|---|---|---|
| Ember-1 | 10.0 | 10.0 | 100.0% | 0 | 2.54s | 840 | 569 | 0 | |
| Laguna XS 2.1 | 3.0 | 10.0 | 0.0% | 0 | 1.01s | 771 | 730 | 0 |
| Вызов инструментов | Оценка | Стабильность | Доля успешных попыток | Нестабильные тесты | Тестов верно | Время ответа (среднее) | Входные токены | Выходные токены | Токены рассуждений |
|---|---|---|---|---|---|---|---|---|---|
| Ember-1 | 3.0 | 10.0 | 0.0% | 0 | 26.44s | 0 | 0 | 0 | |
| Laguna XS 2.1 | 10.0 | 10.0 | 100.0% | 0 | 1.36s | 7,413 | 300 | 0 |
| Эрудиция | Оценка | Стабильность | Доля успешных попыток | Нестабильные тесты | Тестов верно | Время ответа (среднее) | Входные токены | Выходные токены | Токены рассуждений |
|---|---|---|---|---|---|---|---|---|---|
| Ember-1 | 3.0 | 10.0 | 0.0% | 0 | 1.05s | 273 | 38 | 0 | |
| Laguna XS 2.1 | 3.0 | 10.0 | 0.0% | 0 | 254ms | 255 | 10 | 0 |
Быстрое сравнение
Сменить пару сравнения
Ember-1nonevsStep 3.5 FlashmediumEmber-1nonevsHy4 previewlowNorth Mini CodemediumБесплатно доступноvsEmber-1noneEmber-1nonevsGranite 4.2 8BlowGranite 4.2 8BlowvsLaguna XS 2.1noneБесплатно доступноLaguna XS 2.1noneБесплатно доступноvsInkling SmalllowБесплатно доступноNemotron 3.5 LightninghighБесплатно доступноvsLaguna XS 2.1noneБесплатно доступноLaguna XS 2.1noneБесплатно доступноvsStep 3.5 FlashmediumKAT Coder AIR V2.5highvsLaguna XS 2.1noneБесплатно доступноLaguna XS 2.1noneБесплатно доступноvsHy4 previewlowNorth Mini CodemediumБесплатно доступноvsLaguna XS 2.1noneБесплатно доступноMistral Small 4mediumvsLaguna XS 2.1noneБесплатно доступно