Baseten
Lanzamiento: 2026-10-24
Probado el: 2026-10-24 15:07
baseten/mammoth-1::none
27BDensoCódigo abierto Resumen
Mammoth 1 obtiene 2.2 en AI BENCHY y ocupa el puesto #442. Tiene fiabilidad 8.9, una tasa de aciertos de 18.8%, coste total de $0.000 y tiempo medio de respuesta de 1.80s.
Qué hace único a Mammoth 1: Destaca más en Programación, donde ocupa #1, mientras que Análisis y extracción de datos es su área más débil con #13. Su coste total de benchmark es inusualmente bajo para su nivel de puntuación.
Datos del modelo
Investigado el 2026-10-24
- Parámetros
- 27B
- Arquitectura
- Denso
- Disponibilidad
- Código abierto
- Licencia
- MIT
2.2
Consistencia
4.2
8.9
$0.000
Total de tokens de salida
54
Total de tokens de entrada
45,468
Precio de entrada
$0.000 / 1M
Precio de salida
$0.000 / 1M
Precio de lectura de caché
N/D
Precio de escritura de caché
N/D
Los precios de caché se aplican a los tokens de entrada. Las lecturas reutilizan instrucciones guardadas; las escrituras las almacenan y pueden costar más. Los tokens de salida usan el precio de salida.
Pruebas incorrectas: 9
Tasa de aciertos por intento: 18.8%
Cobertura del benchmark: 36/69 intentos. Los adaptadores proporcionan las opciones. Admite 12/23 pruebas. Las demás no son compatibles; no cuentan como fallos. La puntuación usa la batería completa.
Pruebas inestables
3
Pruebas inestables tuvieron resultados mixtos entre ejecuciones (al menos un acierto y un fallo).
Tiempo de respuesta (promedio)
1.80s
Tiempo de respuesta (máximo): 8.17s
Tiempo de respuesta (total): 21.63s
Gráficos
Elige el primer modelo y luego haz clic en un segundo modelo para abrir una página lado a lado.
Puntuación vs Costo total
Tiempo de respuesta (promedio)
Puntuación vs Tiempo de respuesta (promedio)
Total de tokens de salida
Puntuación vs Total de tokens de salida
Comparación rápida
Mammoth 1defaultDisponible gratisvsJev 1.14defaultMammoth 1defaultDisponible gratisvsClassify-1defaultMammoth 1defaultDisponible gratisvsKev 4BdefaultMammoth 1defaultDisponible gratisvsClef OmnidefaultMammoth 1defaultDisponible gratisvsGPT-6 Luna DecisionsdefaultMammoth 1defaultDisponible gratisvsDecider Flash V1.2defaultMammoth 1defaultDisponible gratisvsDrex v1.5defaultMammoth 1defaultDisponible gratisvsD1defaultMammoth 1defaultDisponible gratisvsDecider V1.1 27BdefaultMammoth 1defaultDisponible gratisvsGemini 3 Flash Previewhigh
Desglose por categoría
| Categoría | Puntuación | Consistencia | Pruebas correctas |
|---|---|---|---|
| Tareas de agentes | 0.0 | 0.0 | |
| Trucos anti-IA | 4.0 | 7.5 | |
| Programación | 4.9 | 6.7 | |
| Combinado | 0.0 | 0.0 | |
| Análisis y extracción de datos | 3.7 | 1.7 | |
| Específico del dominio | 5.3 | 10.0 | |
| Inteligencia general | 0.0 | 0.0 | |
| Seguimiento de instrucciones | 1.5 | 5.0 | |
| Resolución de acertijos | 1.6 | 1.0 | |
| Llamada de herramientas | 0.0 | 0.0 | |
| Cultura general | 0.0 | 0.0 |