Advertise here
#334

North Mini Code

Cohere Lanzamiento: 2026-06-18 Probado el: 2026-10-01 03:03 cohere/north-mini-code::medium
30B en total (3B activos)MoECódigo abierto
(medium) (default)

Resumen

North Mini Code obtiene 5.4 en AI BENCHY y ocupa el puesto #334. Tiene fiabilidad 8.9, una tasa de aciertos de 42.0%, coste total de $0.000 y tiempo medio de respuesta de 140.39s.

Qué hace único a North Mini Code: Destaca más en Trucos anti-IA, donde ocupa #2, mientras que Específico del dominio es su área más débil con #14. Su coste total de benchmark es inusualmente bajo para su nivel de puntuación. Usa una cantidad inusualmente alta de tokens de razonamiento, lo que puede explicar ejecuciones más lentas o caras.

Datos del modelo

Investigado el 2026-08-12

Declarado
Parámetros
30B en total (3B activos)
Arquitectura
MoE
Disponibilidad
Código abierto
Licencia
Apache-2.0

Consistencia

8.6

Total de tokens de salida

1,359,341

Total de tokens de entrada

166,347

Precio de entrada

$0.000 / 1M

Precio de salida

$0.000 / 1M

Precio de lectura de caché

N/D

Precio de escritura de caché

N/D

Los precios de caché se aplican a los tokens de entrada. Las lecturas reutilizan instrucciones guardadas; las escrituras las almacenan y pueden costar más. Los tokens de salida usan el precio de salida.

Pruebas correctas

Pruebas incorrectas: 15

Tasa de aciertos por intento: 42.0%

Cobertura del benchmark: 61/69 intentos (Objetivo: 3 repeticiones por prueba)

Pruebas inestables

4

Pruebas inestables tuvieron resultados mixtos entre ejecuciones (al menos un acierto y un fallo).

Tiempo de respuesta (promedio)

140.39s

Tiempo de respuesta (máximo): 786.72s

Tiempo de respuesta (total): 3229.07s

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#334 North Mini Code

medium
Coste
$0.000
Tiempo
51.8s
Tokens
12,460 tok

Historial de ejecuciones

Probado el Puntuación Fiabilidad Pruebas correctas Costo total Comparar
2026-10-01 03:03 Nueva prueba 5.4 8.9 $0.000 Ejecución actual
2026-07-16 23:46 Prueba nueva añadida 5.9 8.6 $0.000 Comparar
2026-06-18 09:44 Primera ejecución 5.8 8.5 $0.000 Comparar

Esta ejecución usó una suite de benchmark diferente. Ten en cuenta los cambios de suite al interpretar la evolución histórica.

Comparación de ejecuciones

EjecuciónCobertura del benchmarkPuntuaciónConsistenciaFiabilidadPruebas correctasPruebas inestablesTotal de tokens de salidaTotal de tokens de entradaCosto totalTiempo de respuesta (promedio)
2026-10-01 03:03 · Ejecución actual61/69 intentos5.48.68.98/2341,359,341166,347$0.000140.39s
2026-07-16 23:46 · Prueba nueva añadida58/66 intentos5.98.58.69/2241,766,80181,813$0.000137.11s
Diferencia—-0.5+0.1+0.3-10-407460+84534$0.000+3285ms

La cobertura del benchmark difiere: 61/69 intentos (Objetivo: 3 repeticiones por prueba) frente a 58/66 intentos (Objetivo: 3 repeticiones por prueba). Los totales y las métricas sensibles a las repeticiones no son directamente comparables.

Estas dos ejecuciones usaron suites de benchmark distintas, así que las diferencias reflejan tanto cambios del modelo como de la suite.

Gráficos

Elige el primer modelo y luego haz clic en un segundo modelo para abrir una página lado a lado.

Total de tokens de salida

Puntuación vs Total de tokens de salida

Comparación rápida

Desglose por categoría

Categoría Puntuación Consistencia Pruebas correctas
Tareas de agentes 3.9 9.6
Trucos anti-IA 8.4 10.0
Programación 4.5 4.9
Combinado 2.9 5.8
Análisis y extracción de datos 10.0 10.0
Específico del dominio 2.9 7.2
Inteligencia general 5.1 10.0
Seguimiento de instrucciones 9.8 10.0
Resolución de acertijos 3.3 10.0
Llamada de herramientas 10.0 10.0
Cultura general 3.0 10.0

Modelos comparados