#378

North Mini Code

Cohere Sortie: 2026-06-18 Testé le: 2026-10-01 02:59 cohere/north-mini-code::none

30B au total (3B actifs)MoEOpen source

(medium) (default)

Résumé

North Mini Code obtient 4.7 sur AI BENCHY et se classe #378. Il affiche une fiabilité de 8.9, un taux de réussite de 17.4%, un coût total de $0.000 et un temps de réponse moyen de 29.47s.

Ce qui rend North Mini Code unique : Son coût total de benchmark est inhabituellement bas pour son niveau de score.

Données du modèle

Date de recherche : 2026-08-12

Déclaré

Paramètres: 30B au total (3B actifs)
Architecture: MoE
Disponibilité: Open source
Licence: Apache-2.0

Source des paramètres Source de disponibilité

Score

4.7

Cohérence

9.9

Fiabilité

8.9

Coût total (prix actuel)

$0.000

Total des jetons de sortie

26,954

Total des jetons d'entrée

177,989

Prix d'entrée

$0.000 / 1M

Prix de sortie

$0.000 / 1M

Prix de lecture du cache

N/D

Prix d’écriture du cache

N/D

Les prix du cache concernent les tokens d’entrée. La lecture réutilise les prompts en cache ; l’écriture les stocke et peut coûter plus cher. Les tokens de sortie utilisent le prix de sortie.

Tests corrects

Tests incorrects: 19

Taux de réussite par tentative: 17.4%

Couverture du benchmark: 63/69 tentatives (Objectif : 3 répétitions par test)

Tests instables

Les tests instables ont eu des résultats mixtes entre exécutions (au moins une réussite et un échec).

Temps de réponse (moy.)

29.47s

Temps de réponse (max): 159.85s

Temps de réponse (total): 677.70s

Mauvaise réponse: 13 Mise en forme supplémentaire: 2 N'a pas suivi les instructions: 2 Appel d'outil invalide: 2

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#378 North Mini Code

default

Coût: $0.000
Temps: 266.1s
Tokens: 63,551 tok

Historique des runs

Testé le	Score	Fiabilité	Coût total	Comparer
2026-10-01 02:59 Nouveau test	4.7	8.9	$0.000	Exécution actuelle
2026-07-16 23:19 Nouveau test ajouté	5.1	8.7	$0.000	Comparer
2026-06-18 09:42 Premier run	5.1	8.5	$0.000	Comparer

Ce run a utilisé une suite de benchmark différente. Gardez ce changement de suite à l'esprit lorsque vous lisez l'historique.

Comparaison de runs

Run	Couverture du benchmark	Score	Cohérence	Fiabilité	Tests corrects	Total des jetons de sortie	Total des jetons d'entrée	Coût total	Temps de réponse (moy.)
2026-10-01 02:59 · Exécution actuelle	63/69 tentatives	4.7	9.9	8.9	4/23	26,954	177,989	$0.000	29.47s
2026-06-18 09:42 · Premier run	57/63 tentatives	5.1	9.9	8.5	4/21	8,278	43,264	$0.000	29.82s
Différence	—	-0.4	0.0	+0.4	0	+18676	+134725	$0.000	-357ms

La couverture du benchmark diffère : 63/69 tentatives (Objectif : 3 répétitions par test) contre 57/63 tentatives (Objectif : 3 répétitions par test). Les totaux et les métriques sensibles aux répétitions ne sont pas directement comparables.

Ces deux runs ont utilisé des suites de benchmark différentes, donc les écarts reflètent à la fois les changements du modèle et ceux de la suite.

Graphiques

Choisissez d'abord le premier modèle, puis cliquez sur un second modèle pour ouvrir une page côte à côte.

Meilleurs modèles par score

Score vs Coût total

Temps de réponse (moy.)

Score vs Temps de réponse (moy.)

Total des jetons de sortie

Score vs Total des jetons de sortie

Comparaison rapide

Répartition par catégorie

Catégorie	Score	Cohérence
Tâches agentiques	3.0	10.0
Astuces anti-IA	3.0	10.0
Programmation	3.9	10.0
Combiné	3.2	9.3
Analyse et extraction des données	10.0	10.0
Spécifique au domaine	3.0	10.0
Intelligence générale	3.9	9.6
Suivi des instructions	6.5	10.0
Résolution d'énigmes	3.5	10.0
Appel d'outils	9.5	10.0
Culture générale	3.0	10.0

North Mini Code

Données du modèle

Hamster playing table tennis

#378 North Mini Code

Graphiques

Meilleurs modèles par score

Score vs Coût total

Temps de réponse (moy.)

Score vs Temps de réponse (moy.)

Total des jetons de sortie

Score vs Total des jetons de sortie

Comparaison rapide

Répartition par catégorie

Modèles comparés