#159

North Mini Code

Cohere Sortie: 2026-06-18 Testé le: 2026-07-16 23:46 cohere/north-mini-code::medium

(medium) (none)

Résumé

North Mini Code obtient 5.9 sur AI BENCHY et se classe #159. Il affiche une fiabilité de 8.6, un taux de réussite de 48.5%, un coût total de $0.000 et un temps de réponse moyen de 137.11s.

Ce qui rend North Mini Code unique : Il se distingue surtout en Astuces anti-IA, où il se classe #3, tandis que Résolution d'énigmes est son point le plus faible avec #10. Son coût total de benchmark est inhabituellement bas pour son niveau de score. Il utilise beaucoup plus de tokens de raisonnement que la moyenne, ce qui peut expliquer des runs plus lents ou plus coûteux.

Score

5.9

Cohérence

8.5

Fiabilité

8.6

Coût total (prix actuel)

$0.000

Total des jetons de sortie

1,766,801

Total des jetons d'entrée

81,813

Prix d'entrée

$0.000 / 1M

Prix de sortie

$0.000 / 1M

Tests corrects

Tests incorrects: 13

Taux de réussite par tentative: 48.5%

Couverture du benchmark: 22/22 tests · 58/66 tentatives

Tests instables

Les tests instables ont eu des résultats mixtes entre exécutions (au moins une réussite et un échec).

Temps de réponse (moy.)

137.11s

Temps de réponse (max): 786.72s

Temps de réponse (total): 3016.42s

Mauvaise réponse: 9 Mise en forme supplémentaire: 2 Erreur API: 1 Appel d'outil invalide: 1

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#159 North Mini Code

medium

Coût: $0.000
Temps: 51.8s
Tokens: 12,460 tok

Historique des runs

Testé le	Score	Fiabilité	Tests corrects	Coût total	Comparer
2026-07-16 23:46 Nouveau test ajouté	5.9	8.6		$0.000	Exécution actuelle
2026-06-18 09:44 Premier run	5.8	8.5		$0.000	Comparer

Ce run a utilisé une suite de benchmark différente. Gardez ce changement de suite à l'esprit lorsque vous lisez l'historique.

Comparaison de runs

Run	Couverture du benchmark	Score	Cohérence	Fiabilité	Tests corrects	Tests instables	Total des jetons de sortie	Total des jetons d'entrée	Coût total	Temps de réponse (moy.)
2026-07-16 23:46 · Exécution actuelle	22/22 tests · 58/66 tentatives	5.9	8.5	8.6	9/22	4	1,766,801	81,813	$0.000	137.11s
2026-06-18 09:44 · Premier run	21/21 tests · 55/63 tentatives	5.8	8.5	8.5	9/21	4	1,446,261	32,891	$0.000	106.18s
Différence	—	0.0	0.0	+0.1	0	0	+320540	+48922	$0.000	+30934ms

La couverture du benchmark diffère : 22/22 tests · 58/66 tentatives (Objectif : 3 répétitions par test) contre 21/21 tests · 55/63 tentatives (Objectif : 3 répétitions par test). Les totaux et les métriques sensibles aux répétitions ne sont pas directement comparables.

Ces deux runs ont utilisé des suites de benchmark différentes, donc les écarts reflètent à la fois les changements du modèle et ceux de la suite.

Historique des prix

Données historiques de tarification pour ce modèle provenant d'OpenRouter.

Date	Prix d'entrée	Prix de sortie
2026-06-18 09:34	$0.000 / 1M	$0.000 / 1M

Graphiques

Choisissez d'abord le premier modèle, puis cliquez sur un second modèle pour ouvrir une page côte à côte.

Meilleurs modèles par score

Score vs Coût total

Temps de réponse (moy.)

Score vs Temps de réponse (moy.)

Total des jetons de sortie

Score vs Total des jetons de sortie

Comparaison rapide

Répartition par catégorie

Catégorie	Score	Cohérence
Astuces anti-IA	8.4	10.0
Programmation	4.5	4.9
Combiné	2.9	5.8
Analyse et extraction des données	10.0	10.0
Spécifique au domaine	5.3	7.2
Intelligence générale	5.1	10.0
Suivi des instructions	9.8	10.0
Résolution d'énigmes	3.3	10.0
Appel d'outils	10.0	10.0
Culture générale	3.0	10.0

North Mini Code

Hamster playing table tennis

#159 North Mini Code

Graphiques

Meilleurs modèles par score

Score vs Coût total

Temps de réponse (moy.)

Score vs Temps de réponse (moy.)

Total des jetons de sortie

Score vs Total des jetons de sortie

Comparaison rapide

Répartition par catégorie

Modèles comparés