#159

North Mini Code

Cohere Veröffentlichung: 2026-06-18 Getestet am: 2026-07-16 23:46 cohere/north-mini-code::medium

(medium) (none)

Zusammenfassung

North Mini Code erreicht 5.9 bei AI BENCHY und liegt auf #159. Das Modell hat 8.6 Zuverlässigkeit, 48.5% Erfolgsrate, $0.000 Gesamtkosten und 137.11s durchschnittliche Antwortzeit.

Was North Mini Code besonders macht: Am stärksten ist es in Anti-KI-Tricks, wo es #3 erreicht; am schwächsten ist Rätsellösen mit #10. Die Benchmark-Gesamtkosten sind für diese Leistungsklasse ungewöhnlich niedrig. Es nutzt ungewöhnlich viele Reasoning-Tokens, was langsamere oder teurere Läufe erklären kann.

Punktzahl

5.9

Konsistenz

8.5

Zuverlässigkeit

8.6

Gesamtkosten (aktueller Preis)

$0.000

Gesamte Ausgabe-Token

1,766,801

Gesamte Eingabe-Token

81,813

Eingabepreis

$0.000 / 1M

Ausgabepreis

$0.000 / 1M

Korrekte Tests

Falsche Tests: 13

Erfolgsquote pro Versuch: 48.5%

Benchmark-Abdeckung: 22/22 Tests · 58/66 Versuche

Instabile Tests

Instabile Tests hatten gemischte Ergebnisse über Läufe hinweg (mindestens ein Erfolg und ein Fehlschlag).

Antwortzeit (Durchschnitt)

137.11s

Antwortzeit (Maximum): 786.72s

Antwortzeit (Gesamt): 3016.42s

Falsche Antwort: 9 Zusätzliche Formatierung: 2 API-Fehler: 1 Ungültiger Werkzeugaufruf: 1

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#159 North Mini Code

medium

Kosten: $0.000
Zeit: 51.8s
Token: 12,460 tok

Testverlauf

Getestet am	Punktzahl	Zuverlässigkeit	Korrekte Tests	Gesamtkosten	Vergleichen
2026-07-16 23:46 Neuer Test hinzugefügt	5.9	8.6		$0.000	Aktueller Lauf
2026-06-18 09:44 Erster Lauf	5.8	8.5		$0.000	Vergleichen

Dieser Lauf nutzte eine andere Benchmark-Suite. Berücksichtige Suite-Änderungen bei der historischen Einordnung.

Laufvergleich

Lauf	Benchmark-Abdeckung	Punktzahl	Konsistenz	Zuverlässigkeit	Korrekte Tests	Instabile Tests	Gesamte Ausgabe-Token	Gesamte Eingabe-Token	Gesamtkosten	Antwortzeit (Durchschnitt)
2026-07-16 23:46 · Aktueller Lauf	22/22 Tests · 58/66 Versuche	5.9	8.5	8.6	9/22	4	1,766,801	81,813	$0.000	137.11s
2026-06-18 09:44 · Erster Lauf	21/21 Tests · 55/63 Versuche	5.8	8.5	8.5	9/21	4	1,446,261	32,891	$0.000	106.18s
Differenz	—	0.0	0.0	+0.1	0	0	+320540	+48922	$0.000	+30934ms

Die Benchmark-Abdeckung unterscheidet sich: 22/22 Tests · 58/66 Versuche (Ziel: 3 Wiederholungen pro Test) gegenüber 21/21 Tests · 55/63 Versuche (Ziel: 3 Wiederholungen pro Test). Summen und wiederholungsabhängige Metriken sind nicht direkt vergleichbar.

Diese beiden Läufe nutzten unterschiedliche Benchmark-Suiten, daher spiegeln die Deltas sowohl Modell- als auch Suite-Änderungen wider.

Preisverlauf

Historische Preisdaten für dieses Modell von OpenRouter.

Datum	Eingabepreis	Ausgabepreis
2026-06-18 09:34	$0.000 / 1M	$0.000 / 1M

Diagramme

Wähle zuerst das erste Modell und klicke dann ein zweites Modell, um eine Seite im direkten Vergleich zu öffnen.

Top-Modelle nach Score

Punktzahl vs Gesamtkosten

Antwortzeit (Durchschnitt)

Punktzahl vs Antwortzeit (Durchschnitt)

Gesamte Ausgabe-Token

Punktzahl vs Gesamte Ausgabe-Token

Schnellvergleich

Kategorieaufschlüsselung

Kategorie	Punktzahl	Konsistenz
Anti-KI-Tricks	8.4	10.0
Programmierung	4.5	4.9
Kombiniert	2.9	5.8
Datenanalyse und -extraktion	10.0	10.0
Domänenspezifisch	5.3	7.2
Allgemeine Intelligenz	5.1	10.0
Befolgung von Anweisungen	9.8	10.0
Rätsellösen	3.3	10.0
Werkzeugaufrufe	10.0	10.0
Allgemeinwissen	3.0	10.0

North Mini Code

Hamster playing table tennis

#159 North Mini Code

Diagramme

Top-Modelle nach Score

Punktzahl vs Gesamtkosten

Antwortzeit (Durchschnitt)

Punktzahl vs Antwortzeit (Durchschnitt)

Gesamte Ausgabe-Token

Punktzahl vs Gesamte Ausgabe-Token

Schnellvergleich

Kategorieaufschlüsselung

Verglichene Modelle