AI BENCHY
Advertise here
#107

North Mini Code

Cohere Veröffentlichung: 2026-06-18 Getestet am: 2026-06-18 09:44 cohere/north-mini-code::medium
(medium) (none)

Zusammenfassung

North Mini Code erreicht 5.8 bei AI BENCHY und liegt auf #107. Das Modell hat 8.5 Zuverlässigkeit, 50.8% Erfolgsrate, $0.000 Gesamtkosten und 106.18s durchschnittliche Antwortzeit.

Was North Mini Code besonders macht: Die Benchmark-Gesamtkosten sind für diese Leistungsklasse ungewöhnlich niedrig. Es nutzt ungewöhnlich viele Reasoning-Tokens, was langsamere oder teurere Läufe erklären kann.

Punktzahl

5.8

Konsistenz

8.5

Gesamte Ausgabe-Token

1,446,261

Gesamte Eingabe-Token

32,891

Eingabepreis

$0.000 / 1M

Ausgabepreis

$0.000 / 1M

Korrekte Tests

Falsche Tests: 12

Erfolgsquote pro Versuch: 50.8%

Benchmark-Abdeckung: 21/21 Tests · 55/63 Versuche

Instabile Tests

4

Instabile Tests hatten gemischte Ergebnisse über Läufe hinweg (mindestens ein Erfolg und ein Fehlschlag).

Antwortzeit (Durchschnitt)

106.18s

Antwortzeit (Maximum): 357.05s

Antwortzeit (Gesamt): 2229.70s

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#107 North Mini Code

medium
Kosten
$0.000
Zeit
51.8s
Token
12,460 tok

Testverlauf

Getestet am Punktzahl Zuverlässigkeit Korrekte Tests Gesamtkosten Vergleichen
2026-07-16 23:46 Neuer Test hinzugefügt 5.9 8.6 $0.000 Vergleichen
2026-06-18 09:44 Erster Lauf 5.8 8.5 $0.000 Aktueller Lauf

Laufvergleich

LaufBenchmark-AbdeckungPunktzahlKonsistenzZuverlässigkeitKorrekte TestsInstabile TestsGesamte Ausgabe-TokenGesamte Eingabe-TokenGesamtkostenAntwortzeit (Durchschnitt)
2026-06-18 09:44 · Erster Lauf21/21 Tests · 55/63 Versuche5.88.58.59/2141,446,26132,891$0.000106.18s
2026-07-16 23:46 · Neuer Test hinzugefügt22/22 Tests · 58/66 Versuche5.98.58.69/2241,766,80181,813$0.000137.11s
Differenz0.00.0-0.100-320540-48922$0.000-30934ms

Die Benchmark-Abdeckung unterscheidet sich: 21/21 Tests · 55/63 Versuche (Ziel: 3 Wiederholungen pro Test) gegenüber 22/22 Tests · 58/66 Versuche (Ziel: 3 Wiederholungen pro Test). Summen und wiederholungsabhängige Metriken sind nicht direkt vergleichbar.

Diese beiden Läufe nutzten unterschiedliche Benchmark-Suiten, daher spiegeln die Deltas sowohl Modell- als auch Suite-Änderungen wider.

Preisverlauf

Historische Preisdaten für dieses Modell von OpenRouter.

Datum Eingabepreis Ausgabepreis
2026-06-18 09:34 $0.000 / 1M $0.000 / 1M

Diagramme

Wähle zuerst das erste Modell und klicke dann ein zweites Modell, um eine Seite im direkten Vergleich zu öffnen.

Gesamte Ausgabe-Token

Punktzahl vs Gesamte Ausgabe-Token

Schnellvergleich

Kategorieaufschlüsselung

Kategorie Punktzahl Konsistenz Korrekte Tests
Anti-KI-Tricks 8.4 10.0
Programmierung 4.5 4.9
Kombiniert 2.8 1.6
Datenanalyse und -extraktion 10.0 10.0
Domänenspezifisch 5.3 7.2
Allgemeine Intelligenz 5.1 10.0
Befolgung von Anweisungen 9.8 10.0
Rätsellösen 3.3 10.0
Werkzeugaufrufe 10.0 10.0
Allgemeinwissen 3.0 10.0

Verglichene Modelle