#334 North Mini Code
medium- Kosten
- $0.000
- Zeit
- 51.8s
- Token
- 12,460 tok
Cohere
Veröffentlichung: 2026-06-18
Getestet am: 2026-10-01 03:03
cohere/north-mini-code::medium
30B insgesamt (3B aktiv)MoEOpen Source
(medium)
(default)
Zusammenfassung
North Mini Code erreicht 5.4 bei AI BENCHY und liegt auf #334. Das Modell hat 8.9 Zuverlässigkeit, 42.0% Erfolgsrate, $0.000 Gesamtkosten und 140.39s durchschnittliche Antwortzeit.
Was North Mini Code besonders macht: Am stärksten ist es in Anti-KI-Tricks, wo es #2 erreicht; am schwächsten ist Domänenspezifisch mit #14. Die Benchmark-Gesamtkosten sind für diese Leistungsklasse ungewöhnlich niedrig. Es nutzt ungewöhnlich viele Reasoning-Tokens, was langsamere oder teurere Läufe erklären kann.
Modelldaten
Recherchiert am 2026-08-12
- Parameter
- 30B insgesamt (3B aktiv)
- Architektur
- MoE
- Verfügbarkeit
- Open Source
- Lizenz
- Apache-2.0
5.4
Konsistenz
8.6
Gesamte Ausgabe-Token
1,359,341
Gesamte Eingabe-Token
166,347
Eingabepreis
$0.000 / 1M
Ausgabepreis
$0.000 / 1M
Preis für Cache-Lesen
k. A.
Preis für Cache-Schreiben
k. A.
Cache-Preise gelten für Eingabetokens. Lesen nutzt gespeicherte Prompts erneut; Schreiben speichert sie und kann mehr kosten. Für Ausgabetokens gilt der Ausgabepreis.
Falsche Tests: 15
Erfolgsquote pro Versuch: 42.0%
Benchmark-Abdeckung: 61/69 Versuche (Ziel: 3 Wiederholungen pro Test)
Instabile Tests
4
Instabile Tests hatten gemischte Ergebnisse über Läufe hinweg (mindestens ein Erfolg und ein Fehlschlag).
Hamster playing table tennis
Prompt: Create a detailed SVG illustration of a hamster playing table tennis.
Testverlauf
| Getestet am | Punktzahl | Zuverlässigkeit | Korrekte Tests | Gesamtkosten | Vergleichen |
|---|---|---|---|---|---|
| 2026-10-01 03:03 Erneuter Test | 5.4 | 8.9 | $0.000 | Aktueller Lauf | |
| 2026-07-16 23:46 Neuer Test hinzugefügt | 5.9 | 8.6 | $0.000 | Vergleichen | |
| 2026-06-18 09:44 Erster Lauf | 5.8 | 8.5 | $0.000 | Vergleichen |
Dieser Lauf nutzte eine andere Benchmark-Suite. Berücksichtige Suite-Änderungen bei der historischen Einordnung.
Laufvergleich
| Lauf | Benchmark-Abdeckung | Punktzahl | Konsistenz | Zuverlässigkeit | Korrekte Tests | Instabile Tests | Gesamte Ausgabe-Token | Gesamte Eingabe-Token | Gesamtkosten | Antwortzeit (Durchschnitt) |
|---|---|---|---|---|---|---|---|---|---|---|
| 2026-10-01 03:03 · Aktueller Lauf | 61/69 Versuche | 5.4 | 8.6 | 8.9 | 8/23 | 4 | 1,359,341 | 166,347 | $0.000 | 140.39s |
| 2026-06-18 09:44 · Erster Lauf | 55/63 Versuche | 5.8 | 8.5 | 8.5 | 9/21 | 4 | 1,446,261 | 32,891 | $0.000 | 106.18s |
| Differenz | — | -0.5 | +0.1 | +0.4 | -1 | 0 | -86920 | +133456 | $0.000 | +34218ms |
Die Benchmark-Abdeckung unterscheidet sich: 61/69 Versuche (Ziel: 3 Wiederholungen pro Test) gegenüber 55/63 Versuche (Ziel: 3 Wiederholungen pro Test). Summen und wiederholungsabhängige Metriken sind nicht direkt vergleichbar.
Diese beiden Läufe nutzten unterschiedliche Benchmark-Suiten, daher spiegeln die Deltas sowohl Modell- als auch Suite-Änderungen wider.
Diagramme
Wähle zuerst das erste Modell und klicke dann ein zweites Modell, um eine Seite im direkten Vergleich zu öffnen.
Top-Modelle nach Score
Punktzahl vs Gesamtkosten
Antwortzeit (Durchschnitt)
Punktzahl vs Antwortzeit (Durchschnitt)
Gesamte Ausgabe-Token
Punktzahl vs Gesamte Ausgabe-Token
Schnellvergleich
North Mini CodemediumKostenlos verfügbarvsQwen3.8 27BnoneKostenlos verfügbarNorth Mini CodemediumKostenlos verfügbarvsHy4 previewlowNorth Mini CodemediumKostenlos verfügbarvsSeed-2.0-CodenoneNorth Mini CodemediumKostenlos verfügbarvsMiMo-V2.6-FlashnoneNorth Mini CodemediumKostenlos verfügbarvsGemma 4 26B A4BnoneKostenlos verfügbarNorth Mini CodemediumKostenlos verfügbarvsStep 3.5 FlashmediumNorth Mini CodemediumKostenlos verfügbarvsGPT-6 LunanoneNorth Mini CodemediumKostenlos verfügbarvsEmber-1noneNorth Mini CodemediumKostenlos verfügbarvsGemini 2.5 FlashnoneNorth Mini CodemediumKostenlos verfügbarvsGPT-5.6 Lunanone
Kategorieaufschlüsselung
| Kategorie | Punktzahl | Konsistenz | Korrekte Tests |
|---|---|---|---|
| Agentenaufgaben | 3.9 | 9.6 | |
| Anti-KI-Tricks | 8.4 | 10.0 | |
| Programmierung | 4.5 | 4.9 | |
| Kombiniert | 2.9 | 5.8 | |
| Datenanalyse und -extraktion | 10.0 | 10.0 | |
| Domänenspezifisch | 2.9 | 7.2 | |
| Allgemeine Intelligenz | 5.1 | 10.0 | |
| Befolgung von Anweisungen | 9.8 | 10.0 | |
| Rätsellösen | 3.3 | 10.0 | |
| Werkzeugaufrufe | 10.0 | 10.0 | |
| Allgemeinwissen | 3.0 | 10.0 |