AI BENCHY
Advertise here
#195

Mistral Small 4

Mistral Veröffentlichung: 2026-03-16 Getestet am: 2026-07-16 22:23 mistralai/mistral-small-2603::medium
(medium) (none)

Zusammenfassung

Mistral Small 4 erreicht 5.1 bei AI BENCHY und liegt auf #195. Das Modell hat 10.0 Zuverlässigkeit, 42.4% Erfolgsrate, $0.096 Gesamtkosten und 10.77s durchschnittliche Antwortzeit.

Was Mistral Small 4 besonders macht: Am stärksten ist es in Anti-KI-Tricks, wo es #2 erreicht; am schwächsten ist Datenanalyse und -extraktion mit #11.

Punktzahl

5.1

Konsistenz

7.0

Gesamte Ausgabe-Token

131,824

Gesamte Eingabe-Token

140,494

Eingabepreis

$0.150 / 1M

Ausgabepreis

$0.600 / 1M

Korrekte Tests

Falsche Tests: 17

Erfolgsquote pro Versuch: 42.4%

Instabile Tests

8

Instabile Tests hatten gemischte Ergebnisse über Läufe hinweg (mindestens ein Erfolg und ein Fehlschlag).

Antwortzeit (Durchschnitt)

10.77s

Antwortzeit (Maximum): 59.15s

Antwortzeit (Gesamt): 236.94s

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#195 Mistral Small 4

medium
Kosten
$0.006
Zeit
47.9s
Token
9,857 tok

Testverlauf

Getestet am Punktzahl Zuverlässigkeit Korrekte Tests Gesamtkosten Vergleichen
2026-07-16 22:23 Neuer Test hinzugefügt 5.1 10.0 $0.096 Aktueller Lauf
2026-06-04 13:43 Neuer Test hinzugefügt 5.3 10.0 $0.068 Vergleichen
2026-05-22 00:16 Suite geändert 5.4 10.0 $0.056 Vergleichen
2026-04-11 01:44 Erster erfasster Lauf 5.7 k. A. $0.034 Vergleichen

Dieser Lauf nutzte eine andere Benchmark-Suite. Berücksichtige Suite-Änderungen bei der historischen Einordnung.

Laufvergleich

LaufPunktzahlKonsistenzZuverlässigkeitKorrekte TestsInstabile TestsGesamte Ausgabe-TokenGesamte Eingabe-TokenGesamtkostenAntwortzeit (Durchschnitt)
2026-07-16 22:23 · Aktueller Lauf5.17.010.05/228131,824140,494$0.09610.77s
2026-06-04 13:43 · Neuer Test hinzugefügt5.36.910.05/218108,86242,576$0.0689.40s
Differenz-0.2+0.10.000+22962+97918+$0.029+1370ms

Diese beiden Läufe nutzten unterschiedliche Benchmark-Suiten, daher spiegeln die Deltas sowohl Modell- als auch Suite-Änderungen wider.

Preisverlauf

Historische Preisdaten für dieses Modell von OpenRouter.

Datum Eingabepreis Ausgabepreis
2026-06-04 15:40 $0.150 / 1M $0.600 / 1M

Diagramme

Wähle zuerst das erste Modell und klicke dann ein zweites Modell, um eine Seite im direkten Vergleich zu öffnen.

Gesamte Ausgabe-Token

Punktzahl vs Gesamte Ausgabe-Token

Schnellvergleich

Kategorieaufschlüsselung

Kategorie Punktzahl Konsistenz Korrekte Tests
Anti-KI-Tricks 5.6 3.8
Programmierung 4.4 5.1
Kombiniert 3.0 10.0
Datenanalyse und -extraktion 7.3 5.9
Domänenspezifisch 5.3 7.2
Allgemeine Intelligenz 4.8 10.0
Befolgung von Anweisungen 7.3 5.8
Rätsellösen 3.4 9.7
Werkzeugaufrufe 10.0 10.0
Allgemeinwissen 3.0 10.0

Verglichene Modelle