AI BENCHY
Advertise here

#58

Step 3.5 Flash

Stepfun Veröffentlichung: 2026-02-01 Getestet am: 2026-05-22 00:30 stepfun/step-3.5-flash::medium
(medium) (none)

Punktzahl

7.4

Konsistenz

8.7

Gesamte Ausgabe-Token

263,806

Gesamte Eingabe-Token

0

Eingabepreis

$0.090 / 1M

Ausgabepreis

$0.300 / 1M

Korrekte Tests

Falsche Tests: 8

Erfolgsquote pro Versuch: 65.8%

Instabile Tests

3

Instabile Tests hatten gemischte Ergebnisse über Läufe hinweg (mindestens ein Erfolg und ein Fehlschlag).

Antwortzeit (Durchschnitt)

43.29s

Antwortzeit (Maximum): 170.45s

Antwortzeit (Gesamt): 562.74s

Testverlauf

Getestet am Punktzahl Zuverlässigkeit Korrekte Tests Gesamtkosten Vergleichen
2026-06-04 14:12 Neuer Test hinzugefügt 7.2 8.9 $0.070 Vergleichen
2026-05-22 00:30 Suite geändert 7.4 9.3 $0.015 Aktueller Lauf
2026-05-08 15:30 Suite geändert 7.6 10.0 $0.011 Vergleichen
2026-04-11 00:35 Erster erfasster Lauf 7.9 k. A. $0.000 Vergleichen

Dieser Lauf nutzte eine andere Benchmark-Suite. Berücksichtige Suite-Änderungen bei der historischen Einordnung.

Laufvergleich

LaufPunktzahlKonsistenzZuverlässigkeitKorrekte TestsInstabile TestsGesamte Ausgabe-TokenGesamte Eingabe-TokenGesamtkostenAntwortzeit (Durchschnitt)
2026-05-22 00:30 · Suite geändert7.48.79.311/193263,8060$0.01543.29s
2026-06-04 14:12 · Neuer Test hinzugefügt7.29.18.911/202287,56034,431$0.02272.53s
Differenz+0.2-0.4+0.40+1-23754-34431-$0.008-29246ms

Diese beiden Läufe nutzten unterschiedliche Benchmark-Suiten, daher spiegeln die Deltas sowohl Modell- als auch Suite-Änderungen wider.

Diagramme

Wähle zuerst das erste Modell und klicke dann ein zweites Modell, um eine Seite im direkten Vergleich zu öffnen.

Gesamte Ausgabe-Token

Punktzahl vs Gesamte Ausgabe-Token

Schnellvergleich

Kategorieaufschlüsselung

Kategorie Punktzahl Konsistenz Korrekte Tests
Anti-KI-Tricks 10.0 10.0
Programmierung 3.0 6.0
Kombiniert 10.0 10.0
Datenanalyse und -extraktion 10.0 10.0
Domänenspezifisch 5.3 7.2
Allgemeine Intelligenz 5.5 10.0
Befolgung von Anweisungen 8.5 6.8
Rätsellösen 5.3 10.0
Werkzeugaufrufe 10.0 10.0
Allgemeinwissen 3.0 10.0

Verglichene Modelle