AI BENCHY
Advertise here
#131

Step 3.7 Flash

Stepfun Veröffentlichung: 2026-05-29 Getestet am: 2026-08-14 02:45 stepfun/step-3.7-flash::high
198B insgesamt (11B aktiv)MoEOpen Source
(high) (medium) (low)

Zusammenfassung

Step 3.7 Flash erreicht 6.8 bei AI BENCHY und liegt auf #131. Das Modell hat 10.0 Zuverlässigkeit, 60.6% Erfolgsrate, $1.229 Gesamtkosten und 70.10s durchschnittliche Antwortzeit.

Was Step 3.7 Flash besonders macht: Am stärksten ist es in Kombiniert, wo es #1 erreicht; am schwächsten ist Rätsellösen mit #17.

Modelldaten

Recherchiert am 2026-08-12

Angegeben
Parameter
198B insgesamt (11B aktiv)
Architektur
MoE
Verfügbarkeit
Open Source
Lizenz
Apache-2.0

Punktzahl

6.8

Konsistenz

8.4

Gesamte Ausgabe-Token

1,050,900

Gesamte Eingabe-Token

98,700

Eingabepreis

$0.200 / 1M

Ausgabepreis

$1.150 / 1M

Korrekte Tests

Falsche Tests: 11

Erfolgsquote pro Versuch: 60.6%

Instabile Tests

4

Instabile Tests hatten gemischte Ergebnisse über Läufe hinweg (mindestens ein Erfolg und ein Fehlschlag).

Antwortzeit (Durchschnitt)

70.10s

Antwortzeit (Maximum): 364.99s

Antwortzeit (Gesamt): 1542.14s

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#131 Step 3.7 Flash

high
Kosten
$0.007
Zeit
63.6s
Token
6,030 tok

Testverlauf

Getestet am Punktzahl Zuverlässigkeit Korrekte Tests Gesamtkosten Vergleichen
2026-08-14 02:45 Erneuter Test 6.8 10.0 $1.229 Aktueller Lauf
2026-07-16 22:46 Neuer Test hinzugefügt 6.9 10.0 $1.207 Vergleichen
2026-06-04 14:10 Neuer Test hinzugefügt 7.0 10.0 $1.148 Vergleichen
2026-05-29 11:53 Erster Lauf 7.1 9.9 $0.960 Vergleichen

Dieser Lauf nutzte eine andere Benchmark-Suite. Berücksichtige Suite-Änderungen bei der historischen Einordnung.

Laufvergleich

LaufBenchmark-AbdeckungPunktzahlKonsistenzZuverlässigkeitKorrekte TestsInstabile TestsGesamte Ausgabe-TokenGesamte Eingabe-TokenGesamtkostenAntwortzeit (Durchschnitt)
2026-08-14 02:45 · Aktueller Lauf66/66 Versuche6.88.410.011/2241,050,90098,700$1.22970.10s
2026-06-04 14:10 · Neuer Test hinzugefügt63/63 Versuche7.08.210.011/214991,35538,391$1.14864.46s
Differenz-0.2+0.20.000+59545+60309+$0.081+5642ms

Die Benchmark-Abdeckung unterscheidet sich: 66/66 Versuche (Ziel: 3 Wiederholungen pro Test) gegenüber 63/63 Versuche (Ziel: 3 Wiederholungen pro Test). Summen und wiederholungsabhängige Metriken sind nicht direkt vergleichbar.

Diese beiden Läufe nutzten unterschiedliche Benchmark-Suiten, daher spiegeln die Deltas sowohl Modell- als auch Suite-Änderungen wider.

Preisverlauf

Historische Preisdaten für dieses Modell von OpenRouter.

Datum Eingabepreis Ausgabepreis
2026-08-14 12:51 $0.200 / 1M $1.150 / 1M

Diagramme

Wähle zuerst das erste Modell und klicke dann ein zweites Modell, um eine Seite im direkten Vergleich zu öffnen.

Gesamte Ausgabe-Token

Punktzahl vs Gesamte Ausgabe-Token

Schnellvergleich

Kategorieaufschlüsselung

Kategorie Punktzahl Konsistenz Korrekte Tests
Anti-KI-Tricks 10.0 10.0
Programmierung 4.0 6.0
Kombiniert 8.7 6.9
Datenanalyse und -extraktion 10.0 10.0
Domänenspezifisch 3.6 7.2
Allgemeine Intelligenz 5.5 10.0
Befolgung von Anweisungen 9.8 10.0
Rätsellösen 5.3 7.2
Werkzeugaufrufe 10.0 10.0
Allgemeinwissen 3.0 10.0

Verglichene Modelle