AI BENCHY
Advertise here
#27

Step 3.7 Flash

Stepfun Sortie: 2026-05-29 Testé le: 2026-07-16 22:50 stepfun/step-3.7-flash::medium
198B au total (11B actifs)MoEOpen source
(high) (medium) (low)

Résumé

Step 3.7 Flash obtient 8.0 sur AI BENCHY et se classe #27. Il affiche une fiabilité de 9.9, un taux de réussite de 72.7%, un coût total de $0.515 et un temps de réponse moyen de 26.37s.

Ce qui rend Step 3.7 Flash unique : Il se distingue surtout en Spécifique au domaine, où il se classe #1, tandis que Intelligence générale est son point le plus faible avec #18.

Données du modèle

Date de recherche : 2026-08-12

Déclaré
Paramètres
198B au total (11B actifs)
Architecture
MoE
Disponibilité
Open source
Licence
Apache-2.0

Score

8.0

Cohérence

8.9

Total des jetons de sortie

427,572

Total des jetons d'entrée

114,062

Prix d'entrée

$0.200 / 1M

Prix de sortie

$1.150 / 1M

Tests corrects

Tests incorrects: 8

Taux de réussite par tentative: 72.7%

Couverture du benchmark: 64/66 tentatives

Tests instables

3

Les tests instables ont eu des résultats mixtes entre exécutions (au moins une réussite et un échec).

Temps de réponse (moy.)

26.37s

Temps de réponse (max): 152.83s

Temps de réponse (total): 580.25s

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#27 Step 3.7 Flash

medium
Coût
$0.006
Temps
46.2s
Tokens
4,466 tok

Historique des runs

Testé le Score Fiabilité Tests corrects Coût total Comparer
2026-08-14 02:31 Nouveau test 7.9 10.0 $0.495 Comparer
2026-07-16 22:50 Nouveau test ajouté 8.0 9.9 $0.515 Exécution actuelle
2026-06-04 13:52 Nouveau test ajouté 8.0 9.9 $0.376 Comparer
2026-05-29 11:49 Premier run 7.9 9.9 $0.404 Comparer

Ce run a utilisé une suite de benchmark différente. Gardez ce changement de suite à l'esprit lorsque vous lisez l'historique.

Historique des prix

Données historiques de tarification pour ce modèle provenant d'OpenRouter.

Date Prix d'entrée Prix de sortie
2026-06-04 15:40 $0.200 / 1M $1.150 / 1M

Graphiques

Choisissez d'abord le premier modèle, puis cliquez sur un second modèle pour ouvrir une page côte à côte.

Total des jetons de sortie

Score vs Total des jetons de sortie

Comparaison rapide

Répartition par catégorie

Catégorie Score Cohérence Tests corrects
Astuces anti-IA 8.7 7.9
Programmation 8.8 7.8
Combiné 7.3 5.8
Analyse et extraction des données 10.0 10.0
Spécifique au domaine 7.7 10.0
Intelligence générale 4.0 10.0
Suivi des instructions 9.8 10.0
Résolution d'énigmes 5.7 9.9
Appel d'outils 10.0 10.0
Culture générale 3.0 10.0

Modèles comparés