#27 Step 3.7 Flash
medium- Coût
- $0.006
- Temps
- 46.2s
- Tokens
- 4,466 tok
Résumé
Step 3.7 Flash obtient 8.0 sur AI BENCHY et se classe #27. Il affiche une fiabilité de 9.9, un taux de réussite de 72.7%, un coût total de $0.515 et un temps de réponse moyen de 26.37s.
Ce qui rend Step 3.7 Flash unique : Il se distingue surtout en Spécifique au domaine, où il se classe #1, tandis que Intelligence générale est son point le plus faible avec #18.
Date de recherche : 2026-08-12
8.0
Cohérence
8.9
9.9
$0.515
Total des jetons de sortie
427,572
Total des jetons d'entrée
114,062
Prix d'entrée
$0.200 / 1M
Prix de sortie
$1.150 / 1M
Tests incorrects: 8
Taux de réussite par tentative: 72.7%
Couverture du benchmark: 64/66 tentatives
Tests instables
3
Les tests instables ont eu des résultats mixtes entre exécutions (au moins une réussite et un échec).
Prompt: Create a detailed SVG illustration of a hamster playing table tennis.
Historique des runs
| Testé le | Score | Fiabilité | Tests corrects | Coût total | Comparer |
|---|---|---|---|---|---|
| 2026-08-14 02:31 Nouveau test | 7.9 | 10.0 | $0.495 | Comparer | |
| 2026-07-16 22:50 Nouveau test ajouté | 8.0 | 9.9 | $0.515 | Exécution actuelle | |
| 2026-06-04 13:52 Nouveau test ajouté | 8.0 | 9.9 | $0.376 | Comparer | |
| 2026-05-29 11:49 Premier run | 7.9 | 9.9 | $0.404 | Comparer |
Ce run a utilisé une suite de benchmark différente. Gardez ce changement de suite à l'esprit lorsque vous lisez l'historique.
Comparaison de runs
| Run | Couverture du benchmark | Score | Cohérence | Fiabilité | Tests corrects | Tests instables | Total des jetons de sortie | Total des jetons d'entrée | Coût total | Temps de réponse (moy.) |
|---|---|---|---|---|---|---|---|---|---|---|
| 2026-07-16 22:50 · Nouveau test ajouté | 64/66 tentatives | 8.0 | 8.9 | 9.9 | 14/22 | 3 | 427,572 | 114,062 | $0.515 | 26.37s |
| 2026-06-04 13:52 · Nouveau test ajouté | 61/63 tentatives | 8.0 | 9.3 | 9.9 | 14/21 | 2 | 319,958 | 39,981 | $0.376 | 20.35s |
| Différence | — | 0.0 | -0.4 | 0.0 | 0 | +1 | +107614 | +74081 | +$0.139 | +6021ms |
La couverture du benchmark diffère : 64/66 tentatives (Objectif : 3 répétitions par test) contre 61/63 tentatives (Objectif : 3 répétitions par test). Les totaux et les métriques sensibles aux répétitions ne sont pas directement comparables.
Ces deux runs ont utilisé des suites de benchmark différentes, donc les écarts reflètent à la fois les changements du modèle et ceux de la suite.
Historique des prix
Données historiques de tarification pour ce modèle provenant d'OpenRouter.
| Date | Prix d'entrée | Prix de sortie |
|---|---|---|
| 2026-06-04 15:40 | $0.200 / 1M | $1.150 / 1M |
Choisissez d'abord le premier modèle, puis cliquez sur un second modèle pour ouvrir une page côte à côte.
| Catégorie | Score | Cohérence | Tests corrects |
|---|---|---|---|
| Astuces anti-IA | 8.7 | 7.9 | |
| Programmation | 8.8 | 7.8 | |
| Combiné | 7.3 | 5.8 | |
| Analyse et extraction des données | 10.0 | 10.0 | |
| Spécifique au domaine | 7.7 | 10.0 | |
| Intelligence générale | 4.0 | 10.0 | |
| Suivi des instructions | 9.8 | 10.0 | |
| Résolution d'énigmes | 5.7 | 9.9 | |
| Appel d'outils | 10.0 | 10.0 | |
| Culture générale | 3.0 | 10.0 |