#319 Step 3.5 Flash
medium- Cost
- $0.008
- Timp
- 277.1s
- Tokenuri
- 23,695 tok
Rezumat
Step 3.5 Flash obține 5.4 pe AI BENCHY și este pe #319. Are fiabilitate 10.0, rată de reușită 49.3%, cost total $0.105 și timp mediu de răspuns 190.48s.
Ce face Step 3.5 Flash unic: Se remarcă cel mai mult la Trucuri anti-AI, unde este pe #1, iar Sarcini agentice este zona cea mai slabă, la #13.
Documentat la 2026-08-12
5.4
Consistență
8.3
10.0
$0.105
Total tokenuri de ieșire
454,482
Total tokenuri de intrare
139,086
Preț de intrare
$0.100 / 1M
Preț de ieșire
$0.300 / 1M
Preț citire cache
N/D
Preț scriere cache
N/D
Prețurile de cache se aplică tokenurilor de intrare. Citirea reutilizează prompturi salvate; scrierea le stochează și poate costa în plus. Tokenurile de ieșire folosesc prețul de ieșire.
Teste greșite: 12
Rată de trecere pe încercare: 49.3%
Acoperire benchmark: 66/69 încercări (Țintă: 3 repetări per test)
Teste instabile
3
Testele instabile au avut rezultate mixte între rulări (cel puțin un succes și un eșec).
Prompt: Create a detailed SVG illustration of a hamster playing table tennis.
Istoric rulări
| Testat la | Scor | Fiabilitate | Teste corecte | Cost total | Compară |
|---|---|---|---|---|---|
| 2026-10-01 02:07 Retestare | 5.4 | 10.0 | $0.105 | Rularea curentă | |
| 2026-07-16 23:25 Test nou adăugat | 6.0 | 9.2 | $0.108 ↑ | Compară | |
| 2026-06-04 14:12 Test nou adăugat | 7.2 | 8.9 | $0.070 ↑ | Compară | |
| 2026-05-22 00:30 Suită modificată | 7.4 | 9.3 | $0.015 | Compară | |
| 2026-05-08 15:30 Suită modificată | 7.6 | 10.0 | $0.011 | Compară | |
| 2026-04-11 00:35 Prima rulare înregistrată | 7.9 | N/D | $0.000 | Compară |
Această rulare a folosit o suită de benchmark diferită. Ține cont de schimbările suitei când interpretezi evoluția istorică.
Alege primul model, apoi fă clic pe al doilea model pentru a deschide o pagină alăturată.
| Categorie | Scor | Consistență | Teste corecte |
|---|---|---|---|
| Sarcini agentice | 2.8 | 1.6 | |
| Trucuri anti-AI | 10.0 | 10.0 | |
| Programare | 2.4 | 5.2 | |
| Combinat | 6.5 | 10.0 | |
| Parsare și extragere de date | 10.0 | 10.0 | |
| Specific domeniului | 3.5 | 4.4 | |
| Inteligență generală | 5.5 | 10.0 | |
| Respectarea instrucțiunilor | 8.3 | 10.0 | |
| Rezolvare de puzzle-uri | 5.3 | 10.0 | |
| Apelare instrumente | 10.0 | 10.0 | |
| Cultură generală | 3.0 | 10.0 |