#398 Step 3.5 Flash
none- खर्च
- $0.005
- वेळ
- 156.3s
- टोकन्स
- 13,887 tok
Stepfun
प्रकाशन: 2026-02-01
चाचणी तारीख: 2026-05-08 15:30
stepfun/step-3.5-flash::none
196B एकूण (11B सक्रिय)MoEमुक्त स्रोत
(medium)
(none)
सारांश
Step 3.5 Flash AI BENCHY वर 1.9 स्कोर करते आणि #398 वर आहे. याची reliability 10.0, pass rate 26.1%, एकूण खर्च $0.020, आणि सरासरी response time 39.03s आहे.
Step 3.5 Flash खास का आहे: हे अँटी-एआय युक्त्या मध्ये सर्वाधिक उठून दिसते, जिथे त्याचा rank #1 आहे; तर डेटा पार्सिंग आणि निष्कर्षण हा सर्वात कमकुवत भाग आहे, rank #10. हे असामान्यपणे जास्त reasoning tokens वापरते, ज्यामुळे runs हळू किंवा महाग होऊ शकतात.
संग्रहित मॉडेल: हे मॉडेल आता अपडेट केले जाणार नाही आणि नवीन चाचण्यांवर तपासले जाणार नाही.
मॉडेलची माहिती
संशोधन दिनांक: 2026-08-12
- पॅरामीटर्स
- 196B एकूण (11B सक्रिय)
- आर्किटेक्चर
- MoE
- उपलब्धता
- मुक्त स्रोत
- परवाना
- Apache-2.0
1.9
सुसंगतता
5.2
10.0
$0.020
एकूण आउटपुट टोकन्स
64,795
एकूण इनपुट टोकन्स
1,971
इनपुट किंमत
$0.100 / 1M
आउटपुट किंमत
$0.300 / 1M
कॅश वाचण्याची किंमत
लागू नाही
कॅश लिहिण्याची किंमत
लागू नाही
कॅशच्या किमती इनपुट टोकनला लागू होतात. वाचताना साठवलेले प्रॉम्प्ट पुन्हा वापरले जातात; लिहिताना ते साठवले जातात आणि अधिक खर्च होऊ शकतो. आउटपुट टोकनला आउटपुट किंमत लागू होते.
अस्थिर चाचण्या
0
अस्थिर चाचण्यांत रन्समध्ये मिश्र निकाल असतात (किमान एक पास आणि एक फेल).
Hamster playing table tennis
Prompt: Create a detailed SVG illustration of a hamster playing table tennis.
रन इतिहास
| चाचणी तारीख | स्कोअर | विश्वसनीयता | बरोबर चाचण्या | एकूण खर्च | तुलना करा |
|---|---|---|---|---|---|
| 2026-05-08 15:30 नवीन चाचणी जोडली | 1.9 | 10.0 | $0.020 | सध्याची रन | |
| 2026-04-11 01:44 पहिली नोंदलेली रन | 3.0 | लागू नाही | $0.000 | तुलना करा |
या रनमध्ये वेगळा बेंचमार्क सूट वापरला गेला. ऐतिहासिक बदल वाचताना सूटमधील बदल लक्षात घ्या.
रन तुलना
| रन | बेंचमार्क कव्हरेज | स्कोअर | सुसंगतता | विश्वसनीयता | बरोबर चाचण्या | अस्थिर चाचण्या | एकूण आउटपुट टोकन्स | एकूण इनपुट टोकन्स | एकूण खर्च | प्रतिसाद वेळ (सरासरी) |
|---|---|---|---|---|---|---|---|---|---|---|
| 2026-05-08 15:30 · सध्याची रन | 36/69 प्रयत्न | 1.9 | 5.2 | 10.0 | 6/12 | 0 | 64,795 | 1,971 | $0.020 | 39.03s |
| 2026-04-11 01:44 · पहिली नोंदलेली रन | 3/3 प्रयत्न | 3.0 | 10.0 | लागू नाही | 0/1 | 0 | 0 | 0 | $0.000 | 0ms |
| फरक | — | -1.1 | -4.8 | +6 | 0 | +64795 | +1971 | +$0.020 | +39032ms |
बेंचमार्क कव्हरेज वेगळे आहे: 36/69 प्रयत्न (लक्ष्य: प्रत्येक चाचणीसाठी 3 पुनरावृत्ती) विरुद्ध 3/3 प्रयत्न (लक्ष्य: प्रत्येक चाचणीसाठी 3 पुनरावृत्ती). एकूण मूल्ये आणि पुनरावृत्तीवर अवलंबून मेट्रिक्स थेट तुलना करता येत नाहीत.
या दोन रनमध्ये वेगवेगळे बेंचमार्क सूट वापरले गेले, त्यामुळे फरकांमध्ये मॉडेलमधील आणि सूटमधील दोन्ही बदल दिसतात.
किंमत इतिहास
OpenRouter मधील या मॉडेलचा ऐतिहासिक किंमत डेटा.
| तारीख | इनपुट किंमत | आउटपुट किंमत | कॅश वाचण्याची किंमत | कॅश लिहिण्याची किंमत |
|---|---|---|---|---|
| 2026-06-04 15:40 | $0.090 / 1M | $0.300 / 1M | लागू नाही | लागू नाही |
| 2026-06-30 21:25 | $0.100 / 1M | $0.300 / 1M | लागू नाही | लागू नाही |
चार्ट्स
पहिले मॉडेल निवडा, नंतर दुसरे मॉडेल क्लिक करून बाजू-बाजूची तुलना पेज उघडा.
स्कोअरनुसार शीर्ष मॉडेल्स
स्कोअर vs एकूण खर्च
प्रतिसाद वेळ (सरासरी)
स्कोअर vs प्रतिसाद वेळ (सरासरी)
एकूण आउटपुट टोकन्स
स्कोअर vs एकूण आउटपुट टोकन्स
श्रेणीवार तपशील
| श्रेणी | स्कोअर | सुसंगतता | बरोबर चाचण्या |
|---|---|---|---|
| स्वायत्त एजंट कार्ये | 0.0 | 0.0 | |
| अँटी-एआय युक्त्या | 10.0 | 10.0 | |
| कोडिंग | 1.0 | 3.3 | |
| संयुक्त | 1.5 | 5.0 | |
| डेटा पार्सिंग आणि निष्कर्षण | 1.5 | 5.0 | |
| डोमेन-विशिष्ट | 3.3 | 3.3 | |
| Samanya Buddhimatta | 4.0 | 10.0 | |
| सूचनांचे पालन | 5.0 | 5.0 | |
| कोडी सोडवणे | 0.0 | 0.0 | |
| टूल कॉलिंग | 3.0 | 10.0 | |
| सामान्य ज्ञान | 3.0 | 10.0 |