#401 Step 3.5 Flash
none- लागत
- $0.005
- समय
- 156.3s
- टोकन
- 13,887 tok
Stepfun
रिलीज़: 2026-02-01
परीक्षण किया गया: 2026-05-08 15:30
stepfun/step-3.5-flash::none
196B कुल (11B सक्रिय)MoEमुक्त स्रोत
(medium)
(none)
सारांश
Step 3.5 Flash AI BENCHY पर 1.9 स्कोर करता है और #401 पर है। इसकी reliability 10.0, pass rate 26.1%, कुल लागत $0.020, और औसत response time 39.03s है।
Step 3.5 Flash को अलग क्या बनाता है: यह एंटी-एआई ट्रिक्स में सबसे अलग दिखता है, जहाँ इसकी रैंक #1 है; जबकि डेटा पार्सिंग और निष्कर्षण इसकी सबसे कमजोर जगह है, जहाँ यह #11 पर है। यह असामान्य रूप से अधिक reasoning tokens इस्तेमाल करता है, जिससे धीमे या महंगे runs समझ में आ सकते हैं।
संग्रहीत मॉडल: इस मॉडल को अब अपडेट नहीं किया जाएगा और नए परीक्षणों में टेस्ट नहीं किया जाएगा।
मॉडल विवरण
शोध की तारीख: 2026-08-12
- पैरामीटर
- 196B कुल (11B सक्रिय)
- आर्किटेक्चर
- MoE
- उपलब्धता
- मुक्त स्रोत
- लाइसेंस
- Apache-2.0
1.9
संगति
5.2
10.0
$0.020
कुल आउटपुट टोकन
64,795
कुल इनपुट टोकन
1,971
इनपुट कीमत
$0.100 / 1M
आउटपुट कीमत
$0.300 / 1M
कैश पढ़ने की कीमत
लागू नहीं
कैश लिखने की कीमत
लागू नहीं
कैश की कीमतें इनपुट टोकन पर लागू होती हैं। पढ़ने पर कैश किए गए प्रॉम्प्ट का दोबारा उपयोग होता है; लिखने पर वे सहेजे जाते हैं और अतिरिक्त लागत हो सकती है। आउटपुट टोकन पर आउटपुट की कीमत लागू होती है।
अस्थिर टेस्ट
0
अस्थिर टेस्ट में रनों के बीच मिले-जुले परिणाम रहे (कम से कम एक पास और एक फेल)।
Hamster playing table tennis
Prompt: Create a detailed SVG illustration of a hamster playing table tennis.
रन इतिहास
| परीक्षण किया गया | स्कोर | विश्वसनीयता | सही परीक्षण | कुल लागत | तुलना करें |
|---|---|---|---|---|---|
| 2026-05-08 15:30 नया टेस्ट जोड़ा गया | 1.9 | 10.0 | $0.020 | वर्तमान रन | |
| 2026-04-11 01:44 पहला दर्ज रन | 3.0 | लागू नहीं | $0.000 | तुलना करें |
इस रन में अलग बेंचमार्क सूट इस्तेमाल हुआ था। ऐतिहासिक बदलाव पढ़ते समय सूट बदलाव को ध्यान में रखें।
रन तुलना
| रन | बेंचमार्क कवरेज | स्कोर | संगति | विश्वसनीयता | सही परीक्षण | अस्थिर टेस्ट | कुल आउटपुट टोकन | कुल इनपुट टोकन | कुल लागत | प्रतिक्रिया समय (औसत) |
|---|---|---|---|---|---|---|---|---|---|---|
| 2026-05-08 15:30 · वर्तमान रन | 36/69 प्रयास | 1.9 | 5.2 | 10.0 | 6/12 | 0 | 64,795 | 1,971 | $0.020 | 39.03s |
| 2026-04-11 01:44 · पहला दर्ज रन | 3/3 प्रयास | 3.0 | 10.0 | लागू नहीं | 0/1 | 0 | 0 | 0 | $0.000 | 0ms |
| अंतर | — | -1.1 | -4.8 | +6 | 0 | +64795 | +1971 | +$0.020 | +39032ms |
बेंचमार्क कवरेज अलग है: 36/69 प्रयास (लक्ष्य: प्रति टेस्ट 3 दोहराव) बनाम 3/3 प्रयास (लक्ष्य: प्रति टेस्ट 3 दोहराव)। कुल और दोहराव-संवेदनशील मेट्रिक सीधे तुलना योग्य नहीं हैं।
इन दो रन में अलग-अलग बेंचमार्क सूट इस्तेमाल हुए थे, इसलिए अंतर मॉडल बदलाव और सूट बदलाव दोनों को दर्शाते हैं।
कीमत का इतिहास
OpenRouter से इस मॉडल का ऐतिहासिक मूल्य डेटा।
| तारीख | इनपुट कीमत | आउटपुट कीमत | कैश पढ़ने की कीमत | कैश लिखने की कीमत |
|---|---|---|---|---|
| 2026-06-04 15:40 | $0.090 / 1M | $0.300 / 1M | लागू नहीं | लागू नहीं |
| 2026-06-30 21:25 | $0.100 / 1M | $0.300 / 1M | लागू नहीं | लागू नहीं |
चार्ट
पहले मॉडल चुनें, फिर दूसरा मॉडल क्लिक करके साइड-बाय-साइड पेज खोलें।
स्कोर के अनुसार शीर्ष मॉडल
स्कोर vs कुल लागत
प्रतिक्रिया समय (औसत)
स्कोर vs प्रतिक्रिया समय (औसत)
कुल आउटपुट टोकन
स्कोर vs कुल आउटपुट टोकन
श्रेणी विवरण
| श्रेणी | स्कोर | संगति | सही परीक्षण |
|---|---|---|---|
| स्वायत्त एजेंट कार्य | 0.0 | 0.0 | |
| एंटी-एआई ट्रिक्स | 10.0 | 10.0 | |
| कोडिंग | 1.0 | 3.3 | |
| संयुक्त | 1.5 | 5.0 | |
| डेटा पार्सिंग और निष्कर्षण | 1.5 | 5.0 | |
| डोमेन-विशिष्ट | 3.3 | 3.3 | |
| Samanya Buddhimatta | 4.0 | 10.0 | |
| निर्देश पालन | 5.0 | 5.0 | |
| पहेली समाधान | 0.0 | 0.0 | |
| टूल कॉलिंग | 3.0 | 10.0 | |
| सामान्य ज्ञान | 3.0 | 10.0 |