#108 Step 3.5 Flash
none- लागत
- $0.005
- समय
- 156.3s
- टोकन
- 13,887 tok
Stepfun
रिलीज़: 2026-02-01
परीक्षण किया गया: 2026-04-11 01:44
stepfun/step-3.5-flash::none
196B कुल (11B सक्रिय)MoEमुक्त स्रोत
(medium)
(none)
सारांश
Step 3.5 Flash AI BENCHY पर 3.0 स्कोर करता है और #108 पर है। इसकी reliability लागू नहीं, pass rate 0.0%, कुल लागत $0.000, और औसत response time 0ms है।
Step 3.5 Flash को अलग क्या बनाता है: इस score range के लिए इसकी कुल benchmark लागत असामान्य रूप से कम है। यह समान मॉडलों की तुलना में काफ़ी तेज है।
संग्रहीत मॉडल: इस मॉडल को अब अपडेट नहीं किया जाएगा और नए परीक्षणों में टेस्ट नहीं किया जाएगा।
मॉडल विवरण
शोध की तारीख: 2026-08-12
- पैरामीटर
- 196B कुल (11B सक्रिय)
- आर्किटेक्चर
- MoE
- उपलब्धता
- मुक्त स्रोत
- लाइसेंस
- Apache-2.0
3.0
संगति
10.0
लागू नहीं
$0.000
कुल आउटपुट टोकन
0
कुल इनपुट टोकन
0
इनपुट कीमत
$0.100 / 1M
आउटपुट कीमत
$0.300 / 1M
कैश पढ़ने की कीमत
लागू नहीं
कैश लिखने की कीमत
लागू नहीं
कैश की कीमतें इनपुट टोकन पर लागू होती हैं। पढ़ने पर कैश किए गए प्रॉम्प्ट का दोबारा उपयोग होता है; लिखने पर वे सहेजे जाते हैं और अतिरिक्त लागत हो सकती है। आउटपुट टोकन पर आउटपुट की कीमत लागू होती है।
अस्थिर टेस्ट
0
अस्थिर टेस्ट में रनों के बीच मिले-जुले परिणाम रहे (कम से कम एक पास और एक फेल)।
Hamster playing table tennis
Prompt: Create a detailed SVG illustration of a hamster playing table tennis.
रन इतिहास
| परीक्षण किया गया | स्कोर | विश्वसनीयता | सही परीक्षण | कुल लागत | तुलना करें |
|---|---|---|---|---|---|
| 2026-05-08 15:30 नया टेस्ट जोड़ा गया | 2.3 | 10.0 | $0.020 | तुलना करें | |
| 2026-04-11 01:44 पहला दर्ज रन | 3.0 | लागू नहीं | $0.000 | वर्तमान रन |
रन तुलना
| रन | बेंचमार्क कवरेज | स्कोर | संगति | विश्वसनीयता | सही परीक्षण | अस्थिर टेस्ट | कुल आउटपुट टोकन | कुल इनपुट टोकन | कुल लागत | प्रतिक्रिया समय (औसत) |
|---|---|---|---|---|---|---|---|---|---|---|
| 2026-04-11 01:44 · पहला दर्ज रन | 3/3 प्रयास | 3.0 | 10.0 | लागू नहीं | 0/1 | 0 | 0 | 0 | $0.000 | 0ms |
| 2026-05-08 15:30 · नया टेस्ट जोड़ा गया | 36/36 प्रयास | 2.3 | 5.5 | 10.0 | 6/12 | 0 | 64,795 | 1,971 | $0.020 | 39.03s |
| अंतर | — | +0.7 | +4.5 | -6 | 0 | -64795 | -1971 | -$0.020 | -39032ms |
बेंचमार्क कवरेज अलग है: 3/3 प्रयास (लक्ष्य: प्रति टेस्ट 3 दोहराव) बनाम 36/36 प्रयास (लक्ष्य: प्रति टेस्ट 3 दोहराव)। कुल और दोहराव-संवेदनशील मेट्रिक सीधे तुलना योग्य नहीं हैं।
इन दो रन में अलग-अलग बेंचमार्क सूट इस्तेमाल हुए थे, इसलिए अंतर मॉडल बदलाव और सूट बदलाव दोनों को दर्शाते हैं।
चार्ट
पहले मॉडल चुनें, फिर दूसरा मॉडल क्लिक करके साइड-बाय-साइड पेज खोलें।
स्कोर के अनुसार शीर्ष मॉडल
स्कोर vs कुल लागत
प्रतिक्रिया समय (औसत)
स्कोर vs प्रतिक्रिया समय (औसत)
कुल आउटपुट टोकन
स्कोर vs कुल आउटपुट टोकन
श्रेणी विवरण
| श्रेणी | स्कोर | संगति | सही परीक्षण |
|---|---|---|---|
| कोडिंग | 3.0 | 10.0 |