#60 Step 3.7 Flash
low
अवैध SVG
- खर्च
- $0.004
- वेळ
- 25.3s
- टोकन्स
- 3,072 tok
Stepfun
प्रकाशन: 2026-05-29
चाचणी तारीख: 2026-05-29 11:49
stepfun/step-3.7-flash::low
सारांश
Step 3.7 Flash AI BENCHY वर 7.4 स्कोर करते आणि #60 वर आहे. याची reliability 10.0, pass rate 68.3%, एकूण खर्च $0.336, आणि सरासरी response time 16.06s आहे.
Step 3.7 Flash खास का आहे: हे कोडिंग मध्ये सर्वाधिक उठून दिसते, जिथे त्याचा rank #1 आहे; तर Samanya Buddhimatta हा सर्वात कमकुवत भाग आहे, rank #15.
7.4
सुसंगतता
8.7
10.0
$0.336
एकूण आउटपुट टोकन्स
285,209
एकूण इनपुट टोकन्स
0
इनपुट किंमत
$0.200 / 1M
आउटपुट किंमत
$1.150 / 1M
अस्थिर चाचण्या
3
अस्थिर चाचण्यांत रन्समध्ये मिश्र निकाल असतात (किमान एक पास आणि एक फेल).
जनरेशन शोकेस
Hamster playing table tennis
Prompt: Create a detailed SVG illustration of a hamster playing table tennis.
रन इतिहास
| चाचणी तारीख | स्कोअर | विश्वसनीयता | बरोबर चाचण्या | एकूण खर्च | तुलना करा |
|---|---|---|---|---|---|
| 2026-06-04 13:49 नवीन चाचणी जोडली | 7.3 | 10.0 | $0.341 | तुलना करा | |
| 2026-05-29 11:49 पहिला रन | 7.4 | 10.0 | $0.336 | सध्याची रन |
रन तुलना
| रन | स्कोअर | सुसंगतता | विश्वसनीयता | बरोबर चाचण्या | अस्थिर चाचण्या | एकूण आउटपुट टोकन्स | एकूण इनपुट टोकन्स | एकूण खर्च | प्रतिसाद वेळ (सरासरी) |
|---|---|---|---|---|---|---|---|---|---|
| 2026-05-29 11:49 · पहिला रन | 7.4 | 8.7 | 10.0 | 12/20 | 3 | 285,209 | 0 | $0.336 | 16.06s |
| 2026-06-04 13:49 · नवीन चाचणी जोडली | 7.3 | 8.4 | 10.0 | 12/21 | 4 | 289,325 | 40,101 | $0.341 | 15.74s |
| फरक | +0.1 | +0.3 | 0.0 | 0 | -1 | -4116 | -40101 | -$0.006 | +311ms |
या दोन रनमध्ये वेगवेगळे बेंचमार्क सूट वापरले गेले, त्यामुळे फरकांमध्ये मॉडेलमधील आणि सूटमधील दोन्ही बदल दिसतात.
चार्ट्स
पहिले मॉडेल निवडा, नंतर दुसरे मॉडेल क्लिक करून बाजू-बाजूची तुलना पेज उघडा.
स्कोअरनुसार शीर्ष मॉडेल्स
स्कोअर vs एकूण खर्च
प्रतिसाद वेळ (सरासरी)
स्कोअर vs प्रतिसाद वेळ (सरासरी)
एकूण आउटपुट टोकन्स
स्कोअर vs एकूण आउटपुट टोकन्स
झटपट तुलना
Step 3.7 FlashlowvsGrok 4.3mediumStep 3.7 FlashlowvsQwen3.5-122B-A10BmediumStep 3.7 FlashlowvsMiniMax M3mediumStep 3.7 FlashlowvsKimi K2.6mediumमोफत उपलब्धStep 3.7 FlashlowvsDeepSeek V4 ProhighStep 3.7 FlashlowvsGemini 3.5 FlashhighStep 3.7 FlashlowvsGemini 3 Flash PreviewmediumStep 3.7 FlashlowvsNemotron 3 Ultra 550b A55bmediumमोफत उपलब्धStep 3.7 FlashlowvsGPT-5.5low
श्रेणीवार तपशील
| श्रेणी | स्कोअर | सुसंगतता | बरोबर चाचण्या |
|---|---|---|---|
| अँटी-एआय युक्त्या | 8.7 | 7.9 | |
| कोडिंग | 10.0 | 10.0 | |
| संयुक्त | 10.0 | 10.0 | |
| डेटा पार्सिंग आणि निष्कर्षण | 7.3 | 5.8 | |
| डोमेन-विशिष्ट | 5.3 | 7.2 | |
| Samanya Buddhimatta | 3.4 | 9.3 | |
| सूचनांचे पालन | 9.8 | 10.0 | |
| कोडी सोडवणे | 5.5 | 9.9 | |
| टूल कॉलिंग | 10.0 | 10.0 | |
| सामान्य ज्ञान | 3.0 | 10.0 |