#122 Step 3.5 Flash
medium- खर्च
- $0.008
- वेळ
- 277.1s
- टोकन्स
- 23,695 tok
सारांश
Step 3.5 Flash AI BENCHY वर 6.0 स्कोर करते आणि #122 वर आहे. याची reliability 9.2, pass rate 51.5%, एकूण खर्च $0.108, आणि सरासरी response time 174.22s आहे.
Step 3.5 Flash खास का आहे: हे डेटा पार्सिंग आणि निष्कर्षण मध्ये सर्वाधिक उठून दिसते, जिथे त्याचा rank #1 आहे; तर कोडिंग हा सर्वात कमकुवत भाग आहे, rank #18.
संशोधन दिनांक: 2026-08-12
6.0
सुसंगतता
9.0
9.2
एकूण आउटपुट टोकन्स
402,554
एकूण इनपुट टोकन्स
65,707
इनपुट किंमत
$0.100 / 1M
आउटपुट किंमत
$0.300 / 1M
अस्थिर चाचण्या
1
अस्थिर चाचण्यांत रन्समध्ये मिश्र निकाल असतात (किमान एक पास आणि एक फेल).
Prompt: Create a detailed SVG illustration of a hamster playing table tennis.
रन इतिहास
| चाचणी तारीख | स्कोअर | विश्वसनीयता | बरोबर चाचण्या | एकूण खर्च | तुलना करा |
|---|---|---|---|---|---|
| 2026-08-14 02:50 पुन्हा चाचणी | 5.9 | 10.0 | $0.132 ↑ | तुलना करा | |
| 2026-07-16 23:25 नवीन चाचणी जोडली | 6.0 | 9.2 | $0.108 ↑ | सध्याची रन | |
| 2026-06-04 14:12 नवीन चाचणी जोडली | 7.2 | 8.9 | $0.070 ↑ | तुलना करा | |
| 2026-05-22 00:30 सूट बदलला | 7.4 | 9.3 | $0.015 | तुलना करा | |
| 2026-05-08 15:30 सूट बदलला | 7.6 | 10.0 | $0.011 | तुलना करा | |
| 2026-04-11 00:35 पहिली नोंदलेली रन | 7.9 | लागू नाही | $0.000 | तुलना करा |
या रनमध्ये वेगळा बेंचमार्क सूट वापरला गेला. ऐतिहासिक बदल वाचताना सूटमधील बदल लक्षात घ्या.
रन तुलना
| रन | बेंचमार्क कव्हरेज | स्कोअर | सुसंगतता | विश्वसनीयता | बरोबर चाचण्या | अस्थिर चाचण्या | एकूण आउटपुट टोकन्स | एकूण इनपुट टोकन्स | एकूण खर्च | प्रतिसाद वेळ (सरासरी) |
|---|---|---|---|---|---|---|---|---|---|---|
| 2026-07-16 23:25 · नवीन चाचणी जोडली | 63/63 प्रयत्न | 6.0 | 9.0 | 9.2 | 11/21 | 1 | 402,554 | 65,707 | $0.108 | 174.22s |
| 2026-05-08 15:30 · सूट बदलला | 54/54 प्रयत्न | 7.6 | 9.2 | 10.0 | 11/18 | 2 | 251,708 | 0 | $0.011 | 41.66s |
| फरक | — | -1.6 | -0.2 | -0.8 | 0 | -1 | +150846 | +65707 | +$0.097 | +132562ms |
बेंचमार्क कव्हरेज वेगळे आहे: 63/63 प्रयत्न (लक्ष्य: प्रत्येक चाचणीसाठी 3 पुनरावृत्ती) विरुद्ध 54/54 प्रयत्न (लक्ष्य: प्रत्येक चाचणीसाठी 3 पुनरावृत्ती). एकूण मूल्ये आणि पुनरावृत्तीवर अवलंबून मेट्रिक्स थेट तुलना करता येत नाहीत.
या दोन रनमध्ये वेगवेगळे बेंचमार्क सूट वापरले गेले, त्यामुळे फरकांमध्ये मॉडेलमधील आणि सूटमधील दोन्ही बदल दिसतात.
किंमत इतिहास
OpenRouter मधील या मॉडेलचा ऐतिहासिक किंमत डेटा.
| तारीख | इनपुट किंमत | आउटपुट किंमत |
|---|---|---|
| 2026-06-04 15:40 | $0.090 / 1M | $0.300 / 1M |
| 2026-06-30 21:25 | $0.100 / 1M | $0.300 / 1M |
पहिले मॉडेल निवडा, नंतर दुसरे मॉडेल क्लिक करून बाजू-बाजूची तुलना पेज उघडा.
| श्रेणी | स्कोअर | सुसंगतता | बरोबर चाचण्या |
|---|---|---|---|
| अँटी-एआय युक्त्या | 10.0 | 10.0 | |
| कोडिंग | 2.4 | 5.2 | |
| संयुक्त | 6.5 | 10.0 | |
| डेटा पार्सिंग आणि निष्कर्षण | 10.0 | 10.0 | |
| डोमेन-विशिष्ट | 5.3 | 7.2 | |
| Samanya Buddhimatta | 5.5 | 10.0 | |
| सूचनांचे पालन | 8.3 | 10.0 | |
| कोडी सोडवणे | 5.3 | 10.0 | |
| टूल कॉलिंग | 10.0 | 10.0 | |
| सामान्य ज्ञान | 3.0 | 10.0 |