#62 Step 3.5 Flash
medium- खर्च
- $0.008
- वेळ
- 277.1s
- टोकन्स
- 23,695 tok
सारांश
Step 3.5 Flash AI BENCHY वर 7.2 स्कोर करते आणि #62 वर आहे. याची reliability 8.9, pass rate 58.3%, एकूण खर्च $0.070, आणि सरासरी response time 72.53s आहे.
Step 3.5 Flash खास का आहे: हे संयुक्त मध्ये सर्वाधिक उठून दिसते, जिथे त्याचा rank #1 आहे; तर कोडिंग हा सर्वात कमकुवत भाग आहे, rank #18. या score range साठी एकूण benchmark खर्च असामान्यपणे कमी आहे.
संशोधन दिनांक: 2026-08-12
7.2
सुसंगतता
9.1
8.9
एकूण आउटपुट टोकन्स
287,560
एकूण इनपुट टोकन्स
34,431
इनपुट किंमत
$0.090 / 1M
आउटपुट किंमत
$0.300 / 1M
अस्थिर चाचण्या
2
अस्थिर चाचण्यांत रन्समध्ये मिश्र निकाल असतात (किमान एक पास आणि एक फेल).
Prompt: Create a detailed SVG illustration of a hamster playing table tennis.
रन इतिहास
| चाचणी तारीख | स्कोअर | विश्वसनीयता | बरोबर चाचण्या | एकूण खर्च | तुलना करा |
|---|---|---|---|---|---|
| 2026-08-14 02:50 पुन्हा चाचणी | 5.9 | 10.0 | $0.132 ↑ | तुलना करा | |
| 2026-07-16 23:25 नवीन चाचणी जोडली | 6.0 | 9.2 | $0.108 ↑ | तुलना करा | |
| 2026-06-04 14:12 नवीन चाचणी जोडली | 7.2 | 8.9 | $0.070 ↑ | सध्याची रन | |
| 2026-05-22 00:30 सूट बदलला | 7.4 | 9.3 | $0.015 | तुलना करा | |
| 2026-05-08 15:30 सूट बदलला | 7.6 | 10.0 | $0.011 | तुलना करा | |
| 2026-04-11 00:35 पहिली नोंदलेली रन | 7.9 | लागू नाही | $0.000 | तुलना करा |
या रनमध्ये वेगळा बेंचमार्क सूट वापरला गेला. ऐतिहासिक बदल वाचताना सूटमधील बदल लक्षात घ्या.
रन तुलना
| रन | बेंचमार्क कव्हरेज | स्कोअर | सुसंगतता | विश्वसनीयता | बरोबर चाचण्या | अस्थिर चाचण्या | एकूण आउटपुट टोकन्स | एकूण इनपुट टोकन्स | एकूण खर्च | प्रतिसाद वेळ (सरासरी) |
|---|---|---|---|---|---|---|---|---|---|---|
| 2026-06-04 14:12 · नवीन चाचणी जोडली | 60/60 प्रयत्न | 7.2 | 9.1 | 8.9 | 11/20 | 2 | 287,560 | 34,431 | $0.070 | 72.53s |
| 2026-08-14 02:50 · पुन्हा चाचणी | 63/63 प्रयत्न | 5.9 | 8.6 | 10.0 | 10/21 | 2 | 568,536 | 65,716 | $0.132 | 191.63s |
| फरक | — | +1.2 | +0.5 | -1.1 | +1 | 0 | -280976 | -31285 | -$0.063 | -119095ms |
बेंचमार्क कव्हरेज वेगळे आहे: 60/60 प्रयत्न (लक्ष्य: प्रत्येक चाचणीसाठी 3 पुनरावृत्ती) विरुद्ध 63/63 प्रयत्न (लक्ष्य: प्रत्येक चाचणीसाठी 3 पुनरावृत्ती). एकूण मूल्ये आणि पुनरावृत्तीवर अवलंबून मेट्रिक्स थेट तुलना करता येत नाहीत.
या दोन रनमध्ये वेगवेगळे बेंचमार्क सूट वापरले गेले, त्यामुळे फरकांमध्ये मॉडेलमधील आणि सूटमधील दोन्ही बदल दिसतात.
किंमत इतिहास
OpenRouter मधील या मॉडेलचा ऐतिहासिक किंमत डेटा.
| तारीख | इनपुट किंमत | आउटपुट किंमत |
|---|---|---|
| 2026-06-04 14:42 | $0.090 / 1M | $0.300 / 1M |
पहिले मॉडेल निवडा, नंतर दुसरे मॉडेल क्लिक करून बाजू-बाजूची तुलना पेज उघडा.
| श्रेणी | स्कोअर | सुसंगतता | बरोबर चाचण्या |
|---|---|---|---|
| अँटी-एआय युक्त्या | 10.0 | 10.0 | |
| कोडिंग | 3.1 | 4.7 | |
| संयुक्त | 10.0 | 10.0 | |
| डेटा पार्सिंग आणि निष्कर्षण | 10.0 | 10.0 | |
| डोमेन-विशिष्ट | 5.3 | 7.2 | |
| Samanya Buddhimatta | 5.5 | 10.0 | |
| सूचनांचे पालन | 8.3 | 10.0 | |
| कोडी सोडवणे | 5.3 | 10.0 | |
| टूल कॉलिंग | 10.0 | 10.0 | |
| सामान्य ज्ञान | 3.0 | 10.0 |