- स्कोअर
- 8.6 (-0.09 गुण)
- एकूण खर्च (सध्याची किंमत)
- $0.061 · 97.0% स्वस्त
- प्रतिसाद वेळ (सरासरी)
- 7.51s · 96.0% वेगवान
सारांश
Seed 2.1 Turbo AI BENCHY वर 8.7 स्कोर करते आणि #83 वर आहे. याची reliability 10.0, pass rate 79.7%, एकूण खर्च $2.042, आणि सरासरी response time 189.13s आहे.
Seed 2.1 Turbo खास का आहे: हे कोडी सोडवणे मध्ये सर्वाधिक उठून दिसते, जिथे त्याचा rank #4 आहे; तर डोमेन-विशिष्ट हा सर्वात कमकुवत भाग आहे, rank #15. हे असामान्यपणे जास्त reasoning tokens वापरते, ज्यामुळे runs हळू किंवा महाग होऊ शकतात.
शिफारस केलेले पर्याय
त्याऐवजी यापैकी एक मॉडेल निवडण्याची शिफारस करतो:
- स्कोअर
- 9.4 (+0.70 गुण)
- एकूण खर्च (सध्याची किंमत)
- $0.183 · 91.1% स्वस्त
- प्रतिसाद वेळ (सरासरी)
- 6.24s · 96.7% वेगवान
- स्कोअर
- 9.6 (+0.89 गुण)
- एकूण खर्च (सध्याची किंमत)
- $0.460 · 77.5% स्वस्त
- प्रतिसाद वेळ (सरासरी)
- 7.15s · 96.2% वेगवान
मॉडेलची माहिती
संशोधन दिनांक: 2026-08-12
- पॅरामीटर्स
- ~200B एकूण (~20B सक्रिय)
- आर्किटेक्चर
- MoE
- उपलब्धता
- बंद स्रोत
- परवाना
- -
सार्वजनिक पुराव्यावर आधारित सर्वोत्तम अंदाज; प्रदात्याने सर्व मूल्ये जाहीर केलेली नाहीत.
8.7
सुसंगतता
8.2
10.0
$2.042
एकूण आउटपुट टोकन्स
769,582
एकूण इनपुट टोकन्स
234,572
इनपुट किंमत
$0.500 / 1M
आउटपुट किंमत
$2.500 / 1M
कॅश वाचण्याची किंमत
लागू नाही
कॅश लिहिण्याची किंमत
लागू नाही
कॅशच्या किमती इनपुट टोकनला लागू होतात. वाचताना साठवलेले प्रॉम्प्ट पुन्हा वापरले जातात; लिहिताना ते साठवले जातात आणि अधिक खर्च होऊ शकतो. आउटपुट टोकनला आउटपुट किंमत लागू होते.
अस्थिर चाचण्या
5
अस्थिर चाचण्यांत रन्समध्ये मिश्र निकाल असतात (किमान एक पास आणि एक फेल).
Hamster playing table tennis
Prompt: Create a detailed SVG illustration of a hamster playing table tennis.
#83 Seed 2.1 Turbo
medium- खर्च
- $0.099
- वेळ
- 583.9s
- टोकन्स
- 39,514 tok
रन इतिहास
| चाचणी तारीख | स्कोअर | विश्वसनीयता | बरोबर चाचण्या | एकूण खर्च | तुलना करा |
|---|---|---|---|---|---|
| 2026-10-01 04:03 पुन्हा चाचणी | 8.7 | 10.0 | $2.042 | सध्याची रन | |
| 2026-08-12 22:48 पहिला रन | 8.4 | 9.9 | $1.969 | तुलना करा |
या रनमध्ये वेगळा बेंचमार्क सूट वापरला गेला. ऐतिहासिक बदल वाचताना सूटमधील बदल लक्षात घ्या.
रन तुलना
| रन | बेंचमार्क कव्हरेज | स्कोअर | सुसंगतता | विश्वसनीयता | बरोबर चाचण्या | अस्थिर चाचण्या | एकूण आउटपुट टोकन्स | एकूण इनपुट टोकन्स | एकूण खर्च | प्रतिसाद वेळ (सरासरी) |
|---|---|---|---|---|---|---|---|---|---|---|
| 2026-10-01 04:03 · सध्याची रन | 69/69 प्रयत्न | 8.7 | 8.2 | 10.0 | 16/23 | 5 | 769,582 | 234,572 | $2.042 | 189.13s |
| 2026-08-12 22:48 · पहिला रन | 66/66 प्रयत्न | 8.4 | 8.2 | 9.9 | 15/22 | 5 | 766,465 | 104,424 | $1.969 | 197.04s |
| फरक | — | +0.3 | 0.0 | +0.1 | +1 | 0 | +3117 | +130148 | +$0.073 | -7909ms |
बेंचमार्क कव्हरेज वेगळे आहे: 69/69 प्रयत्न (लक्ष्य: प्रत्येक चाचणीसाठी 3 पुनरावृत्ती) विरुद्ध 66/66 प्रयत्न (लक्ष्य: प्रत्येक चाचणीसाठी 3 पुनरावृत्ती). एकूण मूल्ये आणि पुनरावृत्तीवर अवलंबून मेट्रिक्स थेट तुलना करता येत नाहीत.
या दोन रनमध्ये वेगवेगळे बेंचमार्क सूट वापरले गेले, त्यामुळे फरकांमध्ये मॉडेलमधील आणि सूटमधील दोन्ही बदल दिसतात.
चार्ट्स
पहिले मॉडेल निवडा, नंतर दुसरे मॉडेल क्लिक करून बाजू-बाजूची तुलना पेज उघडा.
स्कोअरनुसार शीर्ष मॉडेल्स
स्कोअर vs एकूण खर्च
प्रतिसाद वेळ (सरासरी)
स्कोअर vs प्रतिसाद वेळ (सरासरी)
एकूण आउटपुट टोकन्स
स्कोअर vs एकूण आउटपुट टोकन्स
झटपट तुलना
श्रेणीवार तपशील
| श्रेणी | स्कोअर | सुसंगतता | बरोबर चाचण्या |
|---|---|---|---|
| स्वायत्त एजंट कार्ये | 10.0 | 10.0 | |
| अँटी-एआय युक्त्या | 8.2 | 7.9 | |
| कोडिंग | 8.2 | 7.2 | |
| संयुक्त | 10.0 | 10.0 | |
| डेटा पार्सिंग आणि निष्कर्षण | 10.0 | 10.0 | |
| डोमेन-विशिष्ट | 2.9 | 4.4 | |
| Samanya Buddhimatta | 6.1 | 3.1 | |
| सूचनांचे पालन | 9.8 | 10.0 | |
| कोडी सोडवणे | 9.9 | 10.0 | |
| टूल कॉलिंग | 10.0 | 10.0 | |
| सामान्य ज्ञान | 3.0 | 10.0 |