#243 Claude Sonnet 4.6
none- खर्च
- $0.038
- वेळ
- 27.3s
- टोकन्स
- 2,598 tok
सारांश
Claude Sonnet 4.6 AI BENCHY वर 6.0 स्कोर करते आणि #243 वर आहे. याची reliability 10.0, pass rate 55.1%, एकूण खर्च $0.661, आणि सरासरी response time 7.67s आहे.
Claude Sonnet 4.6 खास का आहे: हे संयुक्त मध्ये सर्वाधिक उठून दिसते, जिथे त्याचा rank #1 आहे; तर स्वायत्त एजंट कार्ये हा सर्वात कमकुवत भाग आहे, rank #17.
संग्रहित मॉडेल: हे मॉडेल आता अपडेट केले जाणार नाही आणि नवीन चाचण्यांवर तपासले जाणार नाही.
संशोधन दिनांक: 2026-08-12
सार्वजनिक पुराव्यावर आधारित सर्वोत्तम अंदाज; प्रदात्याने सर्व मूल्ये जाहीर केलेली नाहीत.
6.0
सुसंगतता
9.3
10.0
$0.661
एकूण आउटपुट टोकन्स
19,362
एकूण इनपुट टोकन्स
123,273
इनपुट किंमत
$3.000 / 1M
आउटपुट किंमत
$15.000 / 1M
कॅश वाचण्याची किंमत
$0.300 / 1M
कॅश लिहिण्याची किंमत
$3.750 / 1M
कॅशच्या किमती इनपुट टोकनला लागू होतात. वाचताना साठवलेले प्रॉम्प्ट पुन्हा वापरले जातात; लिहिताना ते साठवले जातात आणि अधिक खर्च होऊ शकतो. आउटपुट टोकनला आउटपुट किंमत लागू होते.
अस्थिर चाचण्या
1
अस्थिर चाचण्यांत रन्समध्ये मिश्र निकाल असतात (किमान एक पास आणि एक फेल).
Prompt: Create a detailed SVG illustration of a hamster playing table tennis.
रन इतिहास
| चाचणी तारीख | स्कोअर | विश्वसनीयता | बरोबर चाचण्या | एकूण खर्च | तुलना करा |
|---|---|---|---|---|---|
| 2026-08-14 02:00 पुन्हा चाचणी | 6.0 | 10.0 | $0.661 | सध्याची रन | |
| 2026-07-16 22:21 नवीन चाचणी जोडली | 7.3 | 10.0 | $0.661 | तुलना करा | |
| 2026-06-04 13:40 नवीन चाचणी जोडली | 6.8 | 10.0 | $0.316 | तुलना करा | |
| 2026-05-22 00:12 सूट बदलला | 7.0 | 10.0 | $0.306 | तुलना करा | |
| 2026-04-11 01:44 पहिली नोंदलेली रन | 7.4 | लागू नाही | $0.262 | तुलना करा |
या रनमध्ये वेगळा बेंचमार्क सूट वापरला गेला. ऐतिहासिक बदल वाचताना सूटमधील बदल लक्षात घ्या.
रन तुलना
| रन | बेंचमार्क कव्हरेज | स्कोअर | सुसंगतता | विश्वसनीयता | बरोबर चाचण्या | अस्थिर चाचण्या | एकूण आउटपुट टोकन्स | एकूण इनपुट टोकन्स | एकूण खर्च | प्रतिसाद वेळ (सरासरी) |
|---|---|---|---|---|---|---|---|---|---|---|
| 2026-08-14 02:00 · सध्याची रन | 66/69 प्रयत्न | 6.0 | 9.3 | 10.0 | 12/22 | 1 | 19,362 | 123,273 | $0.661 | 7.67s |
| 2026-04-11 01:44 · पहिली नोंदलेली रन | 54/54 प्रयत्न | 7.4 | 9.6 | लागू नाही | 11/18 | 1 | 7,433 | 0 | $0.262 | 4.98s |
| फरक | — | -1.4 | -0.3 | +1 | 0 | +11929 | +123273 | +$0.399 | +2689ms |
बेंचमार्क कव्हरेज वेगळे आहे: 66/69 प्रयत्न (लक्ष्य: प्रत्येक चाचणीसाठी 3 पुनरावृत्ती) विरुद्ध 54/54 प्रयत्न (लक्ष्य: प्रत्येक चाचणीसाठी 3 पुनरावृत्ती). एकूण मूल्ये आणि पुनरावृत्तीवर अवलंबून मेट्रिक्स थेट तुलना करता येत नाहीत.
या दोन रनमध्ये वेगवेगळे बेंचमार्क सूट वापरले गेले, त्यामुळे फरकांमध्ये मॉडेलमधील आणि सूटमधील दोन्ही बदल दिसतात.
किंमत इतिहास
OpenRouter मधील या मॉडेलचा ऐतिहासिक किंमत डेटा.
| तारीख | इनपुट किंमत | आउटपुट किंमत | कॅश वाचण्याची किंमत | कॅश लिहिण्याची किंमत |
|---|---|---|---|---|
| 2026-08-14 12:51 | $3.000 / 1M | $15.000 / 1M | लागू नाही | लागू नाही |
| 2026-10-01 18:33 | $3.000 / 1M | $15.000 / 1M | $0.300 / 1M | $3.750 / 1M |
पहिले मॉडेल निवडा, नंतर दुसरे मॉडेल क्लिक करून बाजू-बाजूची तुलना पेज उघडा.
| श्रेणी | स्कोअर | सुसंगतता | बरोबर चाचण्या |
|---|---|---|---|
| स्वायत्त एजंट कार्ये | 0.0 | 0.0 | |
| अँटी-एआय युक्त्या | 4.8 | 10.0 | |
| कोडिंग | 5.5 | 10.0 | |
| संयुक्त | 9.8 | 10.0 | |
| डेटा पार्सिंग आणि निष्कर्षण | 10.0 | 10.0 | |
| डोमेन-विशिष्ट | 7.7 | 10.0 | |
| Samanya Buddhimatta | 6.1 | 3.1 | |
| सूचनांचे पालन | 6.5 | 10.0 | |
| कोडी सोडवणे | 7.7 | 10.0 | |
| टूल कॉलिंग | 10.0 | 10.0 | |
| सामान्य ज्ञान | 3.0 | 10.0 |