#78 Qwen3.6 27B
none- खर्च
- $0.009
- वेळ
- 83.0s
- टोकन्स
- 4,549 tok
सारांश
Qwen3.6 27B AI BENCHY वर 5.9 स्कोर करते आणि #78 वर आहे. याची reliability 10.0, pass rate 54.6%, एकूण खर्च $0.027, आणि सरासरी response time 4.19s आहे.
Qwen3.6 27B खास का आहे: हे कोडिंग मध्ये सर्वाधिक उठून दिसते, जिथे त्याचा rank #1 आहे; तर अँटी-एआय युक्त्या हा सर्वात कमकुवत भाग आहे, rank #18. या score range साठी एकूण benchmark खर्च असामान्यपणे कमी आहे. समान मॉडेल्सच्या तुलनेत हे लक्षणीय वेगवान आहे.
संशोधन दिनांक: 2026-08-12
5.9
सुसंगतता
6.9
10.0
$0.027
एकूण आउटपुट टोकन्स
2,924
एकूण इनपुट टोकन्स
0
इनपुट किंमत
$0.500 / 1M
आउटपुट किंमत
$2.000 / 1M
अस्थिर चाचण्या
4
अस्थिर चाचण्यांत रन्समध्ये मिश्र निकाल असतात (किमान एक पास आणि एक फेल).
Prompt: Create a detailed SVG illustration of a hamster playing table tennis.
रन इतिहास
| चाचणी तारीख | स्कोअर | विश्वसनीयता | बरोबर चाचण्या | एकूण खर्च | तुलना करा |
|---|---|---|---|---|---|
| 2026-08-14 01:40 पुन्हा चाचणी | 5.5 | 10.0 | $0.116 ↑ | तुलना करा | |
| 2026-07-16 21:24 नवीन चाचणी जोडली | 5.5 | 10.0 | $0.087 ↑ | तुलना करा | |
| 2026-06-04 13:16 नवीन चाचणी जोडली | 5.6 | 10.0 | $0.028 ↓ | तुलना करा | |
| 2026-05-21 23:48 सूट बदलला | 5.8 | 10.0 | $0.032 | तुलना करा | |
| 2026-04-27 21:46 नवीन चाचणी जोडली | 6.0 | 10.0 | $0.031 | तुलना करा | |
| 2026-04-27 21:31 पहिली नोंदलेली रन | 5.9 | 10.0 | $0.027 | सध्याची रन |
रन तुलना
| रन | बेंचमार्क कव्हरेज | स्कोअर | सुसंगतता | विश्वसनीयता | बरोबर चाचण्या | अस्थिर चाचण्या | एकूण आउटपुट टोकन्स | एकूण इनपुट टोकन्स | एकूण खर्च | प्रतिसाद वेळ (सरासरी) |
|---|---|---|---|---|---|---|---|---|---|---|
| 2026-04-27 21:31 · पहिली नोंदलेली रन | 33/33 प्रयत्न | 5.9 | 6.9 | 10.0 | 4/11 | 4 | 2,924 | 0 | $0.027 | 4.19s |
| 2026-07-16 21:24 · नवीन चाचणी जोडली | 66/66 प्रयत्न | 5.5 | 7.6 | 10.0 | 7/22 | 6 | 16,155 | 95,796 | $0.087 | 10.65s |
| फरक | — | +0.4 | -0.7 | 0.0 | -3 | -2 | -13231 | -95796 | -$0.061 | -6468ms |
बेंचमार्क कव्हरेज वेगळे आहे: 33/33 प्रयत्न (लक्ष्य: प्रत्येक चाचणीसाठी 3 पुनरावृत्ती) विरुद्ध 66/66 प्रयत्न (लक्ष्य: प्रत्येक चाचणीसाठी 3 पुनरावृत्ती). एकूण मूल्ये आणि पुनरावृत्तीवर अवलंबून मेट्रिक्स थेट तुलना करता येत नाहीत.
या दोन रनमध्ये वेगवेगळे बेंचमार्क सूट वापरले गेले, त्यामुळे फरकांमध्ये मॉडेलमधील आणि सूटमधील दोन्ही बदल दिसतात.
पहिले मॉडेल निवडा, नंतर दुसरे मॉडेल क्लिक करून बाजू-बाजूची तुलना पेज उघडा.
| श्रेणी | स्कोअर | सुसंगतता | बरोबर चाचण्या |
|---|---|---|---|
| अँटी-एआय युक्त्या | 4.0 | 1.6 | |
| कोडिंग | 10.0 | 10.0 | |
| संयुक्त | 3.0 | 10.0 | |
| डेटा पार्सिंग आणि निष्कर्षण | 9.9 | 10.0 | |
| डोमेन-विशिष्ट | 6.5 | 10.0 | |
| Samanya Buddhimatta | 5.2 | 9.9 | |
| सूचनांचे पालन | 2.8 | 1.6 | |
| टूल कॉलिंग | 9.5 | 10.0 |