#70 Qwen3.5-35B-A3B
medium- खर्च
- $0.009
- वेळ
- 71.4s
- टोकन्स
- 8,631 tok
सारांश
Qwen3.5-35B-A3B AI BENCHY वर 7.0 स्कोर करते आणि #70 वर आहे. याची reliability 6.7, pass rate 71.7%, एकूण खर्च $0.547, आणि सरासरी response time 69.43s आहे.
Qwen3.5-35B-A3B खास का आहे: हे असामान्यपणे जास्त reasoning tokens वापरते, ज्यामुळे runs हळू किंवा महाग होऊ शकतात.
संशोधन दिनांक: 2026-08-12
7.0
सुसंगतता
7.1
6.7
$0.547
एकूण आउटपुट टोकन्स
367,406
एकूण इनपुट टोकन्स
0
इनपुट किंमत
$0.139 / 1M
आउटपुट किंमत
$1.000 / 1M
अस्थिर चाचण्या
7
अस्थिर चाचण्यांत रन्समध्ये मिश्र निकाल असतात (किमान एक पास आणि एक फेल).
Prompt: Create a detailed SVG illustration of a hamster playing table tennis.
रन इतिहास
| चाचणी तारीख | स्कोअर | विश्वसनीयता | बरोबर चाचण्या | एकूण खर्च | तुलना करा |
|---|---|---|---|---|---|
| 2026-08-14 01:57 पुन्हा चाचणी | 6.1 | 10.0 | $1.623 ↑ | तुलना करा | |
| 2026-07-16 22:51 नवीन चाचणी जोडली | 6.2 | 10.0 | $0.837 ↓ | तुलना करा | |
| 2026-06-04 13:42 नवीन चाचणी जोडली | 7.1 | 8.9 | $0.401 ↓ | तुलना करा | |
| 2026-05-22 00:15 सूट बदलला | 7.0 | 6.7 | $0.547 | सध्याची रन | |
| 2026-04-11 01:44 पहिली नोंदलेली रन | 7.4 | लागू नाही | $0.398 | तुलना करा |
या रनमध्ये वेगळा बेंचमार्क सूट वापरला गेला. ऐतिहासिक बदल वाचताना सूटमधील बदल लक्षात घ्या.
रन तुलना
| रन | बेंचमार्क कव्हरेज | स्कोअर | सुसंगतता | विश्वसनीयता | बरोबर चाचण्या | अस्थिर चाचण्या | एकूण आउटपुट टोकन्स | एकूण इनपुट टोकन्स | एकूण खर्च | प्रतिसाद वेळ (सरासरी) |
|---|---|---|---|---|---|---|---|---|---|---|
| 2026-05-22 00:15 · सूट बदलला | 60/60 प्रयत्न | 7.0 | 7.1 | 6.7 | 10/20 | 7 | 367,406 | 0 | $0.547 | 69.43s |
| 2026-08-14 01:57 · पुन्हा चाचणी | 66/66 प्रयत्न | 6.1 | 7.6 | 10.0 | 11/22 | 6 | 893,463 | 130,450 | $1.623 | 110.84s |
| फरक | — | +0.9 | -0.5 | -3.3 | -1 | +1 | -526057 | -130450 | -$1.077 | -41417ms |
बेंचमार्क कव्हरेज वेगळे आहे: 60/60 प्रयत्न (लक्ष्य: प्रत्येक चाचणीसाठी 3 पुनरावृत्ती) विरुद्ध 66/66 प्रयत्न (लक्ष्य: प्रत्येक चाचणीसाठी 3 पुनरावृत्ती). एकूण मूल्ये आणि पुनरावृत्तीवर अवलंबून मेट्रिक्स थेट तुलना करता येत नाहीत.
या दोन रनमध्ये वेगवेगळे बेंचमार्क सूट वापरले गेले, त्यामुळे फरकांमध्ये मॉडेलमधील आणि सूटमधील दोन्ही बदल दिसतात.
पहिले मॉडेल निवडा, नंतर दुसरे मॉडेल क्लिक करून बाजू-बाजूची तुलना पेज उघडा.
| श्रेणी | स्कोअर | सुसंगतता | बरोबर चाचण्या |
|---|---|---|---|
| अँटी-एआय युक्त्या | 10.0 | 10.0 | |
| कोडिंग | 6.5 | 10.0 | |
| संयुक्त | 4.7 | 1.6 | |
| डेटा पार्सिंग आणि निष्कर्षण | 7.3 | 5.9 | |
| डोमेन-विशिष्ट | 4.1 | 4.4 | |
| Samanya Buddhimatta | 2.8 | 1.6 | |
| सूचनांचे पालन | 10.0 | 10.0 | |
| कोडी सोडवणे | 6.4 | 4.4 | |
| टूल कॉलिंग | 10.0 | 10.0 | |
| सामान्य ज्ञान | 3.0 | 10.0 |