#72 Qwen3.5-27B
none- खर्च
- $0.007
- वेळ
- 42.9s
- टोकन्स
- 4,273 tok
Qwen
प्रकाशन: 2026-02-24
चाचणी तारीख: 2026-04-11 01:19
qwen/qwen3.5-27b::none
27Bघनमुक्त स्रोत
(medium)
(none)
सारांश
Qwen3.5-27B AI BENCHY वर 5.9 स्कोर करते आणि #72 वर आहे. याची reliability लागू नाही, pass rate 38.9%, एकूण खर्च $0.016, आणि सरासरी response time 1.74s आहे.
Qwen3.5-27B खास का आहे: हे कोडिंग मध्ये सर्वाधिक उठून दिसते, जिथे त्याचा rank #1 आहे; तर अँटी-एआय युक्त्या हा सर्वात कमकुवत भाग आहे, rank #17. या score range साठी एकूण benchmark खर्च असामान्यपणे कमी आहे. समान मॉडेल्सच्या तुलनेत हे लक्षणीय वेगवान आहे.
मॉडेलची माहिती
संशोधन दिनांक: 2026-08-12
- पॅरामीटर्स
- 27B
- आर्किटेक्चर
- घन
- उपलब्धता
- मुक्त स्रोत
- परवाना
- Apache-2.0
5.9
सुसंगतता
9.2
लागू नाही
$0.016
एकूण आउटपुट टोकन्स
3,545
एकूण इनपुट टोकन्स
0
इनपुट किंमत
$0.195 / 1M
आउटपुट किंमत
$1.560 / 1M
अस्थिर चाचण्या
2
अस्थिर चाचण्यांत रन्समध्ये मिश्र निकाल असतात (किमान एक पास आणि एक फेल).
Hamster playing table tennis
Prompt: Create a detailed SVG illustration of a hamster playing table tennis.
रन इतिहास
| चाचणी तारीख | स्कोअर | विश्वसनीयता | बरोबर चाचण्या | एकूण खर्च | तुलना करा |
|---|---|---|---|---|---|
| 2026-08-14 01:52 पुन्हा चाचणी | 6.6 | 10.0 | $0.058 ↓ | तुलना करा | |
| 2026-07-16 22:01 नवीन चाचणी जोडली | 6.5 | 10.0 | $0.058 ↓ | तुलना करा | |
| 2026-06-04 13:28 नवीन चाचणी जोडली | 5.7 | 10.0 | $0.015 ↓ | तुलना करा | |
| 2026-05-21 23:59 सूट बदलला | 5.8 | 10.0 | $0.017 | तुलना करा | |
| 2026-04-11 01:19 पहिली नोंदलेली रन | 5.9 | लागू नाही | $0.016 | सध्याची रन |
रन तुलना
| रन | बेंचमार्क कव्हरेज | स्कोअर | सुसंगतता | विश्वसनीयता | बरोबर चाचण्या | अस्थिर चाचण्या | एकूण आउटपुट टोकन्स | एकूण इनपुट टोकन्स | एकूण खर्च | प्रतिसाद वेळ (सरासरी) |
|---|---|---|---|---|---|---|---|---|---|---|
| 2026-04-11 01:19 · पहिली नोंदलेली रन | 54/54 प्रयत्न | 5.9 | 9.2 | लागू नाही | 6/18 | 2 | 3,545 | 0 | $0.016 | 1.74s |
| 2026-05-21 23:59 · सूट बदलला | 60/60 प्रयत्न | 5.8 | 9.3 | 10.0 | 7/20 | 2 | 3,582 | 0 | $0.017 | 1.67s |
| फरक | — | +0.1 | -0.1 | -1 | 0 | -37 | 0 | -$0.001 | +71ms |
बेंचमार्क कव्हरेज वेगळे आहे: 54/54 प्रयत्न (लक्ष्य: प्रत्येक चाचणीसाठी 3 पुनरावृत्ती) विरुद्ध 60/60 प्रयत्न (लक्ष्य: प्रत्येक चाचणीसाठी 3 पुनरावृत्ती). एकूण मूल्ये आणि पुनरावृत्तीवर अवलंबून मेट्रिक्स थेट तुलना करता येत नाहीत.
या दोन रनमध्ये वेगवेगळे बेंचमार्क सूट वापरले गेले, त्यामुळे फरकांमध्ये मॉडेलमधील आणि सूटमधील दोन्ही बदल दिसतात.
चार्ट्स
पहिले मॉडेल निवडा, नंतर दुसरे मॉडेल क्लिक करून बाजू-बाजूची तुलना पेज उघडा.
स्कोअरनुसार शीर्ष मॉडेल्स
स्कोअर vs एकूण खर्च
प्रतिसाद वेळ (सरासरी)
स्कोअर vs प्रतिसाद वेळ (सरासरी)
एकूण आउटपुट टोकन्स
स्कोअर vs एकूण आउटपुट टोकन्स
झटपट तुलना
Qwen3.5-27BnonevsGemini 3.5 Flash LitelowQwen3.5-27BnonevsGemini 3.1 Flash Lite PreviewlowQwen3.5-27BnonevsLongCat 2.0highQwen3.5-27BnonevsInkling SmallmediumQwen3.5-27BnonevsGemini 3.5 FlashminimalQwen3.5-27BnonevsGemini 3.1 Flash LitelowQwen3.5-27BnonevsLongCat 2.0lowQwen3.5-27BnonevsQwen3.6 35B A3BmediumQwen3.5-27BnonevsKAT-Coder-Pro V2.5noneQwen3.5-27BnonevsQwen3.5 Plus 2026-02-15none
श्रेणीवार तपशील
| श्रेणी | स्कोअर | सुसंगतता | बरोबर चाचण्या |
|---|---|---|---|
| अँटी-एआय युक्त्या | 4.8 | 10.0 | |
| कोडिंग | 10.0 | 10.0 | |
| संयुक्त | 2.8 | 1.6 | |
| डेटा पार्सिंग आणि निष्कर्षण | 10.0 | 10.0 | |
| डोमेन-विशिष्ट | 3.0 | 10.0 | |
| Samanya Buddhimatta | 5.0 | 10.0 | |
| सूचनांचे पालन | 4.8 | 10.0 | |
| कोडी सोडवणे | 6.7 | 7.9 | |
| टूल कॉलिंग | 10.0 | 10.0 |