#72 Qwen3.5-27B
none- लागत
- $0.007
- समय
- 42.9s
- टोकन
- 4,273 tok
Qwen
रिलीज़: 2026-02-24
परीक्षण किया गया: 2026-04-11 01:19
qwen/qwen3.5-27b::none
27Bसघनमुक्त स्रोत
(medium)
(none)
सारांश
Qwen3.5-27B AI BENCHY पर 5.9 स्कोर करता है और #72 पर है। इसकी reliability लागू नहीं, pass rate 38.9%, कुल लागत $0.016, और औसत response time 1.74s है।
Qwen3.5-27B को अलग क्या बनाता है: यह कोडिंग में सबसे अलग दिखता है, जहाँ इसकी रैंक #1 है; जबकि एंटी-एआई ट्रिक्स इसकी सबसे कमजोर जगह है, जहाँ यह #17 पर है। इस score range के लिए इसकी कुल benchmark लागत असामान्य रूप से कम है। यह समान मॉडलों की तुलना में काफ़ी तेज है।
मॉडल विवरण
शोध की तारीख: 2026-08-12
- पैरामीटर
- 27B
- आर्किटेक्चर
- सघन
- उपलब्धता
- मुक्त स्रोत
- लाइसेंस
- Apache-2.0
5.9
संगति
9.2
लागू नहीं
$0.016
कुल आउटपुट टोकन
3,545
कुल इनपुट टोकन
0
इनपुट कीमत
$0.195 / 1M
आउटपुट कीमत
$1.560 / 1M
अस्थिर टेस्ट
2
अस्थिर टेस्ट में रनों के बीच मिले-जुले परिणाम रहे (कम से कम एक पास और एक फेल)।
Hamster playing table tennis
Prompt: Create a detailed SVG illustration of a hamster playing table tennis.
रन इतिहास
| परीक्षण किया गया | स्कोर | विश्वसनीयता | सही परीक्षण | कुल लागत | तुलना करें |
|---|---|---|---|---|---|
| 2026-08-14 01:52 दोबारा परीक्षण | 6.6 | 10.0 | $0.058 ↓ | तुलना करें | |
| 2026-07-16 22:01 नया टेस्ट जोड़ा गया | 6.5 | 10.0 | $0.058 ↓ | तुलना करें | |
| 2026-06-04 13:28 नया टेस्ट जोड़ा गया | 5.7 | 10.0 | $0.015 ↓ | तुलना करें | |
| 2026-05-21 23:59 सूट बदला गया | 5.8 | 10.0 | $0.017 | तुलना करें | |
| 2026-04-11 01:19 पहला दर्ज रन | 5.9 | लागू नहीं | $0.016 | वर्तमान रन |
रन तुलना
| रन | बेंचमार्क कवरेज | स्कोर | संगति | विश्वसनीयता | सही परीक्षण | अस्थिर टेस्ट | कुल आउटपुट टोकन | कुल इनपुट टोकन | कुल लागत | प्रतिक्रिया समय (औसत) |
|---|---|---|---|---|---|---|---|---|---|---|
| 2026-04-11 01:19 · पहला दर्ज रन | 54/54 प्रयास | 5.9 | 9.2 | लागू नहीं | 6/18 | 2 | 3,545 | 0 | $0.016 | 1.74s |
| 2026-08-14 01:52 · दोबारा परीक्षण | 66/66 प्रयास | 6.6 | 9.3 | 10.0 | 9/22 | 2 | 24,323 | 102,325 | $0.058 | 4.77s |
| अंतर | — | -0.8 | -0.1 | -3 | 0 | -20778 | -102325 | -$0.043 | -3032ms |
बेंचमार्क कवरेज अलग है: 54/54 प्रयास (लक्ष्य: प्रति टेस्ट 3 दोहराव) बनाम 66/66 प्रयास (लक्ष्य: प्रति टेस्ट 3 दोहराव)। कुल और दोहराव-संवेदनशील मेट्रिक सीधे तुलना योग्य नहीं हैं।
इन दो रन में अलग-अलग बेंचमार्क सूट इस्तेमाल हुए थे, इसलिए अंतर मॉडल बदलाव और सूट बदलाव दोनों को दर्शाते हैं।
चार्ट
पहले मॉडल चुनें, फिर दूसरा मॉडल क्लिक करके साइड-बाय-साइड पेज खोलें।
स्कोर के अनुसार शीर्ष मॉडल
स्कोर vs कुल लागत
प्रतिक्रिया समय (औसत)
स्कोर vs प्रतिक्रिया समय (औसत)
कुल आउटपुट टोकन
स्कोर vs कुल आउटपुट टोकन
त्वरित तुलना
Qwen3.5-27BnonevsGemini 3.5 Flash LitelowQwen3.5-27BnonevsGemini 3.1 Flash Lite PreviewlowQwen3.5-27BnonevsLongCat 2.0highQwen3.5-27BnonevsInkling SmallmediumQwen3.5-27BnonevsGemini 3.5 FlashminimalQwen3.5-27BnonevsGemini 3.1 Flash LitelowQwen3.5-27BnonevsLongCat 2.0lowQwen3.5-27BnonevsQwen3.6 35B A3BmediumQwen3.5-27BnonevsKAT-Coder-Pro V2.5noneQwen3.5-27BnonevsQwen3.5 Plus 2026-02-15none
श्रेणी विवरण
| श्रेणी | स्कोर | संगति | सही परीक्षण |
|---|---|---|---|
| एंटी-एआई ट्रिक्स | 4.8 | 10.0 | |
| कोडिंग | 10.0 | 10.0 | |
| संयुक्त | 2.8 | 1.6 | |
| डेटा पार्सिंग और निष्कर्षण | 10.0 | 10.0 | |
| डोमेन-विशिष्ट | 3.0 | 10.0 | |
| Samanya Buddhimatta | 5.0 | 10.0 | |
| निर्देश पालन | 4.8 | 10.0 | |
| पहेली समाधान | 6.7 | 7.9 | |
| टूल कॉलिंग | 10.0 | 10.0 |