#11 Qwen3.5-27B
medium- लागत
- $0.008
- समय
- 62.0s
- टोकन
- 3,099 tok
Qwen
रिलीज़: 2026-02-24
परीक्षण किया गया: 2026-04-11 01:44
qwen/qwen3.5-27b::medium
27Bसघनमुक्त स्रोत
(medium)
(none)
सारांश
Qwen3.5-27B AI BENCHY पर 8.4 स्कोर करता है और #11 पर है। इसकी reliability लागू नहीं, pass rate 81.5%, कुल लागत $0.497, और औसत response time 53.03s है।
Qwen3.5-27B को अलग क्या बनाता है: यह असामान्य रूप से अधिक reasoning tokens इस्तेमाल करता है, जिससे धीमे या महंगे runs समझ में आ सकते हैं।
मॉडल विवरण
शोध की तारीख: 2026-08-12
- पैरामीटर
- 27B
- आर्किटेक्चर
- सघन
- उपलब्धता
- मुक्त स्रोत
- लाइसेंस
- Apache-2.0
8.4
संगति
8.8
लागू नहीं
$0.497
कुल आउटपुट टोकन
245,000
कुल इनपुट टोकन
0
इनपुट कीमत
$0.195 / 1M
आउटपुट कीमत
$1.560 / 1M
कैश पढ़ने की कीमत
लागू नहीं
कैश लिखने की कीमत
लागू नहीं
कैश की कीमतें इनपुट टोकन पर लागू होती हैं। पढ़ने पर कैश किए गए प्रॉम्प्ट का दोबारा उपयोग होता है; लिखने पर वे सहेजे जाते हैं और अतिरिक्त लागत हो सकती है। आउटपुट टोकन पर आउटपुट की कीमत लागू होती है।
अस्थिर टेस्ट
3
अस्थिर टेस्ट में रनों के बीच मिले-जुले परिणाम रहे (कम से कम एक पास और एक फेल)।
Hamster playing table tennis
Prompt: Create a detailed SVG illustration of a hamster playing table tennis.
रन इतिहास
| परीक्षण किया गया | स्कोर | विश्वसनीयता | सही परीक्षण | कुल लागत | तुलना करें |
|---|---|---|---|---|---|
| 2026-08-14 01:58 दोबारा परीक्षण | 7.5 | 10.0 | $0.982 ↓ | तुलना करें | |
| 2026-07-16 22:51 नया टेस्ट जोड़ा गया | 7.4 | 10.0 | $0.981 ↓ | तुलना करें | |
| 2026-06-04 13:40 नया टेस्ट जोड़ा गया | 7.8 | 10.0 | $0.536 ↓ | तुलना करें | |
| 2026-05-22 00:04 सूट बदला गया | 7.9 | 10.0 | $0.607 | तुलना करें | |
| 2026-04-11 01:44 पहला दर्ज रन | 8.4 | लागू नहीं | $0.497 | वर्तमान रन |
रन तुलना
| रन | बेंचमार्क कवरेज | स्कोर | संगति | विश्वसनीयता | सही परीक्षण | अस्थिर टेस्ट | कुल आउटपुट टोकन | कुल इनपुट टोकन | कुल लागत | प्रतिक्रिया समय (औसत) |
|---|---|---|---|---|---|---|---|---|---|---|
| 2026-04-11 01:44 · पहला दर्ज रन | 54/54 प्रयास | 8.4 | 8.8 | लागू नहीं | 13/18 | 3 | 245,000 | 0 | $0.497 | 53.03s |
| 2026-06-04 13:40 · नया टेस्ट जोड़ा गया | 63/63 प्रयास | 7.8 | 8.5 | 10.0 | 13/21 | 4 | 337,823 | 42,164 | $0.536 | 68.39s |
| अंतर | — | +0.7 | +0.3 | 0 | -1 | -92823 | -42164 | -$0.039 | -15367ms |
बेंचमार्क कवरेज अलग है: 54/54 प्रयास (लक्ष्य: प्रति टेस्ट 3 दोहराव) बनाम 63/63 प्रयास (लक्ष्य: प्रति टेस्ट 3 दोहराव)। कुल और दोहराव-संवेदनशील मेट्रिक सीधे तुलना योग्य नहीं हैं।
इन दो रन में अलग-अलग बेंचमार्क सूट इस्तेमाल हुए थे, इसलिए अंतर मॉडल बदलाव और सूट बदलाव दोनों को दर्शाते हैं।
चार्ट
पहले मॉडल चुनें, फिर दूसरा मॉडल क्लिक करके साइड-बाय-साइड पेज खोलें।
स्कोर के अनुसार शीर्ष मॉडल
स्कोर vs कुल लागत
प्रतिक्रिया समय (औसत)
स्कोर vs प्रतिक्रिया समय (औसत)
कुल आउटपुट टोकन
स्कोर vs कुल आउटपुट टोकन
त्वरित तुलना
Qwen3.5-27BmediumvsGPT-5.6 TerralowQwen3.5-27BmediumvsGLM 5.3 FlashXmaxQwen3.5-27BmediumvsQwen3.8 Flash NextlowQwen3.5-27BmediumvsClaude Fable 5.1highQwen3.5-27BmediumvsGemini 3.8 FlashmediumQwen3.5-27BmediumvsGPT-5.4 MinimediumQwen3.5-27BmediumvsGPT-5.4 NanomediumQwen3.5-27BmediumvsQwen3.7 MaxnoneQwen3.5-27BmediumvsNemotron 3 Ultramediumनिःशुल्क उपलब्धQwen3.5-27BmediumvsGemini 3.5 Flashmedium
श्रेणी विवरण
| श्रेणी | स्कोर | संगति | सही परीक्षण |
|---|---|---|---|
| एंटी-एआई ट्रिक्स | 8.7 | 7.9 | |
| कोडिंग | 10.0 | 10.0 | |
| संयुक्त | 10.0 | 10.0 | |
| डेटा पार्सिंग और निष्कर्षण | 10.0 | 10.0 | |
| डोमेन-विशिष्ट | 5.3 | 10.0 | |
| Samanya Buddhimatta | 6.1 | 3.1 | |
| निर्देश पालन | 10.0 | 10.0 | |
| पहेली समाधान | 8.2 | 7.7 | |
| टूल कॉलिंग | 10.0 | 10.0 |