#55 Qwen3.5-27B
medium- लागत
- $0.008
- समय
- 62.0s
- टोकन
- 3,099 tok
सारांश
Qwen3.5-27B AI BENCHY पर 7.4 स्कोर करता है और #55 पर है। इसकी reliability 10.0, pass rate 72.7%, कुल लागत $0.981, और औसत response time 111.94s है।
Qwen3.5-27B को अलग क्या बनाता है: यह डोमेन-विशिष्ट में सबसे अलग दिखता है, जहाँ इसकी रैंक #2 है; जबकि कोडिंग इसकी सबसे कमजोर जगह है, जहाँ यह #17 पर है।
शोध की तारीख: 2026-08-12
7.4
संगति
8.2
10.0
कुल आउटपुट टोकन
614,429
कुल इनपुट टोकन
111,635
इनपुट कीमत
$0.195 / 1M
आउटपुट कीमत
$1.560 / 1M
कैश पढ़ने की कीमत
लागू नहीं
कैश लिखने की कीमत
लागू नहीं
कैश की कीमतें इनपुट टोकन पर लागू होती हैं। पढ़ने पर कैश किए गए प्रॉम्प्ट का दोबारा उपयोग होता है; लिखने पर वे सहेजे जाते हैं और अतिरिक्त लागत हो सकती है। आउटपुट टोकन पर आउटपुट की कीमत लागू होती है।
अस्थिर टेस्ट
5
अस्थिर टेस्ट में रनों के बीच मिले-जुले परिणाम रहे (कम से कम एक पास और एक फेल)।
Prompt: Create a detailed SVG illustration of a hamster playing table tennis.
रन इतिहास
| परीक्षण किया गया | स्कोर | विश्वसनीयता | सही परीक्षण | कुल लागत | तुलना करें |
|---|---|---|---|---|---|
| 2026-08-14 01:58 दोबारा परीक्षण | 7.5 | 10.0 | $0.982 ↓ | तुलना करें | |
| 2026-07-16 22:51 नया टेस्ट जोड़ा गया | 7.4 | 10.0 | $0.981 ↓ | वर्तमान रन | |
| 2026-06-04 13:40 नया टेस्ट जोड़ा गया | 7.8 | 10.0 | $0.536 ↓ | तुलना करें | |
| 2026-05-22 00:04 सूट बदला गया | 7.9 | 10.0 | $0.607 | तुलना करें | |
| 2026-04-11 01:44 पहला दर्ज रन | 8.4 | लागू नहीं | $0.497 | तुलना करें |
इस रन में अलग बेंचमार्क सूट इस्तेमाल हुआ था। ऐतिहासिक बदलाव पढ़ते समय सूट बदलाव को ध्यान में रखें।
रन तुलना
| रन | बेंचमार्क कवरेज | स्कोर | संगति | विश्वसनीयता | सही परीक्षण | अस्थिर टेस्ट | कुल आउटपुट टोकन | कुल इनपुट टोकन | कुल लागत | प्रतिक्रिया समय (औसत) |
|---|---|---|---|---|---|---|---|---|---|---|
| 2026-07-16 22:51 · नया टेस्ट जोड़ा गया | 66/66 प्रयास | 7.4 | 8.2 | 10.0 | 13/22 | 5 | 614,429 | 111,635 | $0.981 | 111.94s |
| 2026-04-11 01:44 · पहला दर्ज रन | 54/54 प्रयास | 8.4 | 8.8 | लागू नहीं | 13/18 | 3 | 245,000 | 0 | $0.497 | 53.03s |
| अंतर | — | -1.0 | -0.6 | 0 | +2 | +369429 | +111635 | +$0.484 | +58914ms |
बेंचमार्क कवरेज अलग है: 66/66 प्रयास (लक्ष्य: प्रति टेस्ट 3 दोहराव) बनाम 54/54 प्रयास (लक्ष्य: प्रति टेस्ट 3 दोहराव)। कुल और दोहराव-संवेदनशील मेट्रिक सीधे तुलना योग्य नहीं हैं।
इन दो रन में अलग-अलग बेंचमार्क सूट इस्तेमाल हुए थे, इसलिए अंतर मॉडल बदलाव और सूट बदलाव दोनों को दर्शाते हैं।
कीमत का इतिहास
OpenRouter से इस मॉडल का ऐतिहासिक मूल्य डेटा।
| तारीख | इनपुट कीमत | आउटपुट कीमत | कैश पढ़ने की कीमत | कैश लिखने की कीमत |
|---|---|---|---|---|
| 2026-06-04 15:40 | $0.195 / 1M | $1.560 / 1M | लागू नहीं | लागू नहीं |
पहले मॉडल चुनें, फिर दूसरा मॉडल क्लिक करके साइड-बाय-साइड पेज खोलें।
| श्रेणी | स्कोर | संगति | सही परीक्षण |
|---|---|---|---|
| एंटी-एआई ट्रिक्स | 8.7 | 7.9 | |
| कोडिंग | 6.2 | 7.1 | |
| संयुक्त | 7.3 | 5.8 | |
| डेटा पार्सिंग और निष्कर्षण | 10.0 | 10.0 | |
| डोमेन-विशिष्ट | 5.3 | 10.0 | |
| Samanya Buddhimatta | 6.1 | 3.1 | |
| निर्देश पालन | 10.0 | 10.0 | |
| पहेली समाधान | 8.2 | 7.7 | |
| टूल कॉलिंग | 10.0 | 10.0 | |
| सामान्य ज्ञान | 3.0 | 10.0 |