AI BENCHY
Advertise here
#30

Qwen3.5-27B

Qwen प्रकाशन: 2026-02-24 चाचणी तारीख: 2026-06-04 13:40 qwen/qwen3.5-27b::medium
27Bघनमुक्त स्रोत
(medium) (none)

सारांश

Qwen3.5-27B AI BENCHY वर 7.8 स्कोर करते आणि #30 वर आहे. याची reliability 10.0, pass rate 73.0%, एकूण खर्च $0.536, आणि सरासरी response time 68.39s आहे.

Qwen3.5-27B खास का आहे: हे डोमेन-विशिष्ट मध्ये सर्वाधिक उठून दिसते, जिथे त्याचा rank #4 आहे; तर कोडिंग हा सर्वात कमकुवत भाग आहे, rank #18.

मॉडेलची माहिती

संशोधन दिनांक: 2026-08-12

जाहीर केलेले
पॅरामीटर्स
27B
आर्किटेक्चर
घन
उपलब्धता
मुक्त स्रोत
परवाना
Apache-2.0

सुसंगतता

8.5

एकूण खर्च (सध्याची किंमत)

$0.536 ↓ -16.0%

या किमतीवर चाचणी केली: $0.638

एकूण आउटपुट टोकन्स

337,823

एकूण इनपुट टोकन्स

42,164

इनपुट किंमत

$0.195 / 1M

आउटपुट किंमत

$1.560 / 1M

बरोबर चाचण्या

चुकीच्या चाचण्या: 8

प्रति प्रयत्न पास दर: 73.0%

अस्थिर चाचण्या

4

अस्थिर चाचण्यांत रन्समध्ये मिश्र निकाल असतात (किमान एक पास आणि एक फेल).

प्रतिसाद वेळ (सरासरी)

68.39s

प्रतिसाद वेळ (कमाल): 234.36s

प्रतिसाद वेळ (एकूण): 1436.24s

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#30 Qwen3.5-27B

medium
खर्च
$0.008
वेळ
62.0s
टोकन्स
3,099 tok

रन इतिहास

चाचणी तारीख स्कोअर विश्वसनीयता बरोबर चाचण्या एकूण खर्च तुलना करा
2026-08-14 01:58 पुन्हा चाचणी 7.5 10.0 $0.982 तुलना करा
2026-07-16 22:51 नवीन चाचणी जोडली 7.4 10.0 $0.981 तुलना करा
2026-06-04 13:40 नवीन चाचणी जोडली 7.8 10.0 $0.536 सध्याची रन
2026-05-22 00:04 सूट बदलला 7.9 10.0 $0.607 तुलना करा
2026-04-11 01:44 पहिली नोंदलेली रन 8.4 लागू नाही $0.497 तुलना करा

या रनमध्ये वेगळा बेंचमार्क सूट वापरला गेला. ऐतिहासिक बदल वाचताना सूटमधील बदल लक्षात घ्या.

रन तुलना

रनबेंचमार्क कव्हरेजस्कोअरसुसंगतताविश्वसनीयताबरोबर चाचण्याअस्थिर चाचण्याएकूण आउटपुट टोकन्सएकूण इनपुट टोकन्सएकूण खर्चप्रतिसाद वेळ (सरासरी)
2026-06-04 13:40 · नवीन चाचणी जोडली63/63 प्रयत्न7.88.510.013/214337,82342,164$0.53668.39s
2026-08-14 01:58 · पुन्हा चाचणी66/66 प्रयत्न7.57.810.013/226614,909111,644$0.982113.28s
फरक+0.3+0.70.00-2-277086-69480-$0.446-44892ms

बेंचमार्क कव्हरेज वेगळे आहे: 63/63 प्रयत्न (लक्ष्य: प्रत्येक चाचणीसाठी 3 पुनरावृत्ती) विरुद्ध 66/66 प्रयत्न (लक्ष्य: प्रत्येक चाचणीसाठी 3 पुनरावृत्ती). एकूण मूल्ये आणि पुनरावृत्तीवर अवलंबून मेट्रिक्स थेट तुलना करता येत नाहीत.

या दोन रनमध्ये वेगवेगळे बेंचमार्क सूट वापरले गेले, त्यामुळे फरकांमध्ये मॉडेलमधील आणि सूटमधील दोन्ही बदल दिसतात.

किंमत इतिहास

OpenRouter मधील या मॉडेलचा ऐतिहासिक किंमत डेटा.

तारीख इनपुट किंमत आउटपुट किंमत
2026-06-04 14:42 $0.195 / 1M $1.560 / 1M

चार्ट्स

पहिले मॉडेल निवडा, नंतर दुसरे मॉडेल क्लिक करून बाजू-बाजूची तुलना पेज उघडा.

एकूण आउटपुट टोकन्स

स्कोअर vs एकूण आउटपुट टोकन्स

झटपट तुलना

श्रेणीवार तपशील

श्रेणी स्कोअर सुसंगतता बरोबर चाचण्या
अँटी-एआय युक्त्या 8.7 7.9
कोडिंग 6.2 7.1
संयुक्त 10.0 10.0
डेटा पार्सिंग आणि निष्कर्षण 10.0 10.0
डोमेन-विशिष्ट 5.3 10.0
Samanya Buddhimatta 6.1 3.1
सूचनांचे पालन 10.0 10.0
कोडी सोडवणे 8.2 7.7
टूल कॉलिंग 10.0 10.0
सामान्य ज्ञान 3.0 10.0

तुलना केलेली मॉडेल्स