AI BENCHY
AD
Track all your projects in one dashboard. Get 📊stats, 🔥heatmaps and 👀recordings in one self-hosted dashboard.
uxwizz.com
#103

Qwen3.5-27B

Qwen प्रकाशन: 2026-02-24 चाचणी तारीख: 2026-05-21 23:59 qwen/qwen3.5-27b::none
27Bघनमुक्त स्रोत
(medium) (none)

सारांश

Qwen3.5-27B AI BENCHY वर 5.8 स्कोर करते आणि #103 वर आहे. याची reliability 10.0, pass rate 40.0%, एकूण खर्च $0.017, आणि सरासरी response time 1.67s आहे.

Qwen3.5-27B खास का आहे: या score range साठी एकूण benchmark खर्च असामान्यपणे कमी आहे. समान मॉडेल्सच्या तुलनेत हे लक्षणीय वेगवान आहे.

मॉडेलची माहिती

संशोधन दिनांक: 2026-08-12

जाहीर केलेले
पॅरामीटर्स
27B
आर्किटेक्चर
घन
उपलब्धता
मुक्त स्रोत
परवाना
Apache-2.0

सुसंगतता

9.3

एकूण आउटपुट टोकन्स

3,582

एकूण इनपुट टोकन्स

0

इनपुट किंमत

$0.195 / 1M

आउटपुट किंमत

$1.560 / 1M

बरोबर चाचण्या

चुकीच्या चाचण्या: 13

प्रति प्रयत्न पास दर: 40.0%

अस्थिर चाचण्या

2

अस्थिर चाचण्यांत रन्समध्ये मिश्र निकाल असतात (किमान एक पास आणि एक फेल).

प्रतिसाद वेळ (सरासरी)

1.67s

प्रतिसाद वेळ (कमाल): 9.39s

प्रतिसाद वेळ (एकूण): 33.38s

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#103 Qwen3.5-27B

none
खर्च
$0.007
वेळ
42.9s
टोकन्स
4,273 tok

रन इतिहास

चाचणी तारीख स्कोअर विश्वसनीयता बरोबर चाचण्या एकूण खर्च तुलना करा
2026-08-14 01:52 पुन्हा चाचणी 6.6 10.0 $0.058 तुलना करा
2026-07-16 22:01 नवीन चाचणी जोडली 6.5 10.0 $0.058 तुलना करा
2026-06-04 13:28 नवीन चाचणी जोडली 5.7 10.0 $0.015 तुलना करा
2026-05-21 23:59 सूट बदलला 5.8 10.0 $0.017 सध्याची रन
2026-04-11 01:19 पहिली नोंदलेली रन 5.9 लागू नाही $0.016 तुलना करा

या रनमध्ये वेगळा बेंचमार्क सूट वापरला गेला. ऐतिहासिक बदल वाचताना सूटमधील बदल लक्षात घ्या.

रन तुलना

रनबेंचमार्क कव्हरेजस्कोअरसुसंगतताविश्वसनीयताबरोबर चाचण्याअस्थिर चाचण्याएकूण आउटपुट टोकन्सएकूण इनपुट टोकन्सएकूण खर्चप्रतिसाद वेळ (सरासरी)
2026-05-21 23:59 · सूट बदलला60/60 प्रयत्न5.89.310.07/2023,5820$0.0171.67s
2026-08-14 01:52 · पुन्हा चाचणी66/66 प्रयत्न6.69.310.09/22224,323102,325$0.0584.77s
फरक-0.90.00.0-20-20741-102325-$0.042-3103ms

बेंचमार्क कव्हरेज वेगळे आहे: 60/60 प्रयत्न (लक्ष्य: प्रत्येक चाचणीसाठी 3 पुनरावृत्ती) विरुद्ध 66/66 प्रयत्न (लक्ष्य: प्रत्येक चाचणीसाठी 3 पुनरावृत्ती). एकूण मूल्ये आणि पुनरावृत्तीवर अवलंबून मेट्रिक्स थेट तुलना करता येत नाहीत.

या दोन रनमध्ये वेगवेगळे बेंचमार्क सूट वापरले गेले, त्यामुळे फरकांमध्ये मॉडेलमधील आणि सूटमधील दोन्ही बदल दिसतात.

चार्ट्स

पहिले मॉडेल निवडा, नंतर दुसरे मॉडेल क्लिक करून बाजू-बाजूची तुलना पेज उघडा.

एकूण आउटपुट टोकन्स

स्कोअर vs एकूण आउटपुट टोकन्स

झटपट तुलना

श्रेणीवार तपशील

श्रेणी स्कोअर सुसंगतता बरोबर चाचण्या
अँटी-एआय युक्त्या 4.8 10.0
कोडिंग 7.3 10.0
संयुक्त 2.8 1.6
डेटा पार्सिंग आणि निष्कर्षण 10.0 10.0
डोमेन-विशिष्ट 3.0 10.0
Samanya Buddhimatta 5.0 10.0
सूचनांचे पालन 6.3 10.0
कोडी सोडवणे 6.7 7.9
टूल कॉलिंग 10.0 10.0
सामान्य ज्ञान 3.0 10.0

तुलना केलेली मॉडेल्स