AI BENCHY
Advertise here
#48

Qwen3.5-35B-A3B

Qwen प्रकाशन: 2026-02-24 चाचणी तारीख: 2026-04-11 01:44 qwen/qwen3.5-35b-a3b::medium
35B एकूण (3B सक्रिय)MoEमुक्त स्रोत
(medium) (none)

सारांश

Qwen3.5-35B-A3B AI BENCHY वर 7.4 स्कोर करते आणि #48 वर आहे. याची reliability लागू नाही, pass rate 79.6%, एकूण खर्च $0.398, आणि सरासरी response time 44.51s आहे.

Qwen3.5-35B-A3B खास का आहे: हे सूचनांचे पालन मध्ये सर्वाधिक उठून दिसते, जिथे त्याचा rank #1 आहे; तर संयुक्त हा सर्वात कमकुवत भाग आहे, rank #18.

मॉडेलची माहिती

संशोधन दिनांक: 2026-08-12

जाहीर केलेले
पॅरामीटर्स
35B एकूण (3B सक्रिय)
आर्किटेक्चर
MoE
उपलब्धता
मुक्त स्रोत
परवाना
Apache-2.0

सुसंगतता

6.7

विश्वसनीयता

लागू नाही

एकूण आउटपुट टोकन्स

218,898

एकूण इनपुट टोकन्स

0

इनपुट किंमत

$0.163 / 1M

आउटपुट किंमत

$1.300 / 1M

बरोबर चाचण्या

चुकीच्या चाचण्या: 8

प्रति प्रयत्न पास दर: 79.6%

अस्थिर चाचण्या

7

अस्थिर चाचण्यांत रन्समध्ये मिश्र निकाल असतात (किमान एक पास आणि एक फेल).

प्रतिसाद वेळ (सरासरी)

44.51s

प्रतिसाद वेळ (कमाल): 106.00s

प्रतिसाद वेळ (एकूण): 801.21s

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#48 Qwen3.5-35B-A3B

medium
खर्च
$0.009
वेळ
71.4s
टोकन्स
8,631 tok

रन इतिहास

चाचणी तारीख स्कोअर विश्वसनीयता बरोबर चाचण्या एकूण खर्च तुलना करा
2026-08-14 01:57 पुन्हा चाचणी 6.1 10.0 $1.623 तुलना करा
2026-07-16 22:51 नवीन चाचणी जोडली 6.2 10.0 $0.837 तुलना करा
2026-06-04 13:42 नवीन चाचणी जोडली 7.1 8.9 $0.401 तुलना करा
2026-05-22 00:15 सूट बदलला 7.0 6.7 $0.547 तुलना करा
2026-04-11 01:44 पहिली नोंदलेली रन 7.4 लागू नाही $0.398 सध्याची रन

रन तुलना

रनबेंचमार्क कव्हरेजस्कोअरसुसंगतताविश्वसनीयताबरोबर चाचण्याअस्थिर चाचण्याएकूण आउटपुट टोकन्सएकूण इनपुट टोकन्सएकूण खर्चप्रतिसाद वेळ (सरासरी)
2026-04-11 01:44 · पहिली नोंदलेली रन54/54 प्रयत्न7.46.7लागू नाही10/187218,8980$0.39844.51s
2026-06-04 13:42 · नवीन चाचणी जोडली63/63 प्रयत्न7.17.28.911/217394,20742,196$0.40172.57s
फरक+0.3-0.5-10-175309-42196-$0.003-28062ms

बेंचमार्क कव्हरेज वेगळे आहे: 54/54 प्रयत्न (लक्ष्य: प्रत्येक चाचणीसाठी 3 पुनरावृत्ती) विरुद्ध 63/63 प्रयत्न (लक्ष्य: प्रत्येक चाचणीसाठी 3 पुनरावृत्ती). एकूण मूल्ये आणि पुनरावृत्तीवर अवलंबून मेट्रिक्स थेट तुलना करता येत नाहीत.

या दोन रनमध्ये वेगवेगळे बेंचमार्क सूट वापरले गेले, त्यामुळे फरकांमध्ये मॉडेलमधील आणि सूटमधील दोन्ही बदल दिसतात.

चार्ट्स

पहिले मॉडेल निवडा, नंतर दुसरे मॉडेल क्लिक करून बाजू-बाजूची तुलना पेज उघडा.

एकूण आउटपुट टोकन्स

स्कोअर vs एकूण आउटपुट टोकन्स

झटपट तुलना

श्रेणीवार तपशील

श्रेणी स्कोअर सुसंगतता बरोबर चाचण्या
अँटी-एआय युक्त्या 10.0 10.0
कोडिंग 10.0 10.0
संयुक्त 4.7 1.6
डेटा पार्सिंग आणि निष्कर्षण 7.3 5.9
डोमेन-विशिष्ट 4.1 4.4
Samanya Buddhimatta 2.8 1.6
सूचनांचे पालन 10.0 10.0
कोडी सोडवणे 6.4 4.4
टूल कॉलिंग 10.0 10.0

तुलना केलेली मॉडेल्स