AI BENCHY
Advertise here
#56

Qwen3.5-Flash

Qwen प्रकाशन: 2026-02-24 चाचणी तारीख: 2026-05-21 23:57 qwen/qwen3.5-flash-02-23::medium
~35B एकूण (~3B सक्रिय)MoEबंद स्रोतअंदाजित
(medium) (none)

सारांश

Qwen3.5-Flash AI BENCHY वर 7.4 स्कोर करते आणि #56 वर आहे. याची reliability 8.3, pass rate 73.3%, एकूण खर्च $0.104, आणि सरासरी response time 65.64s आहे.

Qwen3.5-Flash खास का आहे: हे संयुक्त मध्ये सर्वाधिक उठून दिसते, जिथे त्याचा rank #1 आहे; तर कोडिंग हा सर्वात कमकुवत भाग आहे, rank #18.

मॉडेलची माहिती

संशोधन दिनांक: 2026-08-12

अंदाजित
पॅरामीटर्स
~35B एकूण (~3B सक्रिय)
आर्किटेक्चर
MoE
उपलब्धता
बंद स्रोत
परवाना
-

सार्वजनिक पुराव्यावर आधारित सर्वोत्तम अंदाज; प्रदात्याने सर्व मूल्ये जाहीर केलेली नाहीत.

सुसंगतता

7.6

एकूण आउटपुट टोकन्स

286,029

एकूण इनपुट टोकन्स

0

इनपुट किंमत

$0.065 / 1M

आउटपुट किंमत

$0.260 / 1M

बरोबर चाचण्या

चुकीच्या चाचण्या: 9

प्रति प्रयत्न पास दर: 73.3%

अस्थिर चाचण्या

6

अस्थिर चाचण्यांत रन्समध्ये मिश्र निकाल असतात (किमान एक पास आणि एक फेल).

प्रतिसाद वेळ (सरासरी)

65.64s

प्रतिसाद वेळ (कमाल): 234.29s

प्रतिसाद वेळ (एकूण): 1312.72s

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#56 Qwen3.5-Flash

medium
खर्च
$0.002
वेळ
25.8s
टोकन्स
4,294 tok

रन इतिहास

चाचणी तारीख स्कोअर विश्वसनीयता बरोबर चाचण्या एकूण खर्च तुलना करा
2026-08-14 01:52 पुन्हा चाचणी 6.1 10.0 $0.142 तुलना करा
2026-07-16 22:15 नवीन चाचणी जोडली 6.2 10.0 $0.139 तुलना करा
2026-06-04 13:36 नवीन चाचणी जोडली 7.4 8.9 $0.080 तुलना करा
2026-05-21 23:57 सूट बदलला 7.4 8.3 $0.104 सध्याची रन
2026-04-11 01:44 पहिली नोंदलेली रन 7.8 लागू नाही $0.080 तुलना करा

या रनमध्ये वेगळा बेंचमार्क सूट वापरला गेला. ऐतिहासिक बदल वाचताना सूटमधील बदल लक्षात घ्या.

रन तुलना

रनबेंचमार्क कव्हरेजस्कोअरसुसंगतताविश्वसनीयताबरोबर चाचण्याअस्थिर चाचण्याएकूण आउटपुट टोकन्सएकूण इनपुट टोकन्सएकूण खर्चप्रतिसाद वेळ (सरासरी)
2026-05-21 23:57 · सूट बदलला60/60 प्रयत्न7.47.68.311/206286,0290$0.10465.64s
2026-06-04 13:36 · नवीन चाचणी जोडली63/63 प्रयत्न7.48.18.912/215296,68638,926$0.08063.29s
फरक0.0-0.5-0.6-1+1-10657-38926+$0.024+2344ms

बेंचमार्क कव्हरेज वेगळे आहे: 60/60 प्रयत्न (लक्ष्य: प्रत्येक चाचणीसाठी 3 पुनरावृत्ती) विरुद्ध 63/63 प्रयत्न (लक्ष्य: प्रत्येक चाचणीसाठी 3 पुनरावृत्ती). एकूण मूल्ये आणि पुनरावृत्तीवर अवलंबून मेट्रिक्स थेट तुलना करता येत नाहीत.

या दोन रनमध्ये वेगवेगळे बेंचमार्क सूट वापरले गेले, त्यामुळे फरकांमध्ये मॉडेलमधील आणि सूटमधील दोन्ही बदल दिसतात.

चार्ट्स

पहिले मॉडेल निवडा, नंतर दुसरे मॉडेल क्लिक करून बाजू-बाजूची तुलना पेज उघडा.

एकूण आउटपुट टोकन्स

स्कोअर vs एकूण आउटपुट टोकन्स

झटपट तुलना

श्रेणीवार तपशील

श्रेणी स्कोअर सुसंगतता बरोबर चाचण्या
अँटी-एआय युक्त्या 10.0 10.0
कोडिंग 4.1 5.8
संयुक्त 10.0 10.0
डेटा पार्सिंग आणि निष्कर्षण 7.3 5.9
डोमेन-विशिष्ट 5.3 7.2
Samanya Buddhimatta 6.1 3.1
सूचनांचे पालन 10.0 10.0
कोडी सोडवणे 6.6 4.6
टूल कॉलिंग 10.0 10.0
सामान्य ज्ञान 3.0 10.0

तुलना केलेली मॉडेल्स