#87

DeepSeek V4 Flash 0423

DeepSeek प्रकाशन: 2026-04-24 चाचणी तारीख: 2026-04-24 09:19 deepseek/deepseek-v4-flash::none

284B एकूण (13B सक्रिय)MoEमुक्त स्रोत

(high) (none)

सारांश

DeepSeek V4 Flash 0423 AI BENCHY वर 5.3 स्कोर करते आणि #87 वर आहे. याची reliability लागू नाही, pass rate 33.3%, एकूण खर्च $0.008, आणि सरासरी response time 29.39s आहे.

DeepSeek V4 Flash 0423 खास का आहे: हे डेटा पार्सिंग आणि निष्कर्षण मध्ये सर्वाधिक उठून दिसते, जिथे त्याचा rank #1 आहे; तर अँटी-एआय युक्त्या हा सर्वात कमकुवत भाग आहे, rank #17. या score range साठी एकूण benchmark खर्च असामान्यपणे कमी आहे.

मॉडेलची माहिती

संशोधन दिनांक: 2026-08-12

जाहीर केलेले

पॅरामीटर्स: 284B एकूण (13B सक्रिय)
आर्किटेक्चर: MoE
उपलब्धता: मुक्त स्रोत
परवाना: MIT

पॅरामीटर स्रोत उपलब्धता स्रोत

स्कोअर

5.3

सुसंगतता

9.1

विश्वसनीयता

लागू नाही

एकूण खर्च (सध्याची किंमत)

$0.008

एकूण आउटपुट टोकन्स

4,444

एकूण इनपुट टोकन्स

इनपुट किंमत

$0.140 / 1M

आउटपुट किंमत

$0.280 / 1M

बरोबर चाचण्या

चुकीच्या चाचण्या: 13

प्रति प्रयत्न पास दर: 33.3%

अस्थिर चाचण्या

अस्थिर चाचण्यांत रन्समध्ये मिश्र निकाल असतात (किमान एक पास आणि एक फेल).

प्रतिसाद वेळ (सरासरी)

29.39s

प्रतिसाद वेळ (कमाल): 111.96s

प्रतिसाद वेळ (एकूण): 529.10s

चुकीचे उत्तर: 8 अतिरिक्त फॉरमॅटिंग: 2 सूचनांचे पालन केले नाही: 2 अवैध टूल कॉल: 1

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#87 DeepSeek V4 Flash

none

खर्च: $0.004
वेळ: 157.6s
टोकन्स: 11,297 tok

रन इतिहास

चाचणी तारीख	स्कोअर	विश्वसनीयता	एकूण खर्च	तुलना करा
2026-08-14 02:59 पुन्हा चाचणी	5.4	10.0	$0.062 ↑	तुलना करा
2026-07-16 23:22 नवीन चाचणी जोडली	5.6	10.0	$0.044 ↓	तुलना करा
2026-06-04 14:22 पुन्हा चाचणी	5.0	10.0	$0.008 ↓	तुलना करा
2026-06-04 13:02 नवीन चाचणी जोडली	5.0	10.0	$0.008 ↓	तुलना करा
2026-05-22 00:37 सूट बदलला	5.1	10.0	$0.010	तुलना करा
2026-04-24 09:19 पहिला रन	5.3	लागू नाही	$0.008	सध्याची रन

रन तुलना

रन	बेंचमार्क कव्हरेज	स्कोअर	सुसंगतता	विश्वसनीयता	बरोबर चाचण्या	अस्थिर चाचण्या	एकूण आउटपुट टोकन्स	एकूण इनपुट टोकन्स	एकूण खर्च	प्रतिसाद वेळ (सरासरी)
2026-04-24 09:19 · पहिला रन	54/54 प्रयत्न	5.3	9.1	लागू नाही	5/18	2	4,444	0	$0.008	29.39s
2026-06-04 13:02 · नवीन चाचणी जोडली	61/63 प्रयत्न	5.0	8.9	10.0	5/21	3	13,708	48,401	$0.008	26.72s
फरक	—	+0.3	+0.2		0	-1	-9264	-48401	-$0.001	+2671ms

बेंचमार्क कव्हरेज वेगळे आहे: 54/54 प्रयत्न (लक्ष्य: प्रत्येक चाचणीसाठी 3 पुनरावृत्ती) विरुद्ध 61/63 प्रयत्न (लक्ष्य: प्रत्येक चाचणीसाठी 3 पुनरावृत्ती). एकूण मूल्ये आणि पुनरावृत्तीवर अवलंबून मेट्रिक्स थेट तुलना करता येत नाहीत.

या दोन रनमध्ये वेगवेगळे बेंचमार्क सूट वापरले गेले, त्यामुळे फरकांमध्ये मॉडेलमधील आणि सूटमधील दोन्ही बदल दिसतात.

चार्ट्स

पहिले मॉडेल निवडा, नंतर दुसरे मॉडेल क्लिक करून बाजू-बाजूची तुलना पेज उघडा.

एकूण आउटपुट टोकन्स

स्कोअर vs एकूण आउटपुट टोकन्स

झटपट तुलना

श्रेणीवार तपशील

श्रेणी	स्कोअर	सुसंगतता
अँटी-एआय युक्त्या	3.0	10.0
कोडिंग	6.3	10.0
संयुक्त	4.5	2.1
डेटा पार्सिंग आणि निष्कर्षण	10.0	10.0
डोमेन-विशिष्ट	5.3	10.0
Samanya Buddhimatta	4.2	9.9
सूचनांचे पालन	6.5	10.0
कोडी सोडवणे	3.1	7.3
टूल कॉलिंग	10.0	10.0

DeepSeek V4 Flash 0423

मॉडेलची माहिती

Hamster playing table tennis

#87 DeepSeek V4 Flash

चार्ट्स

स्कोअरनुसार शीर्ष मॉडेल्स

स्कोअर vs एकूण खर्च

प्रतिसाद वेळ (सरासरी)

स्कोअर vs प्रतिसाद वेळ (सरासरी)

एकूण आउटपुट टोकन्स

स्कोअर vs एकूण आउटपुट टोकन्स

झटपट तुलना

श्रेणीवार तपशील

तुलना केलेली मॉडेल्स