AI BENCHY
Advertise here
#59

DeepSeek V3.2

DeepSeek प्रकाशन: 2025-12-01 चाचणी तारीख: 2026-05-08 15:27 deepseek/deepseek-v3.2::medium
671B एकूण (37B सक्रिय)MoEमुक्त स्रोत
(medium) (none)

सारांश

DeepSeek V3.2 AI BENCHY वर 7.2 स्कोर करते आणि #59 वर आहे. याची reliability 10.0, pass rate 72.8%, एकूण खर्च $0.031, आणि सरासरी response time 46.06s आहे.

DeepSeek V3.2 खास का आहे: या score range साठी एकूण benchmark खर्च असामान्यपणे कमी आहे.

मॉडेलची माहिती

संशोधन दिनांक: 2026-08-12

जाहीर केलेले
पॅरामीटर्स
671B एकूण (37B सक्रिय)
आर्किटेक्चर
MoE
उपलब्धता
मुक्त स्रोत
परवाना
MIT

सुसंगतता

7.5

एकूण आउटपुट टोकन्स

60,800

एकूण इनपुट टोकन्स

0

इनपुट किंमत

$0.252 / 1M

आउटपुट किंमत

$0.378 / 1M

बरोबर चाचण्या

चुकीच्या चाचण्या: 8

प्रति प्रयत्न पास दर: 72.8%

अस्थिर चाचण्या

6

अस्थिर चाचण्यांत रन्समध्ये मिश्र निकाल असतात (किमान एक पास आणि एक फेल).

प्रतिसाद वेळ (सरासरी)

46.06s

प्रतिसाद वेळ (कमाल): 180.92s

प्रतिसाद वेळ (एकूण): 875.23s

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#59 DeepSeek V3.2

medium
खर्च
$0.001
वेळ
53.6s
टोकन्स
1,932 tok

रन इतिहास

चाचणी तारीख स्कोअर विश्वसनीयता बरोबर चाचण्या एकूण खर्च तुलना करा
2026-08-14 03:00 पुन्हा चाचणी 7.0 10.0 $0.078 तुलना करा
2026-07-16 23:13 नवीन चाचणी जोडली 7.0 10.0 $0.078 तुलना करा
2026-06-04 14:41 नवीन चाचणी जोडली 7.0 10.0 $0.044 तुलना करा
2026-05-22 00:46 सूट बदलला 7.0 9.1 $0.037 तुलना करा
2026-05-08 15:27 सूट बदलला 7.2 10.0 $0.031 सध्याची रन
2026-04-20 17:48 पहिली नोंदलेली रन 8.0 लागू नाही $0.029 तुलना करा

या रनमध्ये वेगळा बेंचमार्क सूट वापरला गेला. ऐतिहासिक बदल वाचताना सूटमधील बदल लक्षात घ्या.

रन तुलना

रनबेंचमार्क कव्हरेजस्कोअरसुसंगतताविश्वसनीयताबरोबर चाचण्याअस्थिर चाचण्याएकूण आउटपुट टोकन्सएकूण इनपुट टोकन्सएकूण खर्चप्रतिसाद वेळ (सरासरी)
2026-05-08 15:27 · सूट बदलला57/57 प्रयत्न7.27.510.011/19660,8000$0.03146.06s
2026-07-16 23:13 · नवीन चाचणी जोडली66/66 प्रयत्न7.07.410.011/227128,848101,047$0.07868.62s
फरक+0.2+0.10.00-1-68048-101047-$0.047-22550ms

बेंचमार्क कव्हरेज वेगळे आहे: 57/57 प्रयत्न (लक्ष्य: प्रत्येक चाचणीसाठी 3 पुनरावृत्ती) विरुद्ध 66/66 प्रयत्न (लक्ष्य: प्रत्येक चाचणीसाठी 3 पुनरावृत्ती). एकूण मूल्ये आणि पुनरावृत्तीवर अवलंबून मेट्रिक्स थेट तुलना करता येत नाहीत.

या दोन रनमध्ये वेगवेगळे बेंचमार्क सूट वापरले गेले, त्यामुळे फरकांमध्ये मॉडेलमधील आणि सूटमधील दोन्ही बदल दिसतात.

चार्ट्स

पहिले मॉडेल निवडा, नंतर दुसरे मॉडेल क्लिक करून बाजू-बाजूची तुलना पेज उघडा.

एकूण आउटपुट टोकन्स

स्कोअर vs एकूण आउटपुट टोकन्स

झटपट तुलना

श्रेणीवार तपशील

श्रेणी स्कोअर सुसंगतता बरोबर चाचण्या
अँटी-एआय युक्त्या 9.2 10.0
कोडिंग 4.7 1.6
संयुक्त 10.0 10.0
डेटा पार्सिंग आणि निष्कर्षण 10.0 10.0
डोमेन-विशिष्ट 2.9 4.4
Samanya Buddhimatta 3.8 2.5
सूचनांचे पालन 10.0 10.0
कोडी सोडवणे 6.7 5.0
टूल कॉलिंग 10.0 10.0
सामान्य ज्ञान 3.0 10.0

तुलना केलेली मॉडेल्स