#55 DeepSeek V4 Flash
high- खर्च
- $0.003
- वेळ
- 93.1s
- टोकन्स
- 7,926 tok
सारांश
DeepSeek V4 Flash 0423 AI BENCHY वर 7.4 स्कोर करते आणि #55 वर आहे. याची reliability 10.0, pass rate 71.7%, एकूण खर्च $0.038, आणि सरासरी response time 46.28s आहे.
DeepSeek V4 Flash 0423 खास का आहे: हे डेटा पार्सिंग आणि निष्कर्षण मध्ये सर्वाधिक उठून दिसते, जिथे त्याचा rank #1 आहे; तर कोडिंग हा सर्वात कमकुवत भाग आहे, rank #18. या score range साठी एकूण benchmark खर्च असामान्यपणे कमी आहे.
संशोधन दिनांक: 2026-08-12
7.4
सुसंगतता
8.0
10.0
$0.038
एकूण आउटपुट टोकन्स
126,869
एकूण इनपुट टोकन्स
0
इनपुट किंमत
$0.112 / 1M
आउटपुट किंमत
$0.224 / 1M
अस्थिर चाचण्या
5
अस्थिर चाचण्यांत रन्समध्ये मिश्र निकाल असतात (किमान एक पास आणि एक फेल).
Prompt: Create a detailed SVG illustration of a hamster playing table tennis.
रन इतिहास
| चाचणी तारीख | स्कोअर | विश्वसनीयता | बरोबर चाचण्या | एकूण खर्च | तुलना करा |
|---|---|---|---|---|---|
| 2026-08-14 03:03 पुन्हा चाचणी | 7.6 | 10.0 | $0.066 ↑ | तुलना करा | |
| 2026-07-16 23:17 नवीन चाचणी जोडली | 7.7 | 10.0 | $0.042 ↓ | तुलना करा | |
| 2026-06-04 14:24 पुन्हा चाचणी | 7.7 | 10.0 | $0.029 ↓ | तुलना करा | |
| 2026-06-04 13:02 नवीन चाचणी जोडली | 7.7 | 10.0 | $0.028 ↓ | तुलना करा | |
| 2026-05-22 00:39 सूट बदलला | 7.4 | 10.0 | $0.038 | सध्याची रन | |
| 2026-04-25 21:41 पुन्हा चाचणी | 7.8 | लागू नाही | $0.031 | तुलना करा | |
| 2026-04-24 09:19 पहिला रन | 7.8 | लागू नाही | $0.019 | तुलना करा |
या रनमध्ये वेगळा बेंचमार्क सूट वापरला गेला. ऐतिहासिक बदल वाचताना सूटमधील बदल लक्षात घ्या.
रन तुलना
| रन | बेंचमार्क कव्हरेज | स्कोअर | सुसंगतता | विश्वसनीयता | बरोबर चाचण्या | अस्थिर चाचण्या | एकूण आउटपुट टोकन्स | एकूण इनपुट टोकन्स | एकूण खर्च | प्रतिसाद वेळ (सरासरी) |
|---|---|---|---|---|---|---|---|---|---|---|
| 2026-05-22 00:39 · सूट बदलला | 60/60 प्रयत्न | 7.4 | 8.0 | 10.0 | 11/20 | 5 | 126,869 | 0 | $0.038 | 46.28s |
| 2026-06-04 14:24 · पुन्हा चाचणी | 63/63 प्रयत्न | 7.7 | 8.5 | 10.0 | 13/21 | 4 | 133,811 | 39,745 | $0.029 | 45.85s |
| फरक | — | -0.3 | -0.5 | 0.0 | -2 | +1 | -6942 | -39745 | +$0.009 | +431ms |
बेंचमार्क कव्हरेज वेगळे आहे: 60/60 प्रयत्न (लक्ष्य: प्रत्येक चाचणीसाठी 3 पुनरावृत्ती) विरुद्ध 63/63 प्रयत्न (लक्ष्य: प्रत्येक चाचणीसाठी 3 पुनरावृत्ती). एकूण मूल्ये आणि पुनरावृत्तीवर अवलंबून मेट्रिक्स थेट तुलना करता येत नाहीत.
या दोन रनमध्ये वेगवेगळे बेंचमार्क सूट वापरले गेले, त्यामुळे फरकांमध्ये मॉडेलमधील आणि सूटमधील दोन्ही बदल दिसतात.
पहिले मॉडेल निवडा, नंतर दुसरे मॉडेल क्लिक करून बाजू-बाजूची तुलना पेज उघडा.
| श्रेणी | स्कोअर | सुसंगतता | बरोबर चाचण्या |
|---|---|---|---|
| अँटी-एआय युक्त्या | 8.3 | 10.0 | |
| कोडिंग | 6.8 | 10.0 | |
| संयुक्त | 10.0 | 10.0 | |
| डेटा पार्सिंग आणि निष्कर्षण | 10.0 | 10.0 | |
| डोमेन-विशिष्ट | 4.1 | 4.4 | |
| Samanya Buddhimatta | 6.1 | 3.1 | |
| सूचनांचे पालन | 10.0 | 10.0 | |
| कोडी सोडवणे | 6.4 | 4.4 | |
| टूल कॉलिंग | 10.0 | 10.0 | |
| सामान्य ज्ञान | 3.0 | 10.0 |