#35 DeepSeek V4 Flash
high- खर्च
- $0.003
- वेळ
- 93.1s
- टोकन्स
- 7,926 tok
सारांश
DeepSeek V4 Flash 0423 AI BENCHY वर 7.8 स्कोर करते आणि #35 वर आहे. याची reliability लागू नाही, pass rate 79.6%, एकूण खर्च $0.019, आणि सरासरी response time 39.75s आहे.
DeepSeek V4 Flash 0423 खास का आहे: हे डेटा पार्सिंग आणि निष्कर्षण मध्ये सर्वाधिक उठून दिसते, जिथे त्याचा rank #1 आहे; तर कोडी सोडवणे हा सर्वात कमकुवत भाग आहे, rank #18. या score range साठी एकूण benchmark खर्च असामान्यपणे कमी आहे.
संशोधन दिनांक: 2026-08-12
7.8
सुसंगतता
7.8
लागू नाही
$0.019
एकूण आउटपुट टोकन्स
48,916
एकूण इनपुट टोकन्स
0
इनपुट किंमत
$0.140 / 1M
आउटपुट किंमत
$0.280 / 1M
अस्थिर चाचण्या
5
अस्थिर चाचण्यांत रन्समध्ये मिश्र निकाल असतात (किमान एक पास आणि एक फेल).
Prompt: Create a detailed SVG illustration of a hamster playing table tennis.
रन इतिहास
| चाचणी तारीख | स्कोअर | विश्वसनीयता | बरोबर चाचण्या | एकूण खर्च | तुलना करा |
|---|---|---|---|---|---|
| 2026-08-14 03:03 पुन्हा चाचणी | 7.6 | 10.0 | $0.066 ↑ | तुलना करा | |
| 2026-07-16 23:17 नवीन चाचणी जोडली | 7.7 | 10.0 | $0.042 ↓ | तुलना करा | |
| 2026-06-04 14:24 पुन्हा चाचणी | 7.7 | 10.0 | $0.029 ↓ | तुलना करा | |
| 2026-06-04 13:02 नवीन चाचणी जोडली | 7.7 | 10.0 | $0.028 ↓ | तुलना करा | |
| 2026-05-22 00:39 सूट बदलला | 7.4 | 10.0 | $0.038 | तुलना करा | |
| 2026-04-25 21:41 पुन्हा चाचणी | 7.8 | लागू नाही | $0.031 | तुलना करा | |
| 2026-04-24 09:19 पहिला रन | 7.8 | लागू नाही | $0.019 | सध्याची रन |
रन तुलना
| रन | बेंचमार्क कव्हरेज | स्कोअर | सुसंगतता | विश्वसनीयता | बरोबर चाचण्या | अस्थिर चाचण्या | एकूण आउटपुट टोकन्स | एकूण इनपुट टोकन्स | एकूण खर्च | प्रतिसाद वेळ (सरासरी) |
|---|---|---|---|---|---|---|---|---|---|---|
| 2026-04-24 09:19 · पहिला रन | 54/54 प्रयत्न | 7.8 | 7.8 | लागू नाही | 11/18 | 5 | 48,916 | 0 | $0.019 | 39.75s |
| 2026-08-14 03:03 · पुन्हा चाचणी | 66/66 प्रयत्न | 7.6 | 8.5 | 10.0 | 13/22 | 4 | 211,310 | 108,480 | $0.066 | 51.81s |
| फरक | — | +0.2 | -0.7 | -2 | +1 | -162394 | -108480 | -$0.048 | -12060ms |
बेंचमार्क कव्हरेज वेगळे आहे: 54/54 प्रयत्न (लक्ष्य: प्रत्येक चाचणीसाठी 3 पुनरावृत्ती) विरुद्ध 66/66 प्रयत्न (लक्ष्य: प्रत्येक चाचणीसाठी 3 पुनरावृत्ती). एकूण मूल्ये आणि पुनरावृत्तीवर अवलंबून मेट्रिक्स थेट तुलना करता येत नाहीत.
या दोन रनमध्ये वेगवेगळे बेंचमार्क सूट वापरले गेले, त्यामुळे फरकांमध्ये मॉडेलमधील आणि सूटमधील दोन्ही बदल दिसतात.
पहिले मॉडेल निवडा, नंतर दुसरे मॉडेल क्लिक करून बाजू-बाजूची तुलना पेज उघडा.
| श्रेणी | स्कोअर | सुसंगतता | बरोबर चाचण्या |
|---|---|---|---|
| अँटी-एआय युक्त्या | 8.3 | 10.0 | |
| कोडिंग | 10.0 | 10.0 | |
| संयुक्त | 10.0 | 10.0 | |
| डेटा पार्सिंग आणि निष्कर्षण | 10.0 | 10.0 | |
| डोमेन-विशिष्ट | 4.1 | 4.4 | |
| Samanya Buddhimatta | 6.1 | 3.1 | |
| सूचनांचे पालन | 10.0 | 10.0 | |
| कोडी सोडवणे | 6.4 | 4.5 | |
| टूल कॉलिंग | 10.0 | 10.0 |