#51 DeepSeek V4 Pro
high- खर्च
- $0.023
- वेळ
- 257.6s
- टोकन्स
- 14,870 tok
सारांश
DeepSeek V4 Pro 0423 AI BENCHY वर 7.5 स्कोर करते आणि #51 वर आहे. याची reliability 9.3, pass rate 73.2%, एकूण खर्च $0.209, आणि सरासरी response time 60.03s आहे.
DeepSeek V4 Pro 0423 खास का आहे: या score range साठी एकूण benchmark खर्च असामान्यपणे कमी आहे.
संशोधन दिनांक: 2026-08-12
7.5
सुसंगतता
8.0
9.3
$0.209
एकूण आउटपुट टोकन्स
62,125
एकूण इनपुट टोकन्स
0
इनपुट किंमत
$0.435 / 1M
आउटपुट किंमत
$0.870 / 1M
कॅश वाचण्याची किंमत
लागू नाही
कॅश लिहिण्याची किंमत
लागू नाही
कॅशच्या किमती इनपुट टोकनला लागू होतात. वाचताना साठवलेले प्रॉम्प्ट पुन्हा वापरले जातात; लिहिताना ते साठवले जातात आणि अधिक खर्च होऊ शकतो. आउटपुट टोकनला आउटपुट किंमत लागू होते.
अस्थिर चाचण्या
4
अस्थिर चाचण्यांत रन्समध्ये मिश्र निकाल असतात (किमान एक पास आणि एक फेल).
Prompt: Create a detailed SVG illustration of a hamster playing table tennis.
रन इतिहास
| चाचणी तारीख | स्कोअर | विश्वसनीयता | बरोबर चाचण्या | एकूण खर्च | तुलना करा |
|---|---|---|---|---|---|
| 2026-08-14 03:17 पुन्हा चाचणी | 7.7 | 10.0 | $0.555 ↑ | तुलना करा | |
| 2026-07-16 23:19 नवीन चाचणी जोडली | 7.7 | 10.0 | $0.200 | तुलना करा | |
| 2026-06-16 15:31 पुन्हा चाचणी | 7.6 | 9.3 | $0.157 | तुलना करा | |
| 2026-06-16 14:47 सूट बदलला | 8.1 | 9.6 | $0.098 | तुलना करा | |
| 2026-06-04 14:38 नवीन चाचणी जोडली | 6.0 | 8.9 | $0.079 ↓ | तुलना करा | |
| 2026-05-22 00:54 सूट बदलला | 6.6 | 9.0 | $0.212 | तुलना करा | |
| 2026-04-29 14:47 पुन्हा चाचणी | 7.5 | 9.3 | $0.209 | सध्याची रन | |
| 2026-04-26 10:50 पुन्हा चाचणी | 7.5 | 8.4 | $0.201 | तुलना करा | |
| 2026-04-25 21:53 पहिला रन | 8.2 | लागू नाही | $0.329 | तुलना करा |
रन तुलना
| रन | बेंचमार्क कव्हरेज | स्कोअर | सुसंगतता | विश्वसनीयता | बरोबर चाचण्या | अस्थिर चाचण्या | एकूण आउटपुट टोकन्स | एकूण इनपुट टोकन्स | एकूण खर्च | प्रतिसाद वेळ (सरासरी) |
|---|---|---|---|---|---|---|---|---|---|---|
| 2026-04-29 14:47 · पुन्हा चाचणी | 54/54 प्रयत्न | 7.5 | 8.0 | 9.3 | 11/18 | 4 | 62,125 | 0 | $0.209 | 60.03s |
| 2026-07-16 23:19 · नवीन चाचणी जोडली | 66/66 प्रयत्न | 7.7 | 7.7 | 10.0 | 10/22 | 6 | 189,181 | 90,748 | $0.200 | 79.14s |
| फरक | — | -0.1 | +0.3 | -0.7 | +1 | -2 | -127056 | -90748 | +$0.009 | -19101ms |
बेंचमार्क कव्हरेज वेगळे आहे: 54/54 प्रयत्न (लक्ष्य: प्रत्येक चाचणीसाठी 3 पुनरावृत्ती) विरुद्ध 66/66 प्रयत्न (लक्ष्य: प्रत्येक चाचणीसाठी 3 पुनरावृत्ती). एकूण मूल्ये आणि पुनरावृत्तीवर अवलंबून मेट्रिक्स थेट तुलना करता येत नाहीत.
या दोन रनमध्ये वेगवेगळे बेंचमार्क सूट वापरले गेले, त्यामुळे फरकांमध्ये मॉडेलमधील आणि सूटमधील दोन्ही बदल दिसतात.
पहिले मॉडेल निवडा, नंतर दुसरे मॉडेल क्लिक करून बाजू-बाजूची तुलना पेज उघडा.
| श्रेणी | स्कोअर | सुसंगतता | बरोबर चाचण्या |
|---|---|---|---|
| अँटी-एआय युक्त्या | 8.3 | 10.0 | |
| कोडिंग | 3.0 | 0.0 | |
| संयुक्त | 10.0 | 10.0 | |
| डेटा पार्सिंग आणि निष्कर्षण | 10.0 | 10.0 | |
| डोमेन-विशिष्ट | 3.2 | 6.9 | |
| Samanya Buddhimatta | 6.1 | 3.1 | |
| सूचनांचे पालन | 10.0 | 10.0 | |
| कोडी सोडवणे | 8.0 | 7.0 | |
| टूल कॉलिंग | 10.0 | 10.0 |