#80 DeepSeek V4 Pro
high- लागत
- $0.023
- समय
- 257.6s
- टोकन
- 14,870 tok
सारांश
DeepSeek V4 Pro 0423 AI BENCHY पर 6.6 स्कोर करता है और #80 पर है। इसकी reliability 9.0, pass rate 66.7%, कुल लागत $0.212, और औसत response time 58.93s है।
DeepSeek V4 Pro 0423 को अलग क्या बनाता है: यह संयुक्त में सबसे अलग दिखता है, जहाँ इसकी रैंक #1 है; जबकि कोडिंग इसकी सबसे कमजोर जगह है, जहाँ यह #17 पर है। इस score range के लिए इसकी कुल benchmark लागत असामान्य रूप से कम है।
शोध की तारीख: 2026-08-12
6.6
संगति
8.3
9.0
$0.212
कुल आउटपुट टोकन
65,985
कुल इनपुट टोकन
0
इनपुट कीमत
$0.435 / 1M
आउटपुट कीमत
$0.870 / 1M
कैश पढ़ने की कीमत
लागू नहीं
कैश लिखने की कीमत
लागू नहीं
कैश की कीमतें इनपुट टोकन पर लागू होती हैं। पढ़ने पर कैश किए गए प्रॉम्प्ट का दोबारा उपयोग होता है; लिखने पर वे सहेजे जाते हैं और अतिरिक्त लागत हो सकती है। आउटपुट टोकन पर आउटपुट की कीमत लागू होती है।
अस्थिर टेस्ट
4
अस्थिर टेस्ट में रनों के बीच मिले-जुले परिणाम रहे (कम से कम एक पास और एक फेल)।
Prompt: Create a detailed SVG illustration of a hamster playing table tennis.
रन इतिहास
| परीक्षण किया गया | स्कोर | विश्वसनीयता | सही परीक्षण | कुल लागत | तुलना करें |
|---|---|---|---|---|---|
| 2026-08-14 03:17 दोबारा परीक्षण | 7.7 | 10.0 | $0.555 ↑ | तुलना करें | |
| 2026-07-16 23:19 नया टेस्ट जोड़ा गया | 7.7 | 10.0 | $0.200 | तुलना करें | |
| 2026-06-16 15:31 दोबारा परीक्षण | 7.6 | 9.3 | $0.157 | तुलना करें | |
| 2026-06-16 14:47 सूट बदला गया | 8.1 | 9.6 | $0.098 | तुलना करें | |
| 2026-06-04 14:38 नया टेस्ट जोड़ा गया | 6.0 | 8.9 | $0.079 ↓ | तुलना करें | |
| 2026-05-22 00:54 सूट बदला गया | 6.6 | 9.0 | $0.212 | वर्तमान रन | |
| 2026-04-29 14:47 दोबारा परीक्षण | 7.5 | 9.3 | $0.209 | तुलना करें | |
| 2026-04-26 10:50 दोबारा परीक्षण | 7.5 | 8.4 | $0.201 | तुलना करें | |
| 2026-04-25 21:53 पहला रन | 8.2 | लागू नहीं | $0.329 | तुलना करें |
इस रन में अलग बेंचमार्क सूट इस्तेमाल हुआ था। ऐतिहासिक बदलाव पढ़ते समय सूट बदलाव को ध्यान में रखें।
रन तुलना
| रन | बेंचमार्क कवरेज | स्कोर | संगति | विश्वसनीयता | सही परीक्षण | अस्थिर टेस्ट | कुल आउटपुट टोकन | कुल इनपुट टोकन | कुल लागत | प्रतिक्रिया समय (औसत) |
|---|---|---|---|---|---|---|---|---|---|---|
| 2026-05-22 00:54 · सूट बदला गया | 60/60 प्रयास | 6.6 | 8.3 | 9.0 | 11/20 | 4 | 65,985 | 0 | $0.212 | 58.93s |
| 2026-04-25 21:53 · पहला रन | 54/54 प्रयास | 8.2 | 9.2 | लागू नहीं | 13/18 | 2 | 84,562 | 0 | $0.329 | 72.92s |
| अंतर | — | -1.6 | -0.9 | -2 | +2 | -18577 | 0 | -$0.117 | -13988ms |
बेंचमार्क कवरेज अलग है: 60/60 प्रयास (लक्ष्य: प्रति टेस्ट 3 दोहराव) बनाम 54/54 प्रयास (लक्ष्य: प्रति टेस्ट 3 दोहराव)। कुल और दोहराव-संवेदनशील मेट्रिक सीधे तुलना योग्य नहीं हैं।
इन दो रन में अलग-अलग बेंचमार्क सूट इस्तेमाल हुए थे, इसलिए अंतर मॉडल बदलाव और सूट बदलाव दोनों को दर्शाते हैं।
पहले मॉडल चुनें, फिर दूसरा मॉडल क्लिक करके साइड-बाय-साइड पेज खोलें।
| श्रेणी | स्कोर | संगति | सही परीक्षण |
|---|---|---|---|
| एंटी-एआई ट्रिक्स | 7.4 | 10.0 | |
| कोडिंग | 2.8 | 5.0 | |
| संयुक्त | 10.0 | 10.0 | |
| डेटा पार्सिंग और निष्कर्षण | 8.8 | 10.0 | |
| डोमेन-विशिष्ट | 3.0 | 6.9 | |
| Samanya Buddhimatta | 6.1 | 3.1 | |
| निर्देश पालन | 10.0 | 10.0 | |
| पहेली समाधान | 7.4 | 7.2 | |
| टूल कॉलिंग | 10.0 | 10.0 | |
| सामान्य ज्ञान | 3.0 | 10.0 |