#51 DeepSeek V4 Pro
high- लागत
- $0.023
- समय
- 257.6s
- टोकन
- 14,870 tok
सारांश
DeepSeek V4 Pro 0423 AI BENCHY पर 7.5 स्कोर करता है और #51 पर है। इसकी reliability 9.3, pass rate 73.2%, कुल लागत $0.209, और औसत response time 60.03s है।
DeepSeek V4 Pro 0423 को अलग क्या बनाता है: इस score range के लिए इसकी कुल benchmark लागत असामान्य रूप से कम है।
शोध की तारीख: 2026-08-12
7.5
संगति
8.0
9.3
$0.209
कुल आउटपुट टोकन
62,125
कुल इनपुट टोकन
0
इनपुट कीमत
$0.435 / 1M
आउटपुट कीमत
$0.870 / 1M
कैश पढ़ने की कीमत
लागू नहीं
कैश लिखने की कीमत
लागू नहीं
कैश की कीमतें इनपुट टोकन पर लागू होती हैं। पढ़ने पर कैश किए गए प्रॉम्प्ट का दोबारा उपयोग होता है; लिखने पर वे सहेजे जाते हैं और अतिरिक्त लागत हो सकती है। आउटपुट टोकन पर आउटपुट की कीमत लागू होती है।
अस्थिर टेस्ट
4
अस्थिर टेस्ट में रनों के बीच मिले-जुले परिणाम रहे (कम से कम एक पास और एक फेल)।
Prompt: Create a detailed SVG illustration of a hamster playing table tennis.
रन इतिहास
| परीक्षण किया गया | स्कोर | विश्वसनीयता | सही परीक्षण | कुल लागत | तुलना करें |
|---|---|---|---|---|---|
| 2026-08-14 03:17 दोबारा परीक्षण | 7.7 | 10.0 | $0.555 ↑ | तुलना करें | |
| 2026-07-16 23:19 नया टेस्ट जोड़ा गया | 7.7 | 10.0 | $0.200 | तुलना करें | |
| 2026-06-16 15:31 दोबारा परीक्षण | 7.6 | 9.3 | $0.157 | तुलना करें | |
| 2026-06-16 14:47 सूट बदला गया | 8.1 | 9.6 | $0.098 | तुलना करें | |
| 2026-06-04 14:38 नया टेस्ट जोड़ा गया | 6.0 | 8.9 | $0.079 ↓ | तुलना करें | |
| 2026-05-22 00:54 सूट बदला गया | 6.6 | 9.0 | $0.212 | तुलना करें | |
| 2026-04-29 14:47 दोबारा परीक्षण | 7.5 | 9.3 | $0.209 | वर्तमान रन | |
| 2026-04-26 10:50 दोबारा परीक्षण | 7.5 | 8.4 | $0.201 | तुलना करें | |
| 2026-04-25 21:53 पहला रन | 8.2 | लागू नहीं | $0.329 | तुलना करें |
रन तुलना
| रन | बेंचमार्क कवरेज | स्कोर | संगति | विश्वसनीयता | सही परीक्षण | अस्थिर टेस्ट | कुल आउटपुट टोकन | कुल इनपुट टोकन | कुल लागत | प्रतिक्रिया समय (औसत) |
|---|---|---|---|---|---|---|---|---|---|---|
| 2026-04-29 14:47 · दोबारा परीक्षण | 54/54 प्रयास | 7.5 | 8.0 | 9.3 | 11/18 | 4 | 62,125 | 0 | $0.209 | 60.03s |
| 2026-05-22 00:54 · सूट बदला गया | 60/60 प्रयास | 6.6 | 8.3 | 9.0 | 11/20 | 4 | 65,985 | 0 | $0.212 | 58.93s |
| अंतर | — | +0.9 | -0.3 | +0.3 | 0 | 0 | -3860 | 0 | -$0.004 | +1100ms |
बेंचमार्क कवरेज अलग है: 54/54 प्रयास (लक्ष्य: प्रति टेस्ट 3 दोहराव) बनाम 60/60 प्रयास (लक्ष्य: प्रति टेस्ट 3 दोहराव)। कुल और दोहराव-संवेदनशील मेट्रिक सीधे तुलना योग्य नहीं हैं।
इन दो रन में अलग-अलग बेंचमार्क सूट इस्तेमाल हुए थे, इसलिए अंतर मॉडल बदलाव और सूट बदलाव दोनों को दर्शाते हैं।
पहले मॉडल चुनें, फिर दूसरा मॉडल क्लिक करके साइड-बाय-साइड पेज खोलें।
| श्रेणी | स्कोर | संगति | सही परीक्षण |
|---|---|---|---|
| एंटी-एआई ट्रिक्स | 8.3 | 10.0 | |
| कोडिंग | 3.0 | 0.0 | |
| संयुक्त | 10.0 | 10.0 | |
| डेटा पार्सिंग और निष्कर्षण | 10.0 | 10.0 | |
| डोमेन-विशिष्ट | 3.2 | 6.9 | |
| Samanya Buddhimatta | 6.1 | 3.1 | |
| निर्देश पालन | 10.0 | 10.0 | |
| पहेली समाधान | 8.0 | 7.0 | |
| टूल कॉलिंग | 10.0 | 10.0 |