AI BENCHY
Advertise here

#47

DeepSeek V4 Pro

DeepSeek रिलीज़: 2026-04-24 परीक्षण किया गया: 2026-04-26 10:50 deepseek/deepseek-v4-pro::high
(high) (none)

संगति

8.0

कुल आउटपुट टोकन

57,875

इनपुट कीमत

$1.740 / 1M

आउटपुट कीमत

$3.480 / 1M

सही परीक्षण

गलत टेस्ट: 7

प्रति प्रयास पास दर: 73.2%

अस्थिर टेस्ट

4

अस्थिर टेस्ट में रनों के बीच मिले-जुले परिणाम रहे (कम से कम एक पास और एक फेल)।

प्रतिक्रिया समय (औसत)

60.02s

प्रतिक्रिया समय (अधिकतम): 358.35s

प्रतिक्रिया समय (कुल): 1080.31s

रन इतिहास

परीक्षण किया गया स्कोर विश्वसनीयता सही परीक्षण कुल लागत तुलना करें
2026-05-22 00:54 सूट बदला गया 6.6 9.0 $0.212 तुलना करें
2026-04-29 14:47 दोबारा परीक्षण 7.5 9.3 $0.209 तुलना करें
2026-04-26 10:50 दोबारा परीक्षण 7.5 8.4 $0.201 वर्तमान रन
2026-04-25 21:53 पहला रन 8.2 लागू नहीं $0.329 तुलना करें

रन तुलना

रनस्कोरसंगतिविश्वसनीयतासही परीक्षणअस्थिर टेस्टकुल आउटपुट टोकनकुल लागतप्रतिक्रिया समय (औसत)
2026-04-26 10:50 · दोबारा परीक्षण7.58.08.411/18457,875$0.20160.02s
2026-05-22 00:54 · सूट बदला गया6.68.39.011/20465,985$0.21258.93s
अंतर+0.9-0.3-0.600-8110-$0.012+1083ms

इन दो रन में अलग-अलग बेंचमार्क सूट इस्तेमाल हुए थे, इसलिए अंतर मॉडल बदलाव और सूट बदलाव दोनों को दर्शाते हैं।

चार्ट

पहले मॉडल चुनें, फिर दूसरा मॉडल क्लिक करके साइड-बाय-साइड पेज खोलें।

कुल आउटपुट टोकन

स्कोर vs कुल आउटपुट टोकन

त्वरित तुलना

श्रेणी विवरण

श्रेणी स्कोर संगति सही परीक्षण
एंटी-एआई ट्रिक्स 8.3 10.0
कोडिंग 3.0 0.0
संयुक्त 10.0 10.0
डेटा पार्सिंग और निष्कर्षण 10.0 10.0
डोमेन-विशिष्ट 3.2 6.9
Samanya Buddhimatta 6.1 3.1
निर्देश पालन 10.0 10.0
पहेली समाधान 8.0 7.0
टूल कॉलिंग 10.0 10.0

तुलना किए गए मॉडल