AI BENCHY
Advertise here
#80

DeepSeek V4 Pro

DeepSeek रिलीज़: 2026-04-24 परीक्षण किया गया: 2026-05-22 00:54 deepseek/deepseek-v4-pro::high
(high) (none)

सारांश

DeepSeek V4 Pro AI BENCHY पर 6.6 स्कोर करता है और #80 पर है। इसकी reliability 9.0, pass rate 66.7%, कुल लागत $0.212, और औसत response time 58.93s है।

संगति

8.3

कुल आउटपुट टोकन

65,985

कुल इनपुट टोकन

0

इनपुट कीमत

$0.435 / 1M

आउटपुट कीमत

$0.870 / 1M

सही परीक्षण

गलत टेस्ट: 9

प्रति प्रयास पास दर: 66.7%

अस्थिर टेस्ट

4

अस्थिर टेस्ट में रनों के बीच मिले-जुले परिणाम रहे (कम से कम एक पास और एक फेल)।

प्रतिक्रिया समय (औसत)

58.93s

प्रतिक्रिया समय (अधिकतम): 358.35s

प्रतिक्रिया समय (कुल): 1119.75s

Generation showcase

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#80 DeepSeek V4 Pro

high
Cost
$0.023
Time
257.6s
Tokens
14,870 tok

रन इतिहास

परीक्षण किया गया स्कोर विश्वसनीयता सही परीक्षण कुल लागत तुलना करें
2026-06-04 14:38 नया टेस्ट जोड़ा गया 6.0 8.9 $0.079 तुलना करें
2026-05-22 00:54 सूट बदला गया 6.6 9.0 $0.212 वर्तमान रन
2026-04-29 14:47 दोबारा परीक्षण 7.5 9.3 $0.209 तुलना करें
2026-04-26 10:50 दोबारा परीक्षण 7.5 8.4 $0.201 तुलना करें
2026-04-25 21:53 पहला रन 8.2 लागू नहीं $0.329 तुलना करें

इस रन में अलग बेंचमार्क सूट इस्तेमाल हुआ था। ऐतिहासिक बदलाव पढ़ते समय सूट बदलाव को ध्यान में रखें।

रन तुलना

रनस्कोरसंगतिविश्वसनीयतासही परीक्षणअस्थिर टेस्टकुल आउटपुट टोकनकुल इनपुट टोकनकुल लागतप्रतिक्रिया समय (औसत)
2026-05-22 00:54 · सूट बदला गया6.68.39.011/20465,9850$0.21258.93s
2026-04-29 14:47 · दोबारा परीक्षण7.58.09.311/18462,1250$0.20960.03s
अंतर-0.9+0.3-0.300+38600+$0.004-1100ms

इन दो रन में अलग-अलग बेंचमार्क सूट इस्तेमाल हुए थे, इसलिए अंतर मॉडल बदलाव और सूट बदलाव दोनों को दर्शाते हैं।

चार्ट

पहले मॉडल चुनें, फिर दूसरा मॉडल क्लिक करके साइड-बाय-साइड पेज खोलें।

कुल आउटपुट टोकन

स्कोर vs कुल आउटपुट टोकन

त्वरित तुलना

श्रेणी विवरण

श्रेणी स्कोर संगति सही परीक्षण
एंटी-एआई ट्रिक्स 7.4 10.0
कोडिंग 2.8 5.0
संयुक्त 10.0 10.0
डेटा पार्सिंग और निष्कर्षण 8.8 10.0
डोमेन-विशिष्ट 3.0 6.9
Samanya Buddhimatta 6.1 3.1
निर्देश पालन 10.0 10.0
पहेली समाधान 7.4 7.2
टूल कॉलिंग 10.0 10.0
सामान्य ज्ञान 3.0 10.0

तुलना किए गए मॉडल