AI BENCHY
Advertise here
#259

Mercury 2.5 Preview

Inception रिलीज़: 2026-09-02 परीक्षण किया गया: 2026-09-02 02:04 inception/mercury-2.5-preview::none
~100Bअन्यबंद स्रोतअनुमानित

सारांश

Mercury 2.5 Preview AI BENCHY पर 4.9 स्कोर करता है और #259 पर है। इसकी reliability 10.0, pass rate 30.3%, कुल लागत $0.018, और औसत response time 3.51s है।

मॉडल विवरण

शोध की तारीख: 2026-09-02

अनुमानित
पैरामीटर
~100B
आर्किटेक्चर
अन्य
उपलब्धता
बंद स्रोत
लाइसेंस
-

सार्वजनिक साक्ष्यों पर आधारित सर्वोत्तम अनुमान; प्रदाता ने सभी मान जारी नहीं किए हैं।

संगति

8.3

कुल आउटपुट टोकन

82,585

कुल इनपुट टोकन

130,296

इनपुट कीमत

$0.040 / 1M

आउटपुट कीमत

$0.150 / 1M

सही परीक्षण

गलत टेस्ट: 18

प्रति प्रयास पास दर: 30.3%

अस्थिर टेस्ट

5

अस्थिर टेस्ट में रनों के बीच मिले-जुले परिणाम रहे (कम से कम एक पास और एक फेल)।

प्रतिक्रिया समय (औसत)

3.51s

प्रतिक्रिया समय (अधिकतम): 60.70s

प्रतिक्रिया समय (कुल): 77.28s

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#259 Mercury 2.5 Preview

none
अमान्य SVG
लागत
$0.001
समय
3.3s
टोकन
3,122 tok

चार्ट

पहले मॉडल चुनें, फिर दूसरा मॉडल क्लिक करके साइड-बाय-साइड पेज खोलें।

कुल आउटपुट टोकन

स्कोर vs कुल आउटपुट टोकन

त्वरित तुलना

श्रेणी विवरण

श्रेणी स्कोर संगति सही परीक्षण
एंटी-एआई ट्रिक्स 3.8 8.3
कोडिंग 4.7 7.9
संयुक्त 3.0 10.0
डेटा पार्सिंग और निष्कर्षण 6.3 5.8
डोमेन-विशिष्ट 3.6 7.2
Samanya Buddhimatta 5.0 10.0
निर्देश पालन 6.3 10.0
पहेली समाधान 5.6 7.4
टूल कॉलिंग 10.0 10.0
सामान्य ज्ञान 3.0 10.0

तुलना किए गए मॉडल