Advertise here
#16

Gemini 2.5 Flash

Google रिलीज़: 2025-06-17 परीक्षण किया गया: 2026-04-11 01:44 google/gemini-2.5-flash::medium
~350B कुल (~20B सक्रिय)MoEबंद स्रोतअनुमानित
(medium) (none)

सारांश

Gemini 2.5 Flash AI BENCHY पर 8.2 स्कोर करता है और #16 पर है। इसकी reliability लागू नहीं, pass rate 75.9%, कुल लागत $0.319, और औसत response time 12.12s है।

Gemini 2.5 Flash को अलग क्या बनाता है: इस score range के लिए इसकी कुल benchmark लागत असामान्य रूप से कम है।

मॉडल विवरण

शोध की तारीख: 2026-08-12

अनुमानित
पैरामीटर
~350B कुल (~20B सक्रिय)
आर्किटेक्चर
MoE
उपलब्धता
बंद स्रोत
लाइसेंस
-

सार्वजनिक साक्ष्यों पर आधारित सर्वोत्तम अनुमान; प्रदाता ने सभी मान जारी नहीं किए हैं।

संगति

9.5

विश्वसनीयता

लागू नहीं

कुल आउटपुट टोकन

124,171

कुल इनपुट टोकन

0

इनपुट कीमत

$0.300 / 1M

आउटपुट कीमत

$2.500 / 1M

कैश पढ़ने की कीमत

लागू नहीं

कैश लिखने की कीमत

लागू नहीं

कैश की कीमतें इनपुट टोकन पर लागू होती हैं। पढ़ने पर कैश किए गए प्रॉम्प्ट का दोबारा उपयोग होता है; लिखने पर वे सहेजे जाते हैं और अतिरिक्त लागत हो सकती है। आउटपुट टोकन पर आउटपुट की कीमत लागू होती है।

सही परीक्षण

गलत टेस्ट: 5

प्रति प्रयास पास दर: 75.9%

अस्थिर टेस्ट

1

अस्थिर टेस्ट में रनों के बीच मिले-जुले परिणाम रहे (कम से कम एक पास और एक फेल)।

प्रतिक्रिया समय (औसत)

12.12s

प्रतिक्रिया समय (अधिकतम): 95.48s

प्रतिक्रिया समय (कुल): 218.12s

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#16 Gemini 2.5 Flash

medium
No output was saved. The original provider response or failure reason is unavailable.
लागत
$0.000
समय
274.0s
टोकन
0 tok

रन इतिहास

परीक्षण किया गया स्कोर विश्वसनीयता सही परीक्षण कुल लागत तुलना करें
2026-08-14 02:45 दोबारा परीक्षण 8.2 10.0 $0.644 तुलना करें
2026-07-16 23:00 नया टेस्ट जोड़ा गया 8.2 10.0 $0.643 तुलना करें
2026-06-04 14:01 नया टेस्ट जोड़ा गया 7.8 10.0 $0.379 तुलना करें
2026-05-22 00:32 सूट बदला गया 7.7 10.0 $0.358 तुलना करें
2026-04-11 01:44 पहला दर्ज रन 8.2 लागू नहीं $0.319 वर्तमान रन

रन तुलना

रनबेंचमार्क कवरेजस्कोरसंगतिविश्वसनीयतासही परीक्षणअस्थिर टेस्टकुल आउटपुट टोकनकुल इनपुट टोकनकुल लागतप्रतिक्रिया समय (औसत)
2026-04-11 01:44 · पहला दर्ज रन54/54 प्रयास8.29.5लागू नहीं13/181124,1710$0.31912.12s
2026-07-16 23:00 · नया टेस्ट जोड़ा गया66/66 प्रयास8.29.610.015/221241,203132,498$0.64321.18s
अंतर—0.0-0.1-20-117032-132498-$0.324-9059ms

बेंचमार्क कवरेज अलग है: 54/54 प्रयास (लक्ष्य: प्रति टेस्ट 3 दोहराव) बनाम 66/66 प्रयास (लक्ष्य: प्रति टेस्ट 3 दोहराव)। कुल और दोहराव-संवेदनशील मेट्रिक सीधे तुलना योग्य नहीं हैं।

इन दो रन में अलग-अलग बेंचमार्क सूट इस्तेमाल हुए थे, इसलिए अंतर मॉडल बदलाव और सूट बदलाव दोनों को दर्शाते हैं।

चार्ट

पहले मॉडल चुनें, फिर दूसरा मॉडल क्लिक करके साइड-बाय-साइड पेज खोलें।

कुल आउटपुट टोकन

स्कोर vs कुल आउटपुट टोकन

त्वरित तुलना

श्रेणी विवरण

श्रेणी स्कोर संगति सही परीक्षण
एंटी-एआई ट्रिक्स 8.4 10.0
कोडिंग 10.0 10.0
संयुक्त 10.0 10.0
डेटा पार्सिंग और निष्कर्षण 10.0 10.0
डोमेन-विशिष्ट 5.9 7.2
Samanya Buddhimatta 4.8 10.0
निर्देश पालन 9.8 10.0
पहेली समाधान 7.7 10.0
टूल कॉलिंग 10.0 10.0

तुलना किए गए मॉडल