#67 Gemini 2.5 Flash
none
अमान्य SVG
- लागत
- $0.164
- समय
- 215.5s
- टोकन
- 65,659 tok
Google
रिलीज़: 2025-06-17
परीक्षण किया गया: 2026-04-11 01:44
google/gemini-2.5-flash::none
~350B कुल (~20B सक्रिय)MoEबंद स्रोतअनुमानित
(medium)
(none)
सारांश
Gemini 2.5 Flash AI BENCHY पर 6.2 स्कोर करता है और #67 पर है। इसकी reliability लागू नहीं, pass rate 44.4%, कुल लागत $0.013, और औसत response time 903ms है।
Gemini 2.5 Flash को अलग क्या बनाता है: यह डोमेन-विशिष्ट में सबसे अलग दिखता है, जहाँ इसकी रैंक #1 है; जबकि एंटी-एआई ट्रिक्स इसकी सबसे कमजोर जगह है, जहाँ यह #17 पर है। इस score range के लिए इसकी कुल benchmark लागत असामान्य रूप से कम है। यह समान मॉडलों की तुलना में काफ़ी तेज है।
मॉडल विवरण
शोध की तारीख: 2026-08-12
- पैरामीटर
- ~350B कुल (~20B सक्रिय)
- आर्किटेक्चर
- MoE
- उपलब्धता
- बंद स्रोत
- लाइसेंस
- -
सार्वजनिक साक्ष्यों पर आधारित सर्वोत्तम अनुमान; प्रदाता ने सभी मान जारी नहीं किए हैं।
6.2
संगति
9.2
लागू नहीं
$0.013
कुल आउटपुट टोकन
1,726
कुल इनपुट टोकन
0
इनपुट कीमत
$0.300 / 1M
आउटपुट कीमत
$2.500 / 1M
कैश पढ़ने की कीमत
लागू नहीं
कैश लिखने की कीमत
लागू नहीं
कैश की कीमतें इनपुट टोकन पर लागू होती हैं। पढ़ने पर कैश किए गए प्रॉम्प्ट का दोबारा उपयोग होता है; लिखने पर वे सहेजे जाते हैं और अतिरिक्त लागत हो सकती है। आउटपुट टोकन पर आउटपुट की कीमत लागू होती है।
अस्थिर टेस्ट
2
अस्थिर टेस्ट में रनों के बीच मिले-जुले परिणाम रहे (कम से कम एक पास और एक फेल)।
Hamster playing table tennis
Prompt: Create a detailed SVG illustration of a hamster playing table tennis.
रन इतिहास
| परीक्षण किया गया | स्कोर | विश्वसनीयता | सही परीक्षण | कुल लागत | तुलना करें |
|---|---|---|---|---|---|
| 2026-08-14 02:44 दोबारा परीक्षण | 6.0 | 10.0 | $0.017 | तुलना करें | |
| 2026-07-16 22:58 नया टेस्ट जोड़ा गया | 6.2 | 10.0 | $0.017 | तुलना करें | |
| 2026-06-04 14:00 नया टेस्ट जोड़ा गया | 6.2 | 10.0 | $0.016 | तुलना करें | |
| 2026-05-22 00:28 सूट बदला गया | 6.2 | 10.0 | $0.015 | तुलना करें | |
| 2026-04-11 01:44 पहला दर्ज रन | 6.2 | लागू नहीं | $0.013 | वर्तमान रन |
रन तुलना
| रन | बेंचमार्क कवरेज | स्कोर | संगति | विश्वसनीयता | सही परीक्षण | अस्थिर टेस्ट | कुल आउटपुट टोकन | कुल इनपुट टोकन | कुल लागत | प्रतिक्रिया समय (औसत) |
|---|---|---|---|---|---|---|---|---|---|---|
| 2026-04-11 01:44 · पहला दर्ज रन | 54/54 प्रयास | 6.2 | 9.2 | लागू नहीं | 7/18 | 2 | 1,726 | 0 | $0.013 | 903ms |
| 2026-05-22 00:28 · सूट बदला गया | 60/60 प्रयास | 6.2 | 9.2 | 10.0 | 8/20 | 2 | 1,762 | 0 | $0.015 | 893ms |
| अंतर | — | 0.0 | 0.0 | -1 | 0 | -36 | 0 | -$0.002 | +10ms |
बेंचमार्क कवरेज अलग है: 54/54 प्रयास (लक्ष्य: प्रति टेस्ट 3 दोहराव) बनाम 60/60 प्रयास (लक्ष्य: प्रति टेस्ट 3 दोहराव)। कुल और दोहराव-संवेदनशील मेट्रिक सीधे तुलना योग्य नहीं हैं।
इन दो रन में अलग-अलग बेंचमार्क सूट इस्तेमाल हुए थे, इसलिए अंतर मॉडल बदलाव और सूट बदलाव दोनों को दर्शाते हैं।
चार्ट
पहले मॉडल चुनें, फिर दूसरा मॉडल क्लिक करके साइड-बाय-साइड पेज खोलें।
स्कोर के अनुसार शीर्ष मॉडल
स्कोर vs कुल लागत
प्रतिक्रिया समय (औसत)
स्कोर vs प्रतिक्रिया समय (औसत)
कुल आउटपुट टोकन
स्कोर vs कुल आउटपुट टोकन
त्वरित तुलना
Gemini 2.5 FlashnonevsLing 3.1 FlashnoneGemini 2.5 FlashnonevsGPT-6 LunanoneGemini 2.5 FlashnonevsKimi K2.6noneGemini 2.5 FlashnonevsGemma 4 26B A4Bnoneनिःशुल्क उपलब्धGemini 2.5 FlashnonevsNemotron 3 Supermediumनिःशुल्क उपलब्धGemini 2.5 FlashnonevsSeed-2.0-CodenoneGemini 2.5 FlashnonevsNemotron 3.5 Super VLnoneनिःशुल्क उपलब्धGemini 2.5 FlashnonevsQwen3.8 27Bnoneनिःशुल्क उपलब्धGemini 2.5 FlashnonevsQwen3.5-35B-A3BnoneGemini 2.5 FlashnonevsNorth Mini Codemediumनिःशुल्क उपलब्ध
श्रेणी विवरण
| श्रेणी | स्कोर | संगति | सही परीक्षण |
|---|---|---|---|
| एंटी-एआई ट्रिक्स | 3.0 | 10.0 | |
| कोडिंग | 10.0 | 10.0 | |
| संयुक्त | 3.0 | 10.0 | |
| डेटा पार्सिंग और निष्कर्षण | 10.0 | 10.0 | |
| डोमेन-विशिष्ट | 5.9 | 7.2 | |
| Samanya Buddhimatta | 5.0 | 10.0 | |
| निर्देश पालन | 8.0 | 6.8 | |
| पहेली समाधान | 5.7 | 10.0 | |
| टूल कॉलिंग | 10.0 | 10.0 |