#38 Gemini 2.5 Flash
medium
अमान्य SVG
- लागत
- $0.000
- समय
- 274.0s
- टोकन
- 0 tok
Google
रिलीज़: 2025-06-17
परीक्षण किया गया: 2026-05-22 00:32
google/gemini-2.5-flash::medium
~350B कुल (~20B सक्रिय)MoEबंद स्रोतअनुमानित
(medium)
(none)
सारांश
Gemini 2.5 Flash AI BENCHY पर 7.7 स्कोर करता है और #38 पर है। इसकी reliability 10.0, pass rate 68.3%, कुल लागत $0.358, और औसत response time 15.69s है।
Gemini 2.5 Flash को अलग क्या बनाता है: यह डोमेन-विशिष्ट में सबसे अलग दिखता है, जहाँ इसकी रैंक #2 है; जबकि कोडिंग इसकी सबसे कमजोर जगह है, जहाँ यह #18 पर है। इस score range के लिए इसकी कुल benchmark लागत असामान्य रूप से कम है।
मॉडल विवरण
शोध की तारीख: 2026-08-12
- पैरामीटर
- ~350B कुल (~20B सक्रिय)
- आर्किटेक्चर
- MoE
- उपलब्धता
- बंद स्रोत
- लाइसेंस
- -
सार्वजनिक साक्ष्यों पर आधारित सर्वोत्तम अनुमान; प्रदाता ने सभी मान जारी नहीं किए हैं।
7.7
संगति
9.6
10.0
$0.358
कुल आउटपुट टोकन
139,179
कुल इनपुट टोकन
0
इनपुट कीमत
$0.300 / 1M
आउटपुट कीमत
$2.500 / 1M
अस्थिर टेस्ट
1
अस्थिर टेस्ट में रनों के बीच मिले-जुले परिणाम रहे (कम से कम एक पास और एक फेल)।
Hamster playing table tennis
Prompt: Create a detailed SVG illustration of a hamster playing table tennis.
रन इतिहास
| परीक्षण किया गया | स्कोर | विश्वसनीयता | सही परीक्षण | कुल लागत | तुलना करें |
|---|---|---|---|---|---|
| 2026-08-14 02:45 दोबारा परीक्षण | 8.2 | 10.0 | $0.644 | तुलना करें | |
| 2026-07-16 23:00 नया टेस्ट जोड़ा गया | 8.2 | 10.0 | $0.643 | तुलना करें | |
| 2026-06-04 14:01 नया टेस्ट जोड़ा गया | 7.8 | 10.0 | $0.379 | तुलना करें | |
| 2026-05-22 00:32 सूट बदला गया | 7.7 | 10.0 | $0.358 | वर्तमान रन | |
| 2026-04-11 01:44 पहला दर्ज रन | 8.2 | लागू नहीं | $0.319 | तुलना करें |
इस रन में अलग बेंचमार्क सूट इस्तेमाल हुआ था। ऐतिहासिक बदलाव पढ़ते समय सूट बदलाव को ध्यान में रखें।
रन तुलना
| रन | बेंचमार्क कवरेज | स्कोर | संगति | विश्वसनीयता | सही परीक्षण | अस्थिर टेस्ट | कुल आउटपुट टोकन | कुल इनपुट टोकन | कुल लागत | प्रतिक्रिया समय (औसत) |
|---|---|---|---|---|---|---|---|---|---|---|
| 2026-05-22 00:32 · सूट बदला गया | 60/60 प्रयास | 7.7 | 9.6 | 10.0 | 13/20 | 1 | 139,179 | 0 | $0.358 | 15.69s |
| 2026-04-11 01:44 · पहला दर्ज रन | 54/54 प्रयास | 8.2 | 9.5 | लागू नहीं | 13/18 | 1 | 124,171 | 0 | $0.319 | 12.12s |
| अंतर | — | -0.5 | +0.1 | 0 | 0 | +15008 | 0 | +$0.039 | +3570ms |
बेंचमार्क कवरेज अलग है: 60/60 प्रयास (लक्ष्य: प्रति टेस्ट 3 दोहराव) बनाम 54/54 प्रयास (लक्ष्य: प्रति टेस्ट 3 दोहराव)। कुल और दोहराव-संवेदनशील मेट्रिक सीधे तुलना योग्य नहीं हैं।
इन दो रन में अलग-अलग बेंचमार्क सूट इस्तेमाल हुए थे, इसलिए अंतर मॉडल बदलाव और सूट बदलाव दोनों को दर्शाते हैं।
चार्ट
पहले मॉडल चुनें, फिर दूसरा मॉडल क्लिक करके साइड-बाय-साइड पेज खोलें।
स्कोर के अनुसार शीर्ष मॉडल
स्कोर vs कुल लागत
प्रतिक्रिया समय (औसत)
स्कोर vs प्रतिक्रिया समय (औसत)
कुल आउटपुट टोकन
स्कोर vs कुल आउटपुट टोकन
त्वरित तुलना
Gemini 2.5 FlashmediumvsMuse Spark 1.1lowGemini 2.5 FlashmediumvsClaude Sonnet 5mediumGemini 2.5 FlashmediumvsInkling SmallhighGemini 2.5 FlashmediumvsQwen3.8 2.4T A95BlowGemini 2.5 FlashmediumvsSeed 2.1 TurbomediumGemini 2.5 FlashmediumvsGPT-5 MinimediumGemini 2.5 FlashmediumvsQwen3.8 27BhighGemini 2.5 FlashmediumvsMuse Glimmer 30BxhighGemini 2.5 FlashmediumvsGPT-5.2mediumGemini 2.5 FlashmediumvsInklinghigh
श्रेणी विवरण
| श्रेणी | स्कोर | संगति | सही परीक्षण |
|---|---|---|---|
| एंटी-एआई ट्रिक्स | 8.4 | 10.0 | |
| कोडिंग | 6.6 | 10.0 | |
| संयुक्त | 10.0 | 10.0 | |
| डेटा पार्सिंग और निष्कर्षण | 10.0 | 10.0 | |
| डोमेन-विशिष्ट | 5.9 | 7.2 | |
| Samanya Buddhimatta | 4.8 | 10.0 | |
| निर्देश पालन | 9.8 | 10.0 | |
| पहेली समाधान | 7.7 | 10.0 | |
| टूल कॉलिंग | 10.0 | 10.0 | |
| सामान्य ज्ञान | 3.0 | 10.0 |