#21 Gemini 3.5 Flash
minimal- लागत
- $0.041
- समय
- 20.4s
- टोकन
- 4,608 tok
सारांश
Gemini 3.5 Flash AI BENCHY पर 8.1 स्कोर करता है और #21 पर है। इसकी reliability 10.0, pass rate 75.4%, कुल लागत $0.070, और औसत response time 1.37s है।
Gemini 3.5 Flash को अलग क्या बनाता है: यह डोमेन-विशिष्ट में सबसे अलग दिखता है, जहाँ इसकी रैंक #1 है; जबकि एंटी-एआई ट्रिक्स इसकी सबसे कमजोर जगह है, जहाँ यह #18 पर है। इस score range के लिए इसकी कुल benchmark लागत असामान्य रूप से कम है। यह समान मॉडलों की तुलना में काफ़ी तेज है।
शोध की तारीख: 2026-08-12
सार्वजनिक साक्ष्यों पर आधारित सर्वोत्तम अनुमान; प्रदाता ने सभी मान जारी नहीं किए हैं।
8.1
संगति
9.6
10.0
$0.070
कुल आउटपुट टोकन
2,262
कुल इनपुट टोकन
0
इनपुट कीमत
$1.500 / 1M
आउटपुट कीमत
$9.000 / 1M
कैश पढ़ने की कीमत
लागू नहीं
कैश लिखने की कीमत
लागू नहीं
कैश की कीमतें इनपुट टोकन पर लागू होती हैं। पढ़ने पर कैश किए गए प्रॉम्प्ट का दोबारा उपयोग होता है; लिखने पर वे सहेजे जाते हैं और अतिरिक्त लागत हो सकती है। आउटपुट टोकन पर आउटपुट की कीमत लागू होती है।
अस्थिर टेस्ट
1
अस्थिर टेस्ट में रनों के बीच मिले-जुले परिणाम रहे (कम से कम एक पास और एक फेल)।
Prompt: Create a detailed SVG illustration of a hamster playing table tennis.
रन इतिहास
| परीक्षण किया गया | स्कोर | विश्वसनीयता | सही परीक्षण | कुल लागत | तुलना करें |
|---|---|---|---|---|---|
| 2026-08-14 02:46 दोबारा परीक्षण | 6.7 | 10.0 | $0.300 | तुलना करें | |
| 2026-07-16 22:54 नया टेस्ट जोड़ा गया | 6.8 | 10.0 | $0.300 | तुलना करें | |
| 2026-06-04 14:01 नया टेस्ट जोड़ा गया | 7.7 | 10.0 | $0.108 | तुलना करें | |
| 2026-05-22 00:28 सूट बदला गया | 7.9 | 10.0 | $0.103 | तुलना करें | |
| 2026-05-19 23:35 पहला रन | 8.1 | 10.0 | $0.070 | वर्तमान रन |
रन तुलना
| रन | बेंचमार्क कवरेज | स्कोर | संगति | विश्वसनीयता | सही परीक्षण | अस्थिर टेस्ट | कुल आउटपुट टोकन | कुल इनपुट टोकन | कुल लागत | प्रतिक्रिया समय (औसत) |
|---|---|---|---|---|---|---|---|---|---|---|
| 2026-05-19 23:35 · पहला रन | 57/57 प्रयास | 8.1 | 9.6 | 10.0 | 14/19 | 1 | 2,262 | 0 | $0.070 | 1.37s |
| 2026-08-14 02:46 · दोबारा परीक्षण | 66/66 प्रयास | 6.7 | 9.6 | 10.0 | 13/22 | 1 | 16,454 | 100,762 | $0.300 | 2.65s |
| अंतर | — | +1.4 | 0.0 | 0.0 | +1 | 0 | -14192 | -100762 | -$0.231 | -1276ms |
बेंचमार्क कवरेज अलग है: 57/57 प्रयास (लक्ष्य: प्रति टेस्ट 3 दोहराव) बनाम 66/66 प्रयास (लक्ष्य: प्रति टेस्ट 3 दोहराव)। कुल और दोहराव-संवेदनशील मेट्रिक सीधे तुलना योग्य नहीं हैं।
इन दो रन में अलग-अलग बेंचमार्क सूट इस्तेमाल हुए थे, इसलिए अंतर मॉडल बदलाव और सूट बदलाव दोनों को दर्शाते हैं।
पहले मॉडल चुनें, फिर दूसरा मॉडल क्लिक करके साइड-बाय-साइड पेज खोलें।
| श्रेणी | स्कोर | संगति | सही परीक्षण |
|---|---|---|---|
| एंटी-एआई ट्रिक्स | 6.5 | 10.0 | |
| कोडिंग | 10.0 | 10.0 | |
| संयुक्त | 3.0 | 10.0 | |
| डेटा पार्सिंग और निष्कर्षण | 10.0 | 10.0 | |
| डोमेन-विशिष्ट | 10.0 | 10.0 | |
| Samanya Buddhimatta | 10.0 | 10.0 | |
| निर्देश पालन | 6.4 | 5.8 | |
| पहेली समाधान | 10.0 | 10.0 | |
| टूल कॉलिंग | 10.0 | 10.0 | |
| सामान्य ज्ञान | 3.0 | 10.0 |