#2 Gemini 3.5 Flash
low- खर्च
- $0.068
- वेळ
- 39.1s
- टोकन्स
- 7,588 tok
Google
प्रकाशन: 2026-05-19
चाचणी तारीख: 2026-05-19 23:35
google/gemini-3.5-flash::low
~500B एकूण (~20B सक्रिय)MoEबंद स्रोतअंदाजित
सारांश
Gemini 3.5 Flash AI BENCHY वर 9.6 स्कोर करते आणि #2 वर आहे. याची reliability 10.0, pass rate 94.7%, एकूण खर्च $0.245, आणि सरासरी response time 2.84s आहे.
Gemini 3.5 Flash खास का आहे: हे डोमेन-विशिष्ट मध्ये सर्वाधिक उठून दिसते, जिथे त्याचा rank #2 आहे; तर सूचनांचे पालन हा सर्वात कमकुवत भाग आहे, rank #10. हे एकूणात सर्वाधिक rank असलेल्या मॉडेल्सपैकी एक आहे. या score range साठी एकूण benchmark खर्च असामान्यपणे कमी आहे.
मॉडेलची माहिती
संशोधन दिनांक: 2026-08-12
- पॅरामीटर्स
- ~500B एकूण (~20B सक्रिय)
- आर्किटेक्चर
- MoE
- उपलब्धता
- बंद स्रोत
- परवाना
- -
सार्वजनिक पुराव्यावर आधारित सर्वोत्तम अंदाज; प्रदात्याने सर्व मूल्ये जाहीर केलेली नाहीत.
9.6
सुसंगतता
10.0
10.0
$0.245
एकूण आउटपुट टोकन्स
22,248
एकूण इनपुट टोकन्स
0
इनपुट किंमत
$1.500 / 1M
आउटपुट किंमत
$9.000 / 1M
अस्थिर चाचण्या
0
अस्थिर चाचण्यांत रन्समध्ये मिश्र निकाल असतात (किमान एक पास आणि एक फेल).
Hamster playing table tennis
Prompt: Create a detailed SVG illustration of a hamster playing table tennis.
रन इतिहास
| चाचणी तारीख | स्कोअर | विश्वसनीयता | बरोबर चाचण्या | एकूण खर्च | तुलना करा |
|---|---|---|---|---|---|
| 2026-08-14 02:46 पुन्हा चाचणी | 8.8 | 10.0 | $0.449 | तुलना करा | |
| 2026-07-16 22:57 नवीन चाचणी जोडली | 8.9 | 10.0 | $0.433 | तुलना करा | |
| 2026-06-04 14:02 नवीन चाचणी जोडली | 9.4 | 10.0 | $0.349 | तुलना करा | |
| 2026-05-22 00:28 सूट बदलला | 9.3 | 10.0 | $0.285 | तुलना करा | |
| 2026-05-19 23:35 पहिला रन | 9.6 | 10.0 | $0.245 | सध्याची रन |
रन तुलना
| रन | बेंचमार्क कव्हरेज | स्कोअर | सुसंगतता | विश्वसनीयता | बरोबर चाचण्या | अस्थिर चाचण्या | एकूण आउटपुट टोकन्स | एकूण इनपुट टोकन्स | एकूण खर्च | प्रतिसाद वेळ (सरासरी) |
|---|---|---|---|---|---|---|---|---|---|---|
| 2026-05-19 23:35 · पहिला रन | 57/57 प्रयत्न | 9.6 | 10.0 | 10.0 | 18/19 | 0 | 22,248 | 0 | $0.245 | 2.84s |
| 2026-07-16 22:57 · नवीन चाचणी जोडली | 66/66 प्रयत्न | 8.9 | 9.7 | 10.0 | 19/22 | 1 | 33,421 | 87,817 | $0.433 | 5.55s |
| फरक | — | +0.7 | +0.3 | 0.0 | -1 | -1 | -11173 | -87817 | -$0.188 | -2712ms |
बेंचमार्क कव्हरेज वेगळे आहे: 57/57 प्रयत्न (लक्ष्य: प्रत्येक चाचणीसाठी 3 पुनरावृत्ती) विरुद्ध 66/66 प्रयत्न (लक्ष्य: प्रत्येक चाचणीसाठी 3 पुनरावृत्ती). एकूण मूल्ये आणि पुनरावृत्तीवर अवलंबून मेट्रिक्स थेट तुलना करता येत नाहीत.
या दोन रनमध्ये वेगवेगळे बेंचमार्क सूट वापरले गेले, त्यामुळे फरकांमध्ये मॉडेलमधील आणि सूटमधील दोन्ही बदल दिसतात.
चार्ट्स
पहिले मॉडेल निवडा, नंतर दुसरे मॉडेल क्लिक करून बाजू-बाजूची तुलना पेज उघडा.
स्कोअरनुसार शीर्ष मॉडेल्स
स्कोअर vs एकूण खर्च
प्रतिसाद वेळ (सरासरी)
स्कोअर vs प्रतिसाद वेळ (सरासरी)
एकूण आउटपुट टोकन्स
स्कोअर vs एकूण आउटपुट टोकन्स
झटपट तुलना
Gemini 3.5 FlashlowvsSeed 2.1 TurbohighGemini 3.5 FlashlowvsGemini 3.5 Flash LitehighGemini 3.5 FlashlowvsGPT-5.3-CodexmediumGemini 3.5 FlashlowvsClaude Opus 4.8mediumGemini 3.5 FlashlowvsGrok 4.5highGemini 3.5 FlashlowvsClaude Opus 5lowGemini 3.5 FlashlowvsQwen3.8 MaxmediumGemini 3.5 FlashlowvsGemini 3.6 FlashlowGemini 3.5 FlashlowvsGPT-5.5mediumGemini 3.5 FlashlowvsClaude Opus 4.7medium
श्रेणीवार तपशील
| श्रेणी | स्कोअर | सुसंगतता | बरोबर चाचण्या |
|---|---|---|---|
| अँटी-एआय युक्त्या | 10.0 | 10.0 | |
| कोडिंग | 10.0 | 10.0 | |
| संयुक्त | 10.0 | 10.0 | |
| डेटा पार्सिंग आणि निष्कर्षण | 10.0 | 10.0 | |
| डोमेन-विशिष्ट | 7.7 | 10.0 | |
| Samanya Buddhimatta | 10.0 | 10.0 | |
| सूचनांचे पालन | 9.9 | 10.0 | |
| कोडी सोडवणे | 10.0 | 10.0 | |
| टूल कॉलिंग | 10.0 | 10.0 | |
| सामान्य ज्ञान | 10.0 | 10.0 |