#8 Gemini 3.5 Flash
none- खर्च
- $0.225
- वेळ
- 125.5s
- टोकन्स
- 25,004 tok
Google
प्रकाशन: 2026-05-19
चाचणी तारीख: 2026-05-22 00:29
google/gemini-3.5-flash::none
~500B एकूण (~20B सक्रिय)MoEबंद स्रोतअंदाजित
सारांश
Gemini 3.5 Flash AI BENCHY वर 8.9 स्कोर करते आणि #8 वर आहे. याची reliability 10.0, pass rate 90.2%, एकूण खर्च $0.924, आणि सरासरी response time 9.05s आहे.
Gemini 3.5 Flash खास का आहे: हे डेटा पार्सिंग आणि निष्कर्षण मध्ये सर्वाधिक उठून दिसते, जिथे त्याचा rank #1 आहे; तर संयुक्त हा सर्वात कमकुवत भाग आहे, rank #17.
मॉडेलची माहिती
संशोधन दिनांक: 2026-08-12
- पॅरामीटर्स
- ~500B एकूण (~20B सक्रिय)
- आर्किटेक्चर
- MoE
- उपलब्धता
- बंद स्रोत
- परवाना
- -
सार्वजनिक पुराव्यावर आधारित सर्वोत्तम अंदाज; प्रदात्याने सर्व मूल्ये जाहीर केलेली नाहीत.
8.9
सुसंगतता
8.6
10.0
$0.924
एकूण आउटपुट टोकन्स
100,760
एकूण इनपुट टोकन्स
0
इनपुट किंमत
$1.500 / 1M
आउटपुट किंमत
$9.000 / 1M
अस्थिर चाचण्या
3
अस्थिर चाचण्यांत रन्समध्ये मिश्र निकाल असतात (किमान एक पास आणि एक फेल).
Hamster playing table tennis
Prompt: Create a detailed SVG illustration of a hamster playing table tennis.
रन इतिहास
| चाचणी तारीख | स्कोअर | विश्वसनीयता | बरोबर चाचण्या | एकूण खर्च | तुलना करा |
|---|---|---|---|---|---|
| 2026-08-14 02:46 पुन्हा चाचणी | 6.9 | 10.0 | $1.093 | तुलना करा | |
| 2026-07-16 22:53 नवीन चाचणी जोडली | 7.0 | 10.0 | $1.079 | तुलना करा | |
| 2026-06-04 14:02 नवीन चाचणी जोडली | 8.1 | 10.0 | $1.079 | तुलना करा | |
| 2026-05-22 00:29 सूट बदलला | 8.9 | 10.0 | $0.924 | सध्याची रन | |
| 2026-05-19 23:35 पहिला रन | 9.1 | 10.0 | $0.489 | तुलना करा |
या रनमध्ये वेगळा बेंचमार्क सूट वापरला गेला. ऐतिहासिक बदल वाचताना सूटमधील बदल लक्षात घ्या.
रन तुलना
| रन | बेंचमार्क कव्हरेज | स्कोअर | सुसंगतता | विश्वसनीयता | बरोबर चाचण्या | अस्थिर चाचण्या | एकूण आउटपुट टोकन्स | एकूण इनपुट टोकन्स | एकूण खर्च | प्रतिसाद वेळ (सरासरी) |
|---|---|---|---|---|---|---|---|---|---|---|
| 2026-05-22 00:29 · सूट बदलला | 60/60 प्रयत्न | 8.9 | 8.6 | 10.0 | 14/17 | 3 | 100,760 | 0 | $0.924 | 9.05s |
| 2026-07-16 22:53 · नवीन चाचणी जोडली | 66/66 प्रयत्न | 7.0 | 8.9 | 10.0 | 15/22 | 3 | 117,518 | 13,843 | $1.079 | 9.93s |
| फरक | — | +1.9 | -0.3 | 0.0 | +2 | 0 | -16758 | -13843 | -$0.156 | -876ms |
बेंचमार्क कव्हरेज वेगळे आहे: 60/60 प्रयत्न (लक्ष्य: प्रत्येक चाचणीसाठी 3 पुनरावृत्ती) विरुद्ध 66/66 प्रयत्न (लक्ष्य: प्रत्येक चाचणीसाठी 3 पुनरावृत्ती). एकूण मूल्ये आणि पुनरावृत्तीवर अवलंबून मेट्रिक्स थेट तुलना करता येत नाहीत.
या दोन रनमध्ये वेगवेगळे बेंचमार्क सूट वापरले गेले, त्यामुळे फरकांमध्ये मॉडेलमधील आणि सूटमधील दोन्ही बदल दिसतात.
चार्ट्स
पहिले मॉडेल निवडा, नंतर दुसरे मॉडेल क्लिक करून बाजू-बाजूची तुलना पेज उघडा.
स्कोअरनुसार शीर्ष मॉडेल्स
स्कोअर vs एकूण खर्च
प्रतिसाद वेळ (सरासरी)
स्कोअर vs प्रतिसाद वेळ (सरासरी)
एकूण आउटपुट टोकन्स
स्कोअर vs एकूण आउटपुट टोकन्स
झटपट तुलना
Gemini 3.5 FlashnonevsSeed-2.0-CodehighGemini 3.5 FlashnonevsQwen3.6 FlashmediumGemini 3.5 FlashnonevsQwen3.7 FlashmediumGemini 3.5 FlashnonevsStep 3.7 FlashhighGemini 3.5 FlashnonevsKAT-Coder-Pro V2.5mediumGemini 3.5 FlashnonevsSeed-2.0-CodemediumGemini 3.5 FlashnonevsKimi K2.5mediumGemini 3.5 FlashnonevsSolar Pro 4lowGemini 3.5 FlashnonevsSeed-2.0-MinimediumGemini 3.5 FlashnonevsSolar Pro 4medium
श्रेणीवार तपशील
| श्रेणी | स्कोअर | सुसंगतता | बरोबर चाचण्या |
|---|---|---|---|
| अँटी-एआय युक्त्या | 10.0 | 10.0 | |
| कोडिंग | 8.2 | 6.7 | |
| संयुक्त | 0.0 | 0.0 | |
| डेटा पार्सिंग आणि निष्कर्षण | 10.0 | 10.0 | |
| डोमेन-विशिष्ट | 7.6 | 7.2 | |
| Samanya Buddhimatta | 10.0 | 10.0 | |
| सूचनांचे पालन | 9.8 | 10.0 | |
| कोडी सोडवणे | 10.0 | 10.0 | |
| टूल कॉलिंग | 0.0 | 0.0 | |
| सामान्य ज्ञान | 2.8 | 1.6 |