#20 Gemini 3.5 Flash
none- खर्च
- $0.225
- वेळ
- 125.5s
- टोकन्स
- 25,004 tok
सारांश
Gemini 3.5 Flash AI BENCHY वर 8.1 स्कोर करते आणि #20 वर आहे. याची reliability 10.0, pass rate 77.8%, एकूण खर्च $1.079, आणि सरासरी response time 9.93s आहे.
Gemini 3.5 Flash खास का आहे: हे डोमेन-विशिष्ट मध्ये सर्वाधिक उठून दिसते, जिथे त्याचा rank #3 आहे; तर संयुक्त हा सर्वात कमकुवत भाग आहे, rank #18.
संशोधन दिनांक: 2026-08-12
सार्वजनिक पुराव्यावर आधारित सर्वोत्तम अंदाज; प्रदात्याने सर्व मूल्ये जाहीर केलेली नाहीत.
8.1
सुसंगतता
8.9
10.0
$1.079
एकूण आउटपुट टोकन्स
117,518
एकूण इनपुट टोकन्स
13,843
इनपुट किंमत
$1.500 / 1M
आउटपुट किंमत
$9.000 / 1M
अस्थिर चाचण्या
3
अस्थिर चाचण्यांत रन्समध्ये मिश्र निकाल असतात (किमान एक पास आणि एक फेल).
Prompt: Create a detailed SVG illustration of a hamster playing table tennis.
रन इतिहास
| चाचणी तारीख | स्कोअर | विश्वसनीयता | बरोबर चाचण्या | एकूण खर्च | तुलना करा |
|---|---|---|---|---|---|
| 2026-08-14 02:46 पुन्हा चाचणी | 6.9 | 10.0 | $1.093 | तुलना करा | |
| 2026-07-16 22:53 नवीन चाचणी जोडली | 7.0 | 10.0 | $1.079 | तुलना करा | |
| 2026-06-04 14:02 नवीन चाचणी जोडली | 8.1 | 10.0 | $1.079 | सध्याची रन | |
| 2026-05-22 00:29 सूट बदलला | 8.9 | 10.0 | $0.924 | तुलना करा | |
| 2026-05-19 23:35 पहिला रन | 9.1 | 10.0 | $0.489 | तुलना करा |
या रनमध्ये वेगळा बेंचमार्क सूट वापरला गेला. ऐतिहासिक बदल वाचताना सूटमधील बदल लक्षात घ्या.
रन तुलना
| रन | बेंचमार्क कव्हरेज | स्कोअर | सुसंगतता | विश्वसनीयता | बरोबर चाचण्या | अस्थिर चाचण्या | एकूण आउटपुट टोकन्स | एकूण इनपुट टोकन्स | एकूण खर्च | प्रतिसाद वेळ (सरासरी) |
|---|---|---|---|---|---|---|---|---|---|---|
| 2026-06-04 14:02 · नवीन चाचणी जोडली | 63/63 प्रयत्न | 8.1 | 8.9 | 10.0 | 15/21 | 3 | 117,518 | 13,843 | $1.079 | 9.93s |
| 2026-08-14 02:46 · पुन्हा चाचणी | 66/66 प्रयत्न | 6.9 | 8.9 | 10.0 | 14/22 | 3 | 119,100 | 13,852 | $1.093 | 10.18s |
| फरक | — | +1.3 | 0.0 | 0.0 | +1 | 0 | -1582 | -9 | -$0.015 | -257ms |
बेंचमार्क कव्हरेज वेगळे आहे: 63/63 प्रयत्न (लक्ष्य: प्रत्येक चाचणीसाठी 3 पुनरावृत्ती) विरुद्ध 66/66 प्रयत्न (लक्ष्य: प्रत्येक चाचणीसाठी 3 पुनरावृत्ती). एकूण मूल्ये आणि पुनरावृत्तीवर अवलंबून मेट्रिक्स थेट तुलना करता येत नाहीत.
या दोन रनमध्ये वेगवेगळे बेंचमार्क सूट वापरले गेले, त्यामुळे फरकांमध्ये मॉडेलमधील आणि सूटमधील दोन्ही बदल दिसतात.
किंमत इतिहास
OpenRouter मधील या मॉडेलचा ऐतिहासिक किंमत डेटा.
| तारीख | इनपुट किंमत | आउटपुट किंमत |
|---|---|---|
| 2026-06-04 14:42 | $1.500 / 1M | $9.000 / 1M |
पहिले मॉडेल निवडा, नंतर दुसरे मॉडेल क्लिक करून बाजू-बाजूची तुलना पेज उघडा.
| श्रेणी | स्कोअर | सुसंगतता | बरोबर चाचण्या |
|---|---|---|---|
| अँटी-एआय युक्त्या | 10.0 | 10.0 | |
| कोडिंग | 8.8 | 7.8 | |
| संयुक्त | 3.0 | 10.0 | |
| डेटा पार्सिंग आणि निष्कर्षण | 6.5 | 10.0 | |
| डोमेन-विशिष्ट | 7.6 | 7.2 | |
| Samanya Buddhimatta | 10.0 | 10.0 | |
| सूचनांचे पालन | 9.8 | 10.0 | |
| कोडी सोडवणे | 10.0 | 10.0 | |
| टूल कॉलिंग | 3.0 | 10.0 | |
| सामान्य ज्ञान | 2.8 | 1.6 |