AI BENCHY
Advertise here
#25

Gemini 3.5 Flash

Google प्रकाशन: 2026-05-19 चाचणी तारीख: 2026-05-22 00:28 google/gemini-3.5-flash::minimal
~500B एकूण (~20B सक्रिय)MoEबंद स्रोतअंदाजित
(high) (medium) (low) (minimal) (none)

सारांश

Gemini 3.5 Flash AI BENCHY वर 7.9 स्कोर करते आणि #25 वर आहे. याची reliability 10.0, pass rate 71.7%, एकूण खर्च $0.103, आणि सरासरी response time 1.58s आहे.

Gemini 3.5 Flash खास का आहे: हे डोमेन-विशिष्ट मध्ये सर्वाधिक उठून दिसते, जिथे त्याचा rank #1 आहे; तर अँटी-एआय युक्त्या हा सर्वात कमकुवत भाग आहे, rank #18. या score range साठी एकूण benchmark खर्च असामान्यपणे कमी आहे. समान मॉडेल्सच्या तुलनेत हे लक्षणीय वेगवान आहे.

मॉडेलची माहिती

संशोधन दिनांक: 2026-08-12

अंदाजित
पॅरामीटर्स
~500B एकूण (~20B सक्रिय)
आर्किटेक्चर
MoE
उपलब्धता
बंद स्रोत
परवाना
-

सार्वजनिक पुराव्यावर आधारित सर्वोत्तम अंदाज; प्रदात्याने सर्व मूल्ये जाहीर केलेली नाहीत.

पॅरामीटर स्रोत उपलब्धता स्रोत

स्कोअर

7.9

सुसंगतता

9.6

विश्वसनीयता

10.0

एकूण खर्च (सध्याची किंमत)

$0.103

एकूण आउटपुट टोकन्स

5,271

एकूण इनपुट टोकन्स

0

इनपुट किंमत

$1.500 / 1M

आउटपुट किंमत

$9.000 / 1M

बरोबर चाचण्या

चुकीच्या चाचण्या: 6

प्रति प्रयत्न पास दर: 71.7%

अस्थिर चाचण्या

1

अस्थिर चाचण्यांत रन्समध्ये मिश्र निकाल असतात (किमान एक पास आणि एक फेल).

प्रतिसाद वेळ (सरासरी)

1.58s

प्रतिसाद वेळ (कमाल): 5.51s

प्रतिसाद वेळ (एकूण): 31.55s

चुकीचे उत्तर: 4 सूचनांचे पालन केले नाही: 1 अवैध टूल कॉल: 1

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#25 Gemini 3.5 Flash

minimal
खर्च
$0.041
वेळ
20.4s
टोकन्स
4,608 tok

रन इतिहास

चाचणी तारीख स्कोअर विश्वसनीयता बरोबर चाचण्या एकूण खर्च तुलना करा
2026-08-14 02:46 पुन्हा चाचणी 6.7 10.0 $0.300 तुलना करा
2026-07-16 22:54 नवीन चाचणी जोडली 6.8 10.0 $0.300 तुलना करा
2026-06-04 14:01 नवीन चाचणी जोडली 7.7 10.0 $0.108 तुलना करा
2026-05-22 00:28 सूट बदलला 7.9 10.0 $0.103 सध्याची रन
2026-05-19 23:35 पहिला रन 8.1 10.0 $0.070 तुलना करा

या रनमध्ये वेगळा बेंचमार्क सूट वापरला गेला. ऐतिहासिक बदल वाचताना सूटमधील बदल लक्षात घ्या.

रन तुलना

रनबेंचमार्क कव्हरेजस्कोअरसुसंगतताविश्वसनीयताबरोबर चाचण्याअस्थिर चाचण्याएकूण आउटपुट टोकन्सएकूण इनपुट टोकन्सएकूण खर्चप्रतिसाद वेळ (सरासरी)
2026-05-22 00:28 · सूट बदलला60/60 प्रयत्न7.99.610.014/2015,2710$0.1031.58s
2026-06-04 14:01 · नवीन चाचणी जोडली63/63 प्रयत्न7.79.610.014/2115,27739,847$0.1081.57s
फरक—+0.20.00.000-6-39847-$0.005+5ms

बेंचमार्क कव्हरेज वेगळे आहे: 60/60 प्रयत्न (लक्ष्य: प्रत्येक चाचणीसाठी 3 पुनरावृत्ती) विरुद्ध 63/63 प्रयत्न (लक्ष्य: प्रत्येक चाचणीसाठी 3 पुनरावृत्ती). एकूण मूल्ये आणि पुनरावृत्तीवर अवलंबून मेट्रिक्स थेट तुलना करता येत नाहीत.

या दोन रनमध्ये वेगवेगळे बेंचमार्क सूट वापरले गेले, त्यामुळे फरकांमध्ये मॉडेलमधील आणि सूटमधील दोन्ही बदल दिसतात.

चार्ट्स

पहिले मॉडेल निवडा, नंतर दुसरे मॉडेल क्लिक करून बाजू-बाजूची तुलना पेज उघडा.

एकूण आउटपुट टोकन्स

स्कोअर vs एकूण आउटपुट टोकन्स

झटपट तुलना

Gemini 3.5 FlashminimalvsLongCat 2.0lowGemini 3.5 FlashminimalvsLongCat 2.0highGemini 3.5 FlashminimalvsKAT-Coder-Pro V2.5noneGemini 3.5 FlashminimalvsGemini 3.5 Flash LitelowGemini 3.5 FlashminimalvsGLM 5.2noneGemini 3.5 FlashminimalvsQwen3.5-27BnoneGemini 3.5 FlashminimalvsGemma 4 26B A4Bmediumमोफत उपलब्धGemini 3.5 FlashminimalvsGemini 3.1 Flash Lite PreviewlowGemini 3.5 FlashminimalvsGemini 3 Flash PreviewnoneGemini 3.5 FlashminimalvsInkling Smallmedium

श्रेणीवार तपशील

श्रेणी स्कोअर सुसंगतता बरोबर चाचण्या
अँटी-एआय युक्त्या 6.5 10.0
कोडिंग 7.0 9.8
संयुक्त 3.0 10.0
डेटा पार्सिंग आणि निष्कर्षण 10.0 10.0
डोमेन-विशिष्ट 10.0 10.0
Samanya Buddhimatta 10.0 10.0
सूचनांचे पालन 6.4 5.8
कोडी सोडवणे 10.0 10.0
टूल कॉलिंग 10.0 10.0
सामान्य ज्ञान 3.0 10.0

तुलना केलेली मॉडेल्स