AI BENCHY
Advertise here
#1

Gemini 3 Flash Preview

Google प्रकाशन: 2025-12-17 चाचणी तारीख: 2026-05-22 00:28 google/gemini-3-flash-preview::medium
~500B एकूण (~20B सक्रिय)MoEबंद स्रोतअंदाजित
(medium) (low) (none)

सारांश

Gemini 3 Flash Preview AI BENCHY वर 9.8 स्कोर करते आणि #1 वर आहे. याची reliability 10.0, pass rate 98.3%, एकूण खर्च $0.567, आणि सरासरी response time 16.72s आहे.

Gemini 3 Flash Preview खास का आहे: हे डोमेन-विशिष्ट मध्ये सर्वाधिक उठून दिसते, जिथे त्याचा rank #1 आहे; तर कोडिंग हा सर्वात कमकुवत भाग आहे, rank #10. हे एकूणात सर्वाधिक rank असलेल्या मॉडेल्सपैकी एक आहे.

मॉडेलची माहिती

संशोधन दिनांक: 2026-08-12

अंदाजित
पॅरामीटर्स
~500B एकूण (~20B सक्रिय)
आर्किटेक्चर
MoE
उपलब्धता
बंद स्रोत
परवाना
-

सार्वजनिक पुराव्यावर आधारित सर्वोत्तम अंदाज; प्रदात्याने सर्व मूल्ये जाहीर केलेली नाहीत.

सुसंगतता

9.6

एकूण आउटपुट टोकन्स

183,324

एकूण इनपुट टोकन्स

0

इनपुट किंमत

$0.500 / 1M

आउटपुट किंमत

$3.000 / 1M

बरोबर चाचण्या

चुकीच्या चाचण्या: 1

प्रति प्रयत्न पास दर: 98.3%

अस्थिर चाचण्या

1

अस्थिर चाचण्यांत रन्समध्ये मिश्र निकाल असतात (किमान एक पास आणि एक फेल).

प्रतिसाद वेळ (सरासरी)

16.72s

प्रतिसाद वेळ (कमाल): 117.26s

प्रतिसाद वेळ (एकूण): 334.36s

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#1 Gemini 3 Flash Preview

medium
खर्च
$0.010
वेळ
18.4s
टोकन्स
3,351 tok

रन इतिहास

चाचणी तारीख स्कोअर विश्वसनीयता बरोबर चाचण्या एकूण खर्च तुलना करा
2026-08-14 02:41 पुन्हा चाचणी 9.5 10.0 $0.763 तुलना करा
2026-07-16 22:51 नवीन चाचणी जोडली 9.6 10.0 $0.742 तुलना करा
2026-06-04 13:59 नवीन चाचणी जोडली 9.8 10.0 $0.667 तुलना करा
2026-05-22 00:28 सूट बदलला 9.8 10.0 $0.567 सध्याची रन
2026-05-06 13:52 सूट बदलला 10.0 10.0 $0.321 तुलना करा
2026-05-06 13:38 सूट बदलला 9.8 10.0 $0.320 तुलना करा
2026-04-23 15:25 पुन्हा चाचणी 10.0 लागू नाही $0.108 तुलना करा
2026-04-11 01:44 पहिली नोंदलेली रन 10.0 लागू नाही $0.314 तुलना करा

या रनमध्ये वेगळा बेंचमार्क सूट वापरला गेला. ऐतिहासिक बदल वाचताना सूटमधील बदल लक्षात घ्या.

रन तुलना

रनबेंचमार्क कव्हरेजस्कोअरसुसंगतताविश्वसनीयताबरोबर चाचण्याअस्थिर चाचण्याएकूण आउटपुट टोकन्सएकूण इनपुट टोकन्सएकूण खर्चप्रतिसाद वेळ (सरासरी)
2026-05-22 00:28 · सूट बदलला60/60 प्रयत्न9.89.610.019/201183,3240$0.56716.72s
2026-07-16 22:51 · नवीन चाचणी जोडली66/66 प्रयत्न9.69.710.021/221232,65087,861$0.74219.20s
फरक+0.2-0.10.0-20-49326-87861-$0.175-2483ms

बेंचमार्क कव्हरेज वेगळे आहे: 60/60 प्रयत्न (लक्ष्य: प्रत्येक चाचणीसाठी 3 पुनरावृत्ती) विरुद्ध 66/66 प्रयत्न (लक्ष्य: प्रत्येक चाचणीसाठी 3 पुनरावृत्ती). एकूण मूल्ये आणि पुनरावृत्तीवर अवलंबून मेट्रिक्स थेट तुलना करता येत नाहीत.

या दोन रनमध्ये वेगवेगळे बेंचमार्क सूट वापरले गेले, त्यामुळे फरकांमध्ये मॉडेलमधील आणि सूटमधील दोन्ही बदल दिसतात.

चार्ट्स

पहिले मॉडेल निवडा, नंतर दुसरे मॉडेल क्लिक करून बाजू-बाजूची तुलना पेज उघडा.

एकूण आउटपुट टोकन्स

स्कोअर vs एकूण आउटपुट टोकन्स

झटपट तुलना

श्रेणीवार तपशील

श्रेणी स्कोअर सुसंगतता बरोबर चाचण्या
अँटी-एआय युक्त्या 10.0 10.0
कोडिंग 7.9 6.4
संयुक्त 10.0 10.0
डेटा पार्सिंग आणि निष्कर्षण 10.0 10.0
डोमेन-विशिष्ट 10.0 10.0
Samanya Buddhimatta 10.0 10.0
सूचनांचे पालन 10.0 10.0
कोडी सोडवणे 10.0 10.0
टूल कॉलिंग 10.0 10.0
सामान्य ज्ञान 10.0 10.0

तुलना केलेली मॉडेल्स