#51

Gemini 3.1 Flash Lite

Google प्रकाशन: 2026-05-08 चाचणी तारीख: 2026-05-22 00:26 google/gemini-3.1-flash-lite::low

(high) (medium) (low) (minimal) (none)

सारांश

Gemini 3.1 Flash Lite AI BENCHY वर 7.4 स्कोर करते आणि #51 वर आहे. याची reliability 10.0, pass rate 65.0%, एकूण खर्च $0.026, आणि सरासरी response time 1.92s आहे.

Gemini 3.1 Flash Lite खास का आहे: हे डोमेन-विशिष्ट मध्ये सर्वाधिक उठून दिसते, जिथे त्याचा rank #4 आहे; तर संयुक्त हा सर्वात कमकुवत भाग आहे, rank #18. या score range साठी एकूण benchmark खर्च असामान्यपणे कमी आहे. समान मॉडेल्सच्या तुलनेत हे लक्षणीय वेगवान आहे.

ओळख नोंद

Google: Gemini 3.1 Flash Lite Preview हे Gemini 3.1 Flash Lite ची प्रीव्ह्यू आवृत्ती होती.

स्कोअर

7.4

सुसंगतता

9.2

विश्वसनीयता

10.0

एकूण खर्च (सध्याची किंमत)

$0.026

एकूण आउटपुट टोकन्स

11,677

एकूण इनपुट टोकन्स

इनपुट किंमत

$0.250 / 1M

आउटपुट किंमत

$1.500 / 1M

बरोबर चाचण्या

चुकीच्या चाचण्या: 8

प्रति प्रयत्न पास दर: 65.0%

अस्थिर चाचण्या

अस्थिर चाचण्यांत रन्समध्ये मिश्र निकाल असतात (किमान एक पास आणि एक फेल).

प्रतिसाद वेळ (सरासरी)

1.92s

प्रतिसाद वेळ (कमाल): 5.66s

प्रतिसाद वेळ (एकूण): 38.45s

चुकीचे उत्तर: 8

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#51 Gemini 3.1 Flash Lite

low

खर्च: $0.003
वेळ: 4.0s
टोकन्स: 1,479 tok

रन इतिहास

चाचणी तारीख	स्कोअर	विश्वसनीयता	एकूण खर्च	तुलना करा
2026-07-16 23:07 नवीन चाचणी जोडली	6.5	10.0	$0.621	तुलना करा
2026-06-04 14:00 नवीन चाचणी जोडली	7.2	10.0	$0.028	तुलना करा
2026-05-22 00:26 सूट बदलला	7.4	10.0	$0.026	सध्याची रन
2026-05-08 12:01 पहिला रन	7.9	10.0	$0.024	तुलना करा

या रनमध्ये वेगळा बेंचमार्क सूट वापरला गेला. ऐतिहासिक बदल वाचताना सूटमधील बदल लक्षात घ्या.

रन तुलना

रन	बेंचमार्क कव्हरेज	स्कोअर	सुसंगतता	विश्वसनीयता	बरोबर चाचण्या	अस्थिर चाचण्या	एकूण आउटपुट टोकन्स	एकूण खर्च	प्रतिसाद वेळ (सरासरी)
2026-05-22 00:26 · सूट बदलला	20/20 चाचण्या · 60/60 प्रयत्न	7.4	9.2	10.0	12/20	2	11,677	$0.026	1.92s
2026-05-08 12:01 · पहिला रन	18/18 चाचण्या · 54/54 प्रयत्न	7.9	9.2	10.0	12/18	2	10,869	$0.024	1.95s
फरक	—	-0.5	0.0	0.0	0	0	+808	+$0.003	-23ms

बेंचमार्क कव्हरेज वेगळे आहे: 20/20 चाचण्या · 60/60 प्रयत्न (लक्ष्य: प्रत्येक चाचणीसाठी 3 पुनरावृत्ती) विरुद्ध 18/18 चाचण्या · 54/54 प्रयत्न (लक्ष्य: प्रत्येक चाचणीसाठी 3 पुनरावृत्ती). एकूण मूल्ये आणि पुनरावृत्तीवर अवलंबून मेट्रिक्स थेट तुलना करता येत नाहीत.

या दोन रनमध्ये वेगवेगळे बेंचमार्क सूट वापरले गेले, त्यामुळे फरकांमध्ये मॉडेलमधील आणि सूटमधील दोन्ही बदल दिसतात.

चार्ट्स

पहिले मॉडेल निवडा, नंतर दुसरे मॉडेल क्लिक करून बाजू-बाजूची तुलना पेज उघडा.

एकूण आउटपुट टोकन्स

स्कोअर vs एकूण आउटपुट टोकन्स

झटपट तुलना

श्रेणीवार तपशील

श्रेणी	स्कोअर	सुसंगतता
अँटी-एआय युक्त्या	7.3	6.2
कोडिंग	6.8	10.0
संयुक्त	3.0	10.0
डेटा पार्सिंग आणि निष्कर्षण	10.0	10.0
डोमेन-विशिष्ट	5.3	10.0
Samanya Buddhimatta	4.0	10.0
सूचनांचे पालन	10.0	10.0
कोडी सोडवणे	10.0	10.0
टूल कॉलिंग	10.0	10.0
सामान्य ज्ञान	3.0	10.0

Gemini 3.1 Flash Lite

Hamster playing table tennis

#51 Gemini 3.1 Flash Lite

चार्ट्स

स्कोअरनुसार शीर्ष मॉडेल्स

स्कोअर vs एकूण खर्च

प्रतिसाद वेळ (सरासरी)

स्कोअर vs प्रतिसाद वेळ (सरासरी)

एकूण आउटपुट टोकन्स

स्कोअर vs एकूण आउटपुट टोकन्स

झटपट तुलना

श्रेणीवार तपशील

तुलना केलेली मॉडेल्स