#78

Gemini 3.1 Flash Lite

Google प्रकाशन: 2026-05-08 चाचणी तारीख: 2026-05-22 00:26 google/gemini-3.1-flash-lite::minimal

(high) (medium) (low) (minimal) (none)

सारांश

Gemini 3.1 Flash Lite AI BENCHY वर 6.7 स्कोर करते आणि #78 वर आहे. याची reliability 10.0, pass rate 56.7%, एकूण खर्च $0.013, आणि सरासरी response time 1.37s आहे.

Gemini 3.1 Flash Lite खास का आहे: या score range साठी एकूण benchmark खर्च असामान्यपणे कमी आहे. समान मॉडेल्सच्या तुलनेत हे लक्षणीय वेगवान आहे.

स्कोअर

6.7

सुसंगतता

8.8

विश्वसनीयता

10.0

एकूण खर्च (सध्याची किंमत)

$0.013

एकूण आउटपुट टोकन्स

2,481

एकूण इनपुट टोकन्स

इनपुट किंमत

$0.250 / 1M

आउटपुट किंमत

$1.500 / 1M

बरोबर चाचण्या

चुकीच्या चाचण्या: 10

प्रति प्रयत्न पास दर: 56.7%

अस्थिर चाचण्या

अस्थिर चाचण्यांत रन्समध्ये मिश्र निकाल असतात (किमान एक पास आणि एक फेल).

प्रतिसाद वेळ (सरासरी)

1.37s

प्रतिसाद वेळ (कमाल): 4.49s

प्रतिसाद वेळ (एकूण): 27.32s

चुकीचे उत्तर: 7 सूचनांचे पालन केले नाही: 3

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#78 Gemini 3.1 Flash Lite

minimal

खर्च: $0.001
वेळ: 3.7s
टोकन्स: 635 tok

रन इतिहास

चाचणी तारीख	स्कोअर	विश्वसनीयता	एकूण खर्च	तुलना करा
2026-07-16 22:51 नवीन चाचणी जोडली	6.1	10.0	$0.047	तुलना करा
2026-06-04 13:59 नवीन चाचणी जोडली	6.4	10.0	$0.013	तुलना करा
2026-05-22 00:26 सूट बदलला	6.7	10.0	$0.013	सध्याची रन
2026-05-08 12:00 पहिला रन	7.0	10.0	$0.012	तुलना करा

या रनमध्ये वेगळा बेंचमार्क सूट वापरला गेला. ऐतिहासिक बदल वाचताना सूटमधील बदल लक्षात घ्या.

रन तुलना

रन	बेंचमार्क कव्हरेज	स्कोअर	सुसंगतता	विश्वसनीयता	बरोबर चाचण्या	अस्थिर चाचण्या	एकूण आउटपुट टोकन्स	एकूण इनपुट टोकन्स	एकूण खर्च	प्रतिसाद वेळ (सरासरी)
2026-05-22 00:26 · सूट बदलला	20/20 चाचण्या · 60/60 प्रयत्न	6.7	8.8	10.0	10/20	3	2,481	0	$0.013	1.37s
2026-06-04 13:59 · नवीन चाचणी जोडली	21/21 चाचण्या · 63/63 प्रयत्न	6.4	8.8	10.0	10/21	3	2,487	36,973	$0.013	1.33s
फरक	—	+0.2	0.0	0.0	0	0	-6	-36973	-$0.001	+37ms

बेंचमार्क कव्हरेज वेगळे आहे: 20/20 चाचण्या · 60/60 प्रयत्न (लक्ष्य: प्रत्येक चाचणीसाठी 3 पुनरावृत्ती) विरुद्ध 21/21 चाचण्या · 63/63 प्रयत्न (लक्ष्य: प्रत्येक चाचणीसाठी 3 पुनरावृत्ती). एकूण मूल्ये आणि पुनरावृत्तीवर अवलंबून मेट्रिक्स थेट तुलना करता येत नाहीत.

या दोन रनमध्ये वेगवेगळे बेंचमार्क सूट वापरले गेले, त्यामुळे फरकांमध्ये मॉडेलमधील आणि सूटमधील दोन्ही बदल दिसतात.

चार्ट्स

पहिले मॉडेल निवडा, नंतर दुसरे मॉडेल क्लिक करून बाजू-बाजूची तुलना पेज उघडा.

एकूण आउटपुट टोकन्स

स्कोअर vs एकूण आउटपुट टोकन्स

झटपट तुलना

श्रेणीवार तपशील

श्रेणी	स्कोअर	सुसंगतता
अँटी-एआय युक्त्या	8.3	10.0
कोडिंग	6.8	10.0
संयुक्त	3.0	10.0
डेटा पार्सिंग आणि निष्कर्षण	10.0	10.0
डोमेन-विशिष्ट	2.9	7.2
Samanya Buddhimatta	4.0	10.0
सूचनांचे पालन	10.0	10.0
कोडी सोडवणे	6.0	4.6
टूल कॉलिंग	10.0	10.0
सामान्य ज्ञान	3.0	10.0

Gemini 3.1 Flash Lite

Hamster playing table tennis

#78 Gemini 3.1 Flash Lite

चार्ट्स

स्कोअरनुसार शीर्ष मॉडेल्स

स्कोअर vs एकूण खर्च

प्रतिसाद वेळ (सरासरी)

स्कोअर vs प्रतिसाद वेळ (सरासरी)

एकूण आउटपुट टोकन्स

स्कोअर vs एकूण आउटपुट टोकन्स

झटपट तुलना

श्रेणीवार तपशील

तुलना केलेली मॉडेल्स