AI BENCHY
AD
Track all your projects in one dashboard. Get 📊stats, 🔥heatmaps and 👀recordings in one self-hosted dashboard.
uxwizz.com
#85

Gemini 3.1 Flash Lite

Google प्रकाशन: 2026-05-08 चाचणी तारीख: 2026-05-22 00:26 google/gemini-3.1-flash-lite::none

सारांश

Gemini 3.1 Flash Lite AI BENCHY वर 6.6 स्कोर करते आणि #85 वर आहे. याची reliability 10.0, pass rate 55.0%, एकूण खर्च $0.013, आणि सरासरी response time 1.09s आहे.

Gemini 3.1 Flash Lite खास का आहे: हे कोडिंग मध्ये सर्वाधिक उठून दिसते, जिथे त्याचा rank #4 आहे; तर संयुक्त हा सर्वात कमकुवत भाग आहे, rank #17. या score range साठी एकूण benchmark खर्च असामान्यपणे कमी आहे. समान मॉडेल्सच्या तुलनेत हे लक्षणीय वेगवान आहे.

ओळख नोंद

Google: Gemini 3.1 Flash Lite Preview हे Gemini 3.1 Flash Lite ची प्रीव्ह्यू आवृत्ती होती.

सुसंगतता

8.5

एकूण आउटपुट टोकन्स

2,478

एकूण इनपुट टोकन्स

0

इनपुट किंमत

$0.250 / 1M

आउटपुट किंमत

$1.500 / 1M

बरोबर चाचण्या

चुकीच्या चाचण्या: 11

प्रति प्रयत्न पास दर: 55.0%

अस्थिर चाचण्या

4

अस्थिर चाचण्यांत रन्समध्ये मिश्र निकाल असतात (किमान एक पास आणि एक फेल).

प्रतिसाद वेळ (सरासरी)

1.09s

प्रतिसाद वेळ (कमाल): 2.97s

प्रतिसाद वेळ (एकूण): 21.79s

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#85 Gemini 3.1 Flash Lite

none
खर्च
$0.001
वेळ
4.5s
टोकन्स
727 tok

रन इतिहास

चाचणी तारीख स्कोअर विश्वसनीयता बरोबर चाचण्या एकूण खर्च तुलना करा
2026-07-16 22:51 नवीन चाचणी जोडली 6.1 10.0 $0.046 तुलना करा
2026-06-04 13:59 नवीन चाचणी जोडली 6.4 10.0 $0.013 तुलना करा
2026-05-22 00:26 सूट बदलला 6.6 10.0 $0.013 सध्याची रन
2026-05-08 12:01 पहिला रन 6.9 10.0 $0.011 तुलना करा

या रनमध्ये वेगळा बेंचमार्क सूट वापरला गेला. ऐतिहासिक बदल वाचताना सूटमधील बदल लक्षात घ्या.

रन तुलना

रनबेंचमार्क कव्हरेजस्कोअरसुसंगतताविश्वसनीयताबरोबर चाचण्याअस्थिर चाचण्याएकूण आउटपुट टोकन्सएकूण इनपुट टोकन्सएकूण खर्चप्रतिसाद वेळ (सरासरी)
2026-05-22 00:26 · सूट बदलला20/20 चाचण्या · 60/60 प्रयत्न6.68.510.09/2042,4780$0.0131.09s
2026-05-08 12:01 · पहिला रन18/18 चाचण्या · 54/54 प्रयत्न6.98.310.09/1842,4450$0.0111.13s
फरक-0.4+0.20.000+330+$0.002-44ms

बेंचमार्क कव्हरेज वेगळे आहे: 20/20 चाचण्या · 60/60 प्रयत्न (लक्ष्य: प्रत्येक चाचणीसाठी 3 पुनरावृत्ती) विरुद्ध 18/18 चाचण्या · 54/54 प्रयत्न (लक्ष्य: प्रत्येक चाचणीसाठी 3 पुनरावृत्ती). एकूण मूल्ये आणि पुनरावृत्तीवर अवलंबून मेट्रिक्स थेट तुलना करता येत नाहीत.

या दोन रनमध्ये वेगवेगळे बेंचमार्क सूट वापरले गेले, त्यामुळे फरकांमध्ये मॉडेलमधील आणि सूटमधील दोन्ही बदल दिसतात.

चार्ट्स

पहिले मॉडेल निवडा, नंतर दुसरे मॉडेल क्लिक करून बाजू-बाजूची तुलना पेज उघडा.

एकूण आउटपुट टोकन्स

स्कोअर vs एकूण आउटपुट टोकन्स

झटपट तुलना

श्रेणीवार तपशील

श्रेणी स्कोअर सुसंगतता बरोबर चाचण्या
अँटी-एआय युक्त्या 7.5 8.4
कोडिंग 6.8 10.0
संयुक्त 3.0 10.0
डेटा पार्सिंग आणि निष्कर्षण 10.0 10.0
डोमेन-विशिष्ट 2.9 7.2
Samanya Buddhimatta 4.0 10.0
सूचनांचे पालन 10.0 10.0
कोडी सोडवणे 6.3 4.8
टूल कॉलिंग 10.0 10.0
सामान्य ज्ञान 3.0 10.0

तुलना केलेली मॉडेल्स