AI BENCHY
Advertise here
#22

Gemini 3.1 Flash Lite

Google प्रकाशन: 2026-05-08 चाचणी तारीख: 2026-05-08 12:01 google/gemini-3.1-flash-lite::medium

सारांश

Gemini 3.1 Flash Lite AI BENCHY वर 8.2 स्कोर करते आणि #22 वर आहे. याची reliability 10.0, pass rate 75.9%, एकूण खर्च $0.056, आणि सरासरी response time 3.14s आहे.

Gemini 3.1 Flash Lite खास का आहे: या score range साठी एकूण benchmark खर्च असामान्यपणे कमी आहे. समान मॉडेल्सच्या तुलनेत हे लक्षणीय वेगवान आहे.

ओळख नोंद

Google: Gemini 3.1 Flash Lite Preview हे Gemini 3.1 Flash Lite ची प्रीव्ह्यू आवृत्ती होती.

सुसंगतता

9.1

एकूण आउटपुट टोकन्स

32,369

एकूण इनपुट टोकन्स

0

इनपुट किंमत

$0.250 / 1M

आउटपुट किंमत

$1.500 / 1M

बरोबर चाचण्या

चुकीच्या चाचण्या: 5

प्रति प्रयत्न पास दर: 75.9%

अस्थिर चाचण्या

2

अस्थिर चाचण्यांत रन्समध्ये मिश्र निकाल असतात (किमान एक पास आणि एक फेल).

प्रतिसाद वेळ (सरासरी)

3.14s

प्रतिसाद वेळ (कमाल): 10.87s

प्रतिसाद वेळ (एकूण): 56.54s

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#22 Gemini 3.1 Flash Lite

medium
खर्च
$0.003
वेळ
5.3s
टोकन्स
1,754 tok

रन इतिहास

चाचणी तारीख स्कोअर विश्वसनीयता बरोबर चाचण्या एकूण खर्च तुलना करा
2026-07-16 22:52 नवीन चाचणी जोडली 7.3 10.0 $0.117 तुलना करा
2026-06-04 14:00 नवीन चाचणी जोडली 7.5 10.0 $0.071 तुलना करा
2026-05-22 00:27 सूट बदलला 7.7 10.0 $0.065 तुलना करा
2026-05-08 12:01 पहिला रन 8.2 10.0 $0.056 सध्याची रन

रन तुलना

रनबेंचमार्क कव्हरेजस्कोअरसुसंगतताविश्वसनीयताबरोबर चाचण्याअस्थिर चाचण्याएकूण आउटपुट टोकन्सएकूण इनपुट टोकन्सएकूण खर्चप्रतिसाद वेळ (सरासरी)
2026-05-08 12:01 · पहिला रन18/18 चाचण्या · 54/54 प्रयत्न8.29.110.013/18232,3690$0.0563.14s
2026-06-04 14:00 · नवीन चाचणी जोडली21/21 चाचण्या · 63/63 प्रयत्न7.59.210.013/21240,55436,808$0.0713.23s
फरक+0.7-0.10.000-8185-36808-$0.015-87ms

बेंचमार्क कव्हरेज वेगळे आहे: 18/18 चाचण्या · 54/54 प्रयत्न (लक्ष्य: प्रत्येक चाचणीसाठी 3 पुनरावृत्ती) विरुद्ध 21/21 चाचण्या · 63/63 प्रयत्न (लक्ष्य: प्रत्येक चाचणीसाठी 3 पुनरावृत्ती). एकूण मूल्ये आणि पुनरावृत्तीवर अवलंबून मेट्रिक्स थेट तुलना करता येत नाहीत.

या दोन रनमध्ये वेगवेगळे बेंचमार्क सूट वापरले गेले, त्यामुळे फरकांमध्ये मॉडेलमधील आणि सूटमधील दोन्ही बदल दिसतात.

चार्ट्स

पहिले मॉडेल निवडा, नंतर दुसरे मॉडेल क्लिक करून बाजू-बाजूची तुलना पेज उघडा.

एकूण आउटपुट टोकन्स

स्कोअर vs एकूण आउटपुट टोकन्स

झटपट तुलना

श्रेणीवार तपशील

श्रेणी स्कोअर सुसंगतता बरोबर चाचण्या
अँटी-एआय युक्त्या 9.1 10.0
कोडिंग 10.0 10.0
संयुक्त 10.0 10.0
डेटा पार्सिंग आणि निष्कर्षण 10.0 10.0
डोमेन-विशिष्ट 2.9 7.2
Samanya Buddhimatta 10.0 10.0
सूचनांचे पालन 9.9 10.0
कोडी सोडवणे 7.6 7.2
टूल कॉलिंग 10.0 10.0

तुलना केलेली मॉडेल्स