AI BENCHY
Advertise here
#52

GPT-5 Mini

OpenAI प्रकाशन: 2025-08-07 चाचणी तारीख: 2026-08-14 02:07 openai/gpt-5-mini::medium
~400B एकूण (~17B सक्रिय)MoEबंद स्रोतअंदाजित

सारांश

GPT-5 Mini AI BENCHY वर 8.1 स्कोर करते आणि #52 वर आहे. याची reliability 10.0, pass rate 65.2%, एकूण खर्च $0.241, आणि सरासरी response time 27.64s आहे.

GPT-5 Mini खास का आहे: हे सूचनांचे पालन मध्ये सर्वाधिक उठून दिसते, जिथे त्याचा rank #1 आहे; तर अँटी-एआय युक्त्या हा सर्वात कमकुवत भाग आहे, rank #17.

मॉडेलची माहिती

संशोधन दिनांक: 2026-08-12

अंदाजित
पॅरामीटर्स
~400B एकूण (~17B सक्रिय)
आर्किटेक्चर
MoE
उपलब्धता
बंद स्रोत
परवाना
-

सार्वजनिक पुराव्यावर आधारित सर्वोत्तम अंदाज; प्रदात्याने सर्व मूल्ये जाहीर केलेली नाहीत.

सुसंगतता

8.4

एकूण आउटपुट टोकन्स

108,019

एकूण इनपुट टोकन्स

98,383

इनपुट किंमत

$0.250 / 1M

आउटपुट किंमत

$2.000 / 1M

बरोबर चाचण्या

चुकीच्या चाचण्या: 10

प्रति प्रयत्न पास दर: 65.2%

अस्थिर चाचण्या

4

अस्थिर चाचण्यांत रन्समध्ये मिश्र निकाल असतात (किमान एक पास आणि एक फेल).

प्रतिसाद वेळ (सरासरी)

27.64s

प्रतिसाद वेळ (कमाल): 111.48s

प्रतिसाद वेळ (एकूण): 608.02s

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#52 GPT-5 Mini

medium
खर्च
$0.007
वेळ
42.9s
टोकन्स
3,432 tok

रन इतिहास

चाचणी तारीख स्कोअर विश्वसनीयता बरोबर चाचण्या एकूण खर्च तुलना करा
2026-08-14 02:07 पुन्हा चाचणी 8.1 10.0 $0.241 सध्याची रन
2026-07-16 22:27 नवीन चाचणी जोडली 8.1 10.0 $0.237 तुलना करा
2026-06-04 13:43 नवीन चाचणी जोडली 7.3 10.0 $0.159 तुलना करा
2026-05-22 00:16 पुन्हा चाचणी 6.9 10.0 $0.150 तुलना करा
2026-04-11 01:44 पहिली नोंदलेली रन 7.0 लागू नाही $0.128 तुलना करा

या रनमध्ये वेगळा बेंचमार्क सूट वापरला गेला. ऐतिहासिक बदल वाचताना सूटमधील बदल लक्षात घ्या.

रन तुलना

रनबेंचमार्क कव्हरेजस्कोअरसुसंगतताविश्वसनीयताबरोबर चाचण्याअस्थिर चाचण्याएकूण आउटपुट टोकन्सएकूण इनपुट टोकन्सएकूण खर्चप्रतिसाद वेळ (सरासरी)
2026-08-14 02:07 · सध्याची रन66/66 प्रयत्न8.18.410.012/224108,01998,383$0.24127.64s
2026-05-22 00:16 · पुन्हा चाचणी60/60 प्रयत्न6.98.710.010/20370,3580$0.15023.99s
फरक+1.2-0.30.0+2+1+37661+98383+$0.092+3644ms

बेंचमार्क कव्हरेज वेगळे आहे: 66/66 प्रयत्न (लक्ष्य: प्रत्येक चाचणीसाठी 3 पुनरावृत्ती) विरुद्ध 60/60 प्रयत्न (लक्ष्य: प्रत्येक चाचणीसाठी 3 पुनरावृत्ती). एकूण मूल्ये आणि पुनरावृत्तीवर अवलंबून मेट्रिक्स थेट तुलना करता येत नाहीत.

या दोन रनमध्ये वेगवेगळे बेंचमार्क सूट वापरले गेले, त्यामुळे फरकांमध्ये मॉडेलमधील आणि सूटमधील दोन्ही बदल दिसतात.

किंमत इतिहास

OpenRouter मधील या मॉडेलचा ऐतिहासिक किंमत डेटा.

तारीख इनपुट किंमत आउटपुट किंमत
2026-08-14 12:51 $0.250 / 1M $2.000 / 1M

चार्ट्स

पहिले मॉडेल निवडा, नंतर दुसरे मॉडेल क्लिक करून बाजू-बाजूची तुलना पेज उघडा.

एकूण आउटपुट टोकन्स

स्कोअर vs एकूण आउटपुट टोकन्स

झटपट तुलना

श्रेणीवार तपशील

श्रेणी स्कोअर सुसंगतता बरोबर चाचण्या
अँटी-एआय युक्त्या 7.1 7.6
कोडिंग 10.0 10.0
संयुक्त 7.3 5.8
डेटा पार्सिंग आणि निष्कर्षण 10.0 10.0
डोमेन-विशिष्ट 3.5 4.4
Samanya Buddhimatta 4.5 10.0
सूचनांचे पालन 10.0 10.0
कोडी सोडवणे 5.6 9.8
टूल कॉलिंग 10.0 10.0
सामान्य ज्ञान 3.0 10.0

तुलना केलेली मॉडेल्स