AI BENCHY
Advertise here
#50

GPT-5 Mini

OpenAI प्रकाशन: 2025-08-07 चाचणी तारीख: 2026-04-11 01:44 openai/gpt-5-mini::medium
~400B एकूण (~17B सक्रिय)MoEबंद स्रोतअंदाजित

सारांश

GPT-5 Mini AI BENCHY वर 7.0 स्कोर करते आणि #50 वर आहे. याची reliability लागू नाही, pass rate 61.1%, एकूण खर्च $0.128, आणि सरासरी response time 23.98s आहे.

GPT-5 Mini खास का आहे: या score range साठी एकूण benchmark खर्च असामान्यपणे कमी आहे.

मॉडेलची माहिती

संशोधन दिनांक: 2026-08-12

अंदाजित
पॅरामीटर्स
~400B एकूण (~17B सक्रिय)
आर्किटेक्चर
MoE
उपलब्धता
बंद स्रोत
परवाना
-

सार्वजनिक पुराव्यावर आधारित सर्वोत्तम अंदाज; प्रदात्याने सर्व मूल्ये जाहीर केलेली नाहीत.

सुसंगतता

8.6

विश्वसनीयता

लागू नाही

एकूण आउटपुट टोकन्स

59,861

एकूण इनपुट टोकन्स

0

इनपुट किंमत

$0.250 / 1M

आउटपुट किंमत

$2.000 / 1M

बरोबर चाचण्या

चुकीच्या चाचण्या: 9

प्रति प्रयत्न पास दर: 61.1%

अस्थिर चाचण्या

3

अस्थिर चाचण्यांत रन्समध्ये मिश्र निकाल असतात (किमान एक पास आणि एक फेल).

प्रतिसाद वेळ (सरासरी)

23.98s

प्रतिसाद वेळ (कमाल): 88.15s

प्रतिसाद वेळ (एकूण): 431.56s

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#50 GPT-5 Mini

medium
खर्च
$0.007
वेळ
42.9s
टोकन्स
3,432 tok

रन इतिहास

चाचणी तारीख स्कोअर विश्वसनीयता बरोबर चाचण्या एकूण खर्च तुलना करा
2026-08-14 02:07 पुन्हा चाचणी 8.1 10.0 $0.241 तुलना करा
2026-07-16 22:27 नवीन चाचणी जोडली 8.1 10.0 $0.237 तुलना करा
2026-06-04 13:43 नवीन चाचणी जोडली 7.3 10.0 $0.159 तुलना करा
2026-05-22 00:16 पुन्हा चाचणी 6.9 10.0 $0.150 तुलना करा
2026-04-11 01:44 पहिली नोंदलेली रन 7.0 लागू नाही $0.128 सध्याची रन

रन तुलना

रनबेंचमार्क कव्हरेजस्कोअरसुसंगतताविश्वसनीयताबरोबर चाचण्याअस्थिर चाचण्याएकूण आउटपुट टोकन्सएकूण इनपुट टोकन्सएकूण खर्चप्रतिसाद वेळ (सरासरी)
2026-04-11 01:44 · पहिली नोंदलेली रन54/54 प्रयत्न7.08.6लागू नाही9/18359,8610$0.12823.98s
2026-05-22 00:16 · पुन्हा चाचणी60/60 प्रयत्न6.98.710.010/20370,3580$0.15023.99s
फरक+0.1-0.1-10-104970-$0.023-17ms

बेंचमार्क कव्हरेज वेगळे आहे: 54/54 प्रयत्न (लक्ष्य: प्रत्येक चाचणीसाठी 3 पुनरावृत्ती) विरुद्ध 60/60 प्रयत्न (लक्ष्य: प्रत्येक चाचणीसाठी 3 पुनरावृत्ती). एकूण मूल्ये आणि पुनरावृत्तीवर अवलंबून मेट्रिक्स थेट तुलना करता येत नाहीत.

या दोन रनमध्ये वेगवेगळे बेंचमार्क सूट वापरले गेले, त्यामुळे फरकांमध्ये मॉडेलमधील आणि सूटमधील दोन्ही बदल दिसतात.

चार्ट्स

पहिले मॉडेल निवडा, नंतर दुसरे मॉडेल क्लिक करून बाजू-बाजूची तुलना पेज उघडा.

एकूण आउटपुट टोकन्स

स्कोअर vs एकूण आउटपुट टोकन्स

झटपट तुलना

श्रेणीवार तपशील

श्रेणी स्कोअर सुसंगतता बरोबर चाचण्या
अँटी-एआय युक्त्या 7.1 7.6
कोडिंग 10.0 10.0
संयुक्त 10.0 10.0
डेटा पार्सिंग आणि निष्कर्षण 10.0 10.0
डोमेन-विशिष्ट 3.6 7.2
Samanya Buddhimatta 4.5 10.0
सूचनांचे पालन 8.0 6.6
कोडी सोडवणे 5.6 9.8
टूल कॉलिंग 10.0 10.0

तुलना केलेली मॉडेल्स