#73 GPT-5 Mini
medium- खर्च
- $0.007
- वेळ
- 42.9s
- टोकन्स
- 3,432 tok
सारांश
GPT-5 Mini AI BENCHY वर 6.9 स्कोर करते आणि #73 वर आहे. याची reliability 10.0, pass rate 60.0%, एकूण खर्च $0.150, आणि सरासरी response time 23.99s आहे.
GPT-5 Mini खास का आहे: हे कोडिंग मध्ये सर्वाधिक उठून दिसते, जिथे त्याचा rank #1 आहे; तर कोडी सोडवणे हा सर्वात कमकुवत भाग आहे, rank #18.
संशोधन दिनांक: 2026-08-12
सार्वजनिक पुराव्यावर आधारित सर्वोत्तम अंदाज; प्रदात्याने सर्व मूल्ये जाहीर केलेली नाहीत.
6.9
सुसंगतता
8.7
10.0
$0.150
एकूण आउटपुट टोकन्स
70,358
एकूण इनपुट टोकन्स
0
इनपुट किंमत
$0.250 / 1M
आउटपुट किंमत
$2.000 / 1M
अस्थिर चाचण्या
3
अस्थिर चाचण्यांत रन्समध्ये मिश्र निकाल असतात (किमान एक पास आणि एक फेल).
Prompt: Create a detailed SVG illustration of a hamster playing table tennis.
रन इतिहास
| चाचणी तारीख | स्कोअर | विश्वसनीयता | बरोबर चाचण्या | एकूण खर्च | तुलना करा |
|---|---|---|---|---|---|
| 2026-08-14 02:07 पुन्हा चाचणी | 8.1 | 10.0 | $0.241 | तुलना करा | |
| 2026-07-16 22:27 नवीन चाचणी जोडली | 8.1 | 10.0 | $0.237 | तुलना करा | |
| 2026-06-04 13:43 नवीन चाचणी जोडली | 7.3 | 10.0 | $0.159 | तुलना करा | |
| 2026-05-22 00:16 पुन्हा चाचणी | 6.9 | 10.0 | $0.150 | सध्याची रन | |
| 2026-04-11 01:44 पहिली नोंदलेली रन | 7.0 | लागू नाही | $0.128 | तुलना करा |
रन तुलना
| रन | बेंचमार्क कव्हरेज | स्कोअर | सुसंगतता | विश्वसनीयता | बरोबर चाचण्या | अस्थिर चाचण्या | एकूण आउटपुट टोकन्स | एकूण इनपुट टोकन्स | एकूण खर्च | प्रतिसाद वेळ (सरासरी) |
|---|---|---|---|---|---|---|---|---|---|---|
| 2026-05-22 00:16 · पुन्हा चाचणी | 60/60 प्रयत्न | 6.9 | 8.7 | 10.0 | 10/20 | 3 | 70,358 | 0 | $0.150 | 23.99s |
| 2026-06-04 13:43 · नवीन चाचणी जोडली | 63/63 प्रयत्न | 7.3 | 9.1 | 10.0 | 12/21 | 2 | 74,491 | 37,100 | $0.159 | 23.64s |
| फरक | — | -0.4 | -0.4 | 0.0 | -2 | +1 | -4133 | -37100 | -$0.009 | +353ms |
बेंचमार्क कव्हरेज वेगळे आहे: 60/60 प्रयत्न (लक्ष्य: प्रत्येक चाचणीसाठी 3 पुनरावृत्ती) विरुद्ध 63/63 प्रयत्न (लक्ष्य: प्रत्येक चाचणीसाठी 3 पुनरावृत्ती). एकूण मूल्ये आणि पुनरावृत्तीवर अवलंबून मेट्रिक्स थेट तुलना करता येत नाहीत.
या दोन रनमध्ये वेगवेगळे बेंचमार्क सूट वापरले गेले, त्यामुळे फरकांमध्ये मॉडेलमधील आणि सूटमधील दोन्ही बदल दिसतात.
पहिले मॉडेल निवडा, नंतर दुसरे मॉडेल क्लिक करून बाजू-बाजूची तुलना पेज उघडा.
| श्रेणी | स्कोअर | सुसंगतता | बरोबर चाचण्या |
|---|---|---|---|
| अँटी-एआय युक्त्या | 7.1 | 7.6 | |
| कोडिंग | 10.0 | 10.0 | |
| संयुक्त | 10.0 | 10.0 | |
| डेटा पार्सिंग आणि निष्कर्षण | 10.0 | 10.0 | |
| डोमेन-विशिष्ट | 3.6 | 7.2 | |
| Samanya Buddhimatta | 4.5 | 10.0 | |
| सूचनांचे पालन | 7.9 | 6.5 | |
| कोडी सोडवणे | 5.6 | 9.8 | |
| टूल कॉलिंग | 10.0 | 10.0 | |
| सामान्य ज्ञान | 3.0 | 10.0 |