#58 GPT-5.5
none- खर्च
- $0.090
- वेळ
- 54.3s
- टोकन्स
- 3,063 tok
OpenAI
प्रकाशन: 2026-04-24
चाचणी तारीख: 2026-04-24 19:59
openai/gpt-5.5::none
~1.5T एकूण (~100B सक्रिय)MoEबंद स्रोतअंदाजित
सारांश
GPT-5.5 AI BENCHY वर 6.8 स्कोर करते आणि #58 वर आहे. याची reliability लागू नाही, pass rate 61.1%, एकूण खर्च $0.195, आणि सरासरी response time 1.83s आहे.
GPT-5.5 खास का आहे: हे Samanya Buddhimatta मध्ये सर्वाधिक उठून दिसते, जिथे त्याचा rank #1 आहे; तर संयुक्त हा सर्वात कमकुवत भाग आहे, rank #18. या score range साठी एकूण benchmark खर्च असामान्यपणे कमी आहे. समान मॉडेल्सच्या तुलनेत हे लक्षणीय वेगवान आहे.
मॉडेलची माहिती
संशोधन दिनांक: 2026-08-12
- पॅरामीटर्स
- ~1.5T एकूण (~100B सक्रिय)
- आर्किटेक्चर
- MoE
- उपलब्धता
- बंद स्रोत
- परवाना
- -
सार्वजनिक पुराव्यावर आधारित सर्वोत्तम अंदाज; प्रदात्याने सर्व मूल्ये जाहीर केलेली नाहीत.
6.8
सुसंगतता
8.3
लागू नाही
$0.195
एकूण आउटपुट टोकन्स
1,910
एकूण इनपुट टोकन्स
0
इनपुट किंमत
$5.000 / 1M
आउटपुट किंमत
$30.000 / 1M
अस्थिर चाचण्या
4
अस्थिर चाचण्यांत रन्समध्ये मिश्र निकाल असतात (किमान एक पास आणि एक फेल).
Hamster playing table tennis
Prompt: Create a detailed SVG illustration of a hamster playing table tennis.
रन इतिहास
| चाचणी तारीख | स्कोअर | विश्वसनीयता | बरोबर चाचण्या | एकूण खर्च | तुलना करा |
|---|---|---|---|---|---|
| 2026-08-14 02:17 पुन्हा चाचणी | 7.0 | 10.0 | $0.544 | तुलना करा | |
| 2026-07-16 22:34 नवीन चाचणी जोडली | 6.9 | 10.0 | $0.544 | तुलना करा | |
| 2026-06-04 13:46 नवीन चाचणी जोडली | 6.4 | 10.0 | $0.231 | तुलना करा | |
| 2026-05-22 00:19 सूट बदलला | 6.5 | 10.0 | $0.217 | तुलना करा | |
| 2026-04-24 19:59 पहिला रन | 6.8 | लागू नाही | $0.195 | सध्याची रन |
रन तुलना
| रन | बेंचमार्क कव्हरेज | स्कोअर | सुसंगतता | विश्वसनीयता | बरोबर चाचण्या | अस्थिर चाचण्या | एकूण आउटपुट टोकन्स | एकूण इनपुट टोकन्स | एकूण खर्च | प्रतिसाद वेळ (सरासरी) |
|---|---|---|---|---|---|---|---|---|---|---|
| 2026-04-24 19:59 · पहिला रन | 54/54 प्रयत्न | 6.8 | 8.3 | लागू नाही | 9/18 | 4 | 1,910 | 0 | $0.195 | 1.83s |
| 2026-06-04 13:46 · नवीन चाचणी जोडली | 63/63 प्रयत्न | 6.4 | 8.8 | 10.0 | 10/21 | 3 | 1,971 | 34,212 | $0.231 | 1.89s |
| फरक | — | +0.4 | -0.5 | -1 | +1 | -61 | -34212 | -$0.036 | -62ms |
बेंचमार्क कव्हरेज वेगळे आहे: 54/54 प्रयत्न (लक्ष्य: प्रत्येक चाचणीसाठी 3 पुनरावृत्ती) विरुद्ध 63/63 प्रयत्न (लक्ष्य: प्रत्येक चाचणीसाठी 3 पुनरावृत्ती). एकूण मूल्ये आणि पुनरावृत्तीवर अवलंबून मेट्रिक्स थेट तुलना करता येत नाहीत.
या दोन रनमध्ये वेगवेगळे बेंचमार्क सूट वापरले गेले, त्यामुळे फरकांमध्ये मॉडेलमधील आणि सूटमधील दोन्ही बदल दिसतात.
चार्ट्स
पहिले मॉडेल निवडा, नंतर दुसरे मॉडेल क्लिक करून बाजू-बाजूची तुलना पेज उघडा.
स्कोअरनुसार शीर्ष मॉडेल्स
स्कोअर vs एकूण खर्च
प्रतिसाद वेळ (सरासरी)
स्कोअर vs प्रतिसाद वेळ (सरासरी)
एकूण आउटपुट टोकन्स
स्कोअर vs एकूण आउटपुट टोकन्स
झटपट तुलना
श्रेणीवार तपशील
| श्रेणी | स्कोअर | सुसंगतता | बरोबर चाचण्या |
|---|---|---|---|
| अँटी-एआय युक्त्या | 6.9 | 7.9 | |
| कोडिंग | 10.0 | 10.0 | |
| संयुक्त | 3.0 | 10.0 | |
| डेटा पार्सिंग आणि निष्कर्षण | 10.0 | 10.0 | |
| डोमेन-विशिष्ट | 2.9 | 7.2 | |
| Samanya Buddhimatta | 10.0 | 10.0 | |
| सूचनांचे पालन | 6.2 | 5.8 | |
| कोडी सोडवणे | 6.7 | 7.9 | |
| टूल कॉलिंग | 10.0 | 10.0 |