AI BENCHY
Advertise here
#138

GPT-5.5

OpenAI प्रकाशन: 2026-04-24 चाचणी तारीख: 2026-08-14 02:17 openai/gpt-5.5::none
~1.5T एकूण (~100B सक्रिय)MoEबंद स्रोतअंदाजित
(medium) (low) (none)

सारांश

GPT-5.5 AI BENCHY वर 7.0 स्कोर करते आणि #138 वर आहे. याची reliability 10.0, pass rate 59.1%, एकूण खर्च $0.544, आणि सरासरी response time 2.35s आहे.

GPT-5.5 खास का आहे: हे Samanya Buddhimatta मध्ये सर्वाधिक उठून दिसते, जिथे त्याचा rank #1 आहे; तर सूचनांचे पालन हा सर्वात कमकुवत भाग आहे, rank #16. समान मॉडेल्सच्या तुलनेत हे लक्षणीय वेगवान आहे.

मॉडेलची माहिती

संशोधन दिनांक: 2026-08-12

अंदाजित
पॅरामीटर्स
~1.5T एकूण (~100B सक्रिय)
आर्किटेक्चर
MoE
उपलब्धता
बंद स्रोत
परवाना
-

सार्वजनिक पुराव्यावर आधारित सर्वोत्तम अंदाज; प्रदात्याने सर्व मूल्ये जाहीर केलेली नाहीत.

सुसंगतता

9.2

एकूण आउटपुट टोकन्स

4,915

एकूण इनपुट टोकन्स

79,294

इनपुट किंमत

$5.000 / 1M

आउटपुट किंमत

$30.000 / 1M

बरोबर चाचण्या

चुकीच्या चाचण्या: 10

प्रति प्रयत्न पास दर: 59.1%

अस्थिर चाचण्या

2

अस्थिर चाचण्यांत रन्समध्ये मिश्र निकाल असतात (किमान एक पास आणि एक फेल).

प्रतिसाद वेळ (सरासरी)

2.35s

प्रतिसाद वेळ (कमाल): 12.24s

प्रतिसाद वेळ (एकूण): 51.78s

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#138 GPT-5.5

none
खर्च
$0.090
वेळ
54.3s
टोकन्स
3,063 tok

रन इतिहास

चाचणी तारीख स्कोअर विश्वसनीयता बरोबर चाचण्या एकूण खर्च तुलना करा
2026-08-14 02:17 पुन्हा चाचणी 7.0 10.0 $0.544 सध्याची रन
2026-07-16 22:34 नवीन चाचणी जोडली 6.9 10.0 $0.544 तुलना करा
2026-06-04 13:46 नवीन चाचणी जोडली 6.4 10.0 $0.231 तुलना करा
2026-05-22 00:19 सूट बदलला 6.5 10.0 $0.217 तुलना करा
2026-04-24 19:59 पहिला रन 6.8 लागू नाही $0.195 तुलना करा

या रनमध्ये वेगळा बेंचमार्क सूट वापरला गेला. ऐतिहासिक बदल वाचताना सूटमधील बदल लक्षात घ्या.

रन तुलना

रनबेंचमार्क कव्हरेजस्कोअरसुसंगतताविश्वसनीयताबरोबर चाचण्याअस्थिर चाचण्याएकूण आउटपुट टोकन्सएकूण इनपुट टोकन्सएकूण खर्चप्रतिसाद वेळ (सरासरी)
2026-08-14 02:17 · सध्याची रन66/66 प्रयत्न7.09.210.012/2224,91579,294$0.5442.35s
2026-06-04 13:46 · नवीन चाचणी जोडली63/63 प्रयत्न6.48.810.010/2131,97134,212$0.2311.89s
फरक+0.6+0.40.0+2-1+2944+45082+$0.314+466ms

बेंचमार्क कव्हरेज वेगळे आहे: 66/66 प्रयत्न (लक्ष्य: प्रत्येक चाचणीसाठी 3 पुनरावृत्ती) विरुद्ध 63/63 प्रयत्न (लक्ष्य: प्रत्येक चाचणीसाठी 3 पुनरावृत्ती). एकूण मूल्ये आणि पुनरावृत्तीवर अवलंबून मेट्रिक्स थेट तुलना करता येत नाहीत.

या दोन रनमध्ये वेगवेगळे बेंचमार्क सूट वापरले गेले, त्यामुळे फरकांमध्ये मॉडेलमधील आणि सूटमधील दोन्ही बदल दिसतात.

किंमत इतिहास

OpenRouter मधील या मॉडेलचा ऐतिहासिक किंमत डेटा.

तारीख इनपुट किंमत आउटपुट किंमत
2026-08-14 12:51 $5.000 / 1M $30.000 / 1M

चार्ट्स

पहिले मॉडेल निवडा, नंतर दुसरे मॉडेल क्लिक करून बाजू-बाजूची तुलना पेज उघडा.

एकूण आउटपुट टोकन्स

स्कोअर vs एकूण आउटपुट टोकन्स

झटपट तुलना

श्रेणीवार तपशील

श्रेणी स्कोअर सुसंगतता बरोबर चाचण्या
अँटी-एआय युक्त्या 6.9 7.9
कोडिंग 5.5 10.0
संयुक्त 6.5 10.0
डेटा पार्सिंग आणि निष्कर्षण 10.0 10.0
डोमेन-विशिष्ट 5.3 10.0
Samanya Buddhimatta 10.0 10.0
सूचनांचे पालन 6.2 5.8
कोडी सोडवणे 7.7 10.0
टूल कॉलिंग 10.0 10.0
सामान्य ज्ञान 3.0 10.0

तुलना केलेली मॉडेल्स