AI BENCHY
Advertise here
#32

GPT-5.2 Chat

OpenAI प्रकाशन: 2025-12-11 चाचणी तारीख: 2026-04-11 01:44 openai/gpt-5.2-chat::none
~400B एकूण (~17B सक्रिय)MoEबंद स्रोतअंदाजित

सारांश

GPT-5.2 Chat AI BENCHY वर 7.9 स्कोर करते आणि #32 वर आहे. याची reliability लागू नाही, pass rate 75.9%, एकूण खर्च $0.291, आणि सरासरी response time 6.84s आहे.

GPT-5.2 Chat खास का आहे: हे डोमेन-विशिष्ट मध्ये सर्वाधिक उठून दिसते, जिथे त्याचा rank #3 आहे; तर Samanya Buddhimatta हा सर्वात कमकुवत भाग आहे, rank #17. या score range साठी एकूण benchmark खर्च असामान्यपणे कमी आहे.

मॉडेलची माहिती

संशोधन दिनांक: 2026-08-12

अंदाजित
पॅरामीटर्स
~400B एकूण (~17B सक्रिय)
आर्किटेक्चर
MoE
उपलब्धता
बंद स्रोत
परवाना
-

सार्वजनिक पुराव्यावर आधारित सर्वोत्तम अंदाज; प्रदात्याने सर्व मूल्ये जाहीर केलेली नाहीत.

सुसंगतता

8.7

विश्वसनीयता

लागू नाही

एकूण आउटपुट टोकन्स

17,346

एकूण इनपुट टोकन्स

0

इनपुट किंमत

$1.750 / 1M

आउटपुट किंमत

$14.000 / 1M

बरोबर चाचण्या

चुकीच्या चाचण्या: 6

प्रति प्रयत्न पास दर: 75.9%

अस्थिर चाचण्या

3

अस्थिर चाचण्यांत रन्समध्ये मिश्र निकाल असतात (किमान एक पास आणि एक फेल).

प्रतिसाद वेळ (सरासरी)

6.84s

प्रतिसाद वेळ (कमाल): 38.52s

प्रतिसाद वेळ (एकूण): 123.17s

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#32 GPT-5.2 Chat

none
खर्च
$0.010
वेळ
15.3s
टोकन्स
797 tok

रन इतिहास

चाचणी तारीख स्कोअर विश्वसनीयता बरोबर चाचण्या एकूण खर्च तुलना करा
2026-08-14 02:24 पुन्हा चाचणी 7.9 10.0 $0.594 तुलना करा
2026-07-16 22:40 नवीन चाचणी जोडली 8.0 10.0 $0.604 तुलना करा
2026-06-04 13:47 नवीन चाचणी जोडली 7.9 10.0 $0.393 तुलना करा
2026-05-22 00:19 सूट बदलला 7.6 10.0 $0.355 तुलना करा
2026-04-11 01:44 पहिली नोंदलेली रन 7.9 लागू नाही $0.291 सध्याची रन

रन तुलना

रनबेंचमार्क कव्हरेजस्कोअरसुसंगतताविश्वसनीयताबरोबर चाचण्याअस्थिर चाचण्याएकूण आउटपुट टोकन्सएकूण इनपुट टोकन्सएकूण खर्चप्रतिसाद वेळ (सरासरी)
2026-04-11 01:44 · पहिली नोंदलेली रन54/54 प्रयत्न7.98.7लागू नाही12/18317,3460$0.2916.84s
2026-07-16 22:40 · नवीन चाचणी जोडली66/66 प्रयत्न8.08.610.014/22430,424101,248$0.6047.65s
फरक-0.1+0.1-2-1-13078-101248-$0.313-811ms

बेंचमार्क कव्हरेज वेगळे आहे: 54/54 प्रयत्न (लक्ष्य: प्रत्येक चाचणीसाठी 3 पुनरावृत्ती) विरुद्ध 66/66 प्रयत्न (लक्ष्य: प्रत्येक चाचणीसाठी 3 पुनरावृत्ती). एकूण मूल्ये आणि पुनरावृत्तीवर अवलंबून मेट्रिक्स थेट तुलना करता येत नाहीत.

या दोन रनमध्ये वेगवेगळे बेंचमार्क सूट वापरले गेले, त्यामुळे फरकांमध्ये मॉडेलमधील आणि सूटमधील दोन्ही बदल दिसतात.

चार्ट्स

पहिले मॉडेल निवडा, नंतर दुसरे मॉडेल क्लिक करून बाजू-बाजूची तुलना पेज उघडा.

एकूण आउटपुट टोकन्स

स्कोअर vs एकूण आउटपुट टोकन्स

झटपट तुलना

श्रेणीवार तपशील

श्रेणी स्कोअर सुसंगतता बरोबर चाचण्या
अँटी-एआय युक्त्या 8.7 7.9
कोडिंग 10.0 10.0
संयुक्त 10.0 10.0
डेटा पार्सिंग आणि निष्कर्षण 10.0 10.0
डोमेन-विशिष्ट 5.3 10.0
Samanya Buddhimatta 4.4 3.0
सूचनांचे पालन 7.5 6.1
कोडी सोडवणे 7.7 10.0
टूल कॉलिंग 10.0 10.0

तुलना केलेली मॉडेल्स