AI BENCHY
Advertise here
#50

GPT-5.6 Luna

OpenAI प्रकाशन: 2026-07-09 चाचणी तारीख: 2026-07-09 21:32 openai/gpt-5.6-luna::high
~400B एकूण (~17B सक्रिय)MoEबंद स्रोतअंदाजित

सारांश

GPT-5.6 Luna AI BENCHY वर 7.7 स्कोर करते आणि #50 वर आहे. याची reliability 10.0, pass rate 71.4%, एकूण खर्च $0.924, आणि सरासरी response time 18.39s आहे.

GPT-5.6 Luna खास का आहे: हे डोमेन-विशिष्ट मध्ये सर्वाधिक उठून दिसते, जिथे त्याचा rank #1 आहे; तर कोडिंग हा सर्वात कमकुवत भाग आहे, rank #18.

मॉडेलची माहिती

संशोधन दिनांक: 2026-08-12

अंदाजित
पॅरामीटर्स
~400B एकूण (~17B सक्रिय)
आर्किटेक्चर
MoE
उपलब्धता
बंद स्रोत
परवाना
-

सार्वजनिक पुराव्यावर आधारित सर्वोत्तम अंदाज; प्रदात्याने सर्व मूल्ये जाहीर केलेली नाहीत.

सुसंगतता

8.8

एकूण आउटपुट टोकन्स

147,895

एकूण इनपुट टोकन्स

35,699

इनपुट किंमत

$1.000 / 1M

आउटपुट किंमत

$6.000 / 1M

बरोबर चाचण्या

चुकीच्या चाचण्या: 7

प्रति प्रयत्न पास दर: 71.4%

अस्थिर चाचण्या

3

अस्थिर चाचण्यांत रन्समध्ये मिश्र निकाल असतात (किमान एक पास आणि एक फेल).

प्रतिसाद वेळ (सरासरी)

18.39s

प्रतिसाद वेळ (कमाल): 111.09s

प्रतिसाद वेळ (एकूण): 386.24s

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#50 GPT-5.6 Luna

high
खर्च
$0.033
वेळ
34.2s
टोकन्स
5,484 tok

रन इतिहास

चाचणी तारीख स्कोअर विश्वसनीयता बरोबर चाचण्या एकूण खर्च तुलना करा
2026-08-14 02:21 पुन्हा चाचणी 7.6 10.0 $0.090 तुलना करा
2026-07-16 22:38 नवीन चाचणी जोडली 7.7 10.0 $1.017 तुलना करा
2026-07-09 21:32 पहिला रन 7.7 10.0 $0.924 सध्याची रन

रन तुलना

रनबेंचमार्क कव्हरेजस्कोअरसुसंगतताविश्वसनीयताबरोबर चाचण्याअस्थिर चाचण्याएकूण आउटपुट टोकन्सएकूण इनपुट टोकन्सएकूण खर्चप्रतिसाद वेळ (सरासरी)
2026-07-09 21:32 · पहिला रन63/63 प्रयत्न7.78.810.014/213147,89535,699$0.92418.39s
2026-07-16 22:38 · नवीन चाचणी जोडली66/66 प्रयत्न7.78.910.015/223155,99880,918$1.01718.68s
फरक0.0-0.10.0-10-8103-45219-$0.094-292ms

बेंचमार्क कव्हरेज वेगळे आहे: 63/63 प्रयत्न (लक्ष्य: प्रत्येक चाचणीसाठी 3 पुनरावृत्ती) विरुद्ध 66/66 प्रयत्न (लक्ष्य: प्रत्येक चाचणीसाठी 3 पुनरावृत्ती). एकूण मूल्ये आणि पुनरावृत्तीवर अवलंबून मेट्रिक्स थेट तुलना करता येत नाहीत.

या दोन रनमध्ये वेगवेगळे बेंचमार्क सूट वापरले गेले, त्यामुळे फरकांमध्ये मॉडेलमधील आणि सूटमधील दोन्ही बदल दिसतात.

किंमत इतिहास

OpenRouter मधील या मॉडेलचा ऐतिहासिक किंमत डेटा.

तारीख इनपुट किंमत आउटपुट किंमत
2026-07-09 21:33 $1.000 / 1M $6.000 / 1M

चार्ट्स

पहिले मॉडेल निवडा, नंतर दुसरे मॉडेल क्लिक करून बाजू-बाजूची तुलना पेज उघडा.

एकूण आउटपुट टोकन्स

स्कोअर vs एकूण आउटपुट टोकन्स

झटपट तुलना

श्रेणीवार तपशील

श्रेणी स्कोअर सुसंगतता बरोबर चाचण्या
अँटी-एआय युक्त्या 8.3 10.0
कोडिंग 5.5 4.7
संयुक्त 10.0 10.0
डेटा पार्सिंग आणि निष्कर्षण 10.0 10.0
डोमेन-विशिष्ट 7.7 10.0
Samanya Buddhimatta 5.0 10.0
सूचनांचे पालन 9.9 10.0
कोडी सोडवणे 7.6 7.2
टूल कॉलिंग 10.0 10.0
सामान्य ज्ञान 3.0 10.0

तुलना केलेली मॉडेल्स