AI BENCHY
Advertise here
#116

GPT-5.6 Sol

OpenAI रिलीज़: 2026-07-09 परीक्षण किया गया: 2026-08-14 02:21 openai/gpt-5.6-sol::none
~2T कुल (~150B सक्रिय)MoEबंद स्रोतअनुमानित

सारांश

GPT-5.6 Sol AI BENCHY पर 7.0 स्कोर करता है और #116 पर है। इसकी reliability 10.0, pass rate 63.6%, कुल लागत $0.262, और औसत response time 2.17s है।

GPT-5.6 Sol को अलग क्या बनाता है: यह डोमेन-विशिष्ट में सबसे अलग दिखता है, जहाँ इसकी रैंक #1 है; जबकि कोडिंग इसकी सबसे कमजोर जगह है, जहाँ यह #15 पर है। यह समान मॉडलों की तुलना में काफ़ी तेज है।

मॉडल विवरण

शोध की तारीख: 2026-08-12

अनुमानित
पैरामीटर
~2T कुल (~150B सक्रिय)
आर्किटेक्चर
MoE
उपलब्धता
बंद स्रोत
लाइसेंस
-

सार्वजनिक साक्ष्यों पर आधारित सर्वोत्तम अनुमान; प्रदाता ने सभी मान जारी नहीं किए हैं।

संगति

9.0

कुल लागत (वर्तमान कीमत)

$0.262 ↓ -50.0%

परीक्षण के समय: $0.524

कुल आउटपुट टोकन

4,357

कुल इनपुट टोकन

78,602

इनपुट कीमत

$2.500 / 1M

आउटपुट कीमत

$15.000 / 1M

सही परीक्षण

गलत टेस्ट: 10

प्रति प्रयास पास दर: 63.6%

अस्थिर टेस्ट

3

अस्थिर टेस्ट में रनों के बीच मिले-जुले परिणाम रहे (कम से कम एक पास और एक फेल)।

प्रतिक्रिया समय (औसत)

2.17s

प्रतिक्रिया समय (अधिकतम): 12.81s

प्रतिक्रिया समय (कुल): 47.66s

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#116 GPT-5.6 Sol

none
लागत
$0.116
समय
78.7s
टोकन
3,944 tok

रन इतिहास

परीक्षण किया गया स्कोर विश्वसनीयता सही परीक्षण कुल लागत तुलना करें
2026-08-14 02:21 दोबारा परीक्षण 7.0 10.0 $0.524 वर्तमान रन
2026-07-16 22:37 नया टेस्ट जोड़ा गया 6.9 10.0 $0.524 तुलना करें
2026-07-09 21:15 पहला रन 6.3 10.0 $0.225 तुलना करें

इस रन में अलग बेंचमार्क सूट इस्तेमाल हुआ था। ऐतिहासिक बदलाव पढ़ते समय सूट बदलाव को ध्यान में रखें।

रन तुलना

रनबेंचमार्क कवरेजस्कोरसंगतिविश्वसनीयतासही परीक्षणअस्थिर टेस्टकुल आउटपुट टोकनकुल इनपुट टोकनकुल लागतप्रतिक्रिया समय (औसत)
2026-08-14 02:21 · वर्तमान रन66/66 प्रयास7.09.010.012/2234,35778,602$0.2622.17s
2026-07-09 21:15 · पहला रन63/63 प्रयास6.39.010.010/2131,77634,218$0.2251.66s
अंतर+0.70.00.0+20+2581+44384+$0.038+509ms

बेंचमार्क कवरेज अलग है: 66/66 प्रयास (लक्ष्य: प्रति टेस्ट 3 दोहराव) बनाम 63/63 प्रयास (लक्ष्य: प्रति टेस्ट 3 दोहराव)। कुल और दोहराव-संवेदनशील मेट्रिक सीधे तुलना योग्य नहीं हैं।

इन दो रन में अलग-अलग बेंचमार्क सूट इस्तेमाल हुए थे, इसलिए अंतर मॉडल बदलाव और सूट बदलाव दोनों को दर्शाते हैं।

कीमत का इतिहास

OpenRouter से इस मॉडल का ऐतिहासिक मूल्य डेटा।

तारीख इनपुट कीमत आउटपुट कीमत
2026-08-14 12:51 $5.000 / 1M $30.000 / 1M
2026-08-20 12:51 $2.500 / 1M $15.000 / 1M

चार्ट

पहले मॉडल चुनें, फिर दूसरा मॉडल क्लिक करके साइड-बाय-साइड पेज खोलें।

कुल आउटपुट टोकन

स्कोर vs कुल आउटपुट टोकन

त्वरित तुलना

श्रेणी विवरण

श्रेणी स्कोर संगति सही परीक्षण
एंटी-एआई ट्रिक्स 8.3 10.0
कोडिंग 5.5 10.0
संयुक्त 6.5 10.0
डेटा पार्सिंग और निष्कर्षण 10.0 10.0
डोमेन-विशिष्ट 5.9 7.2
Samanya Buddhimatta 6.5 3.4
निर्देश पालन 8.5 6.8
पहेली समाधान 7.7 10.0
टूल कॉलिंग 10.0 10.0
सामान्य ज्ञान 3.0 10.0

तुलना किए गए मॉडल