नेव्हिगेशन
AI BENCHY
Advertise here

OpenAI: GPT-5.6 Sol vs StepFun: Step 3.7 Flash

average score जवळपास समान आहे: 6.9 vs 6.9. GPT-5.6 Sol चा benchmark खर्च कमी आहे: $0.524 vs $1.207. GPT-5.6 Sol वेगवान आहे: 2.16s vs 64.68s, pass rates 59.1% vs 63.6%.

शिफारस केलेले मॉडेलGPT-5.6 SolIt has the best score here (6.9), while costing about 2.3x less than Step 3.7 Flash (high).

AI BENCHY टेस्ट सूटमधून बेंचमार्क या वेळी तयार झाले: 2026-07-17

मेट्रिक GPT-5.6 Sol GPT-5.6 Sol none प्रकाशन: 2026-07-09 Step 3.7 Flash Step 3.7 Flash high प्रकाशन: 2026-05-29
स्कोअर 6.9 6.9
क्रमांक #80 #83
विश्वसनीयता 10.0 10.0
सुसंगतता 9.0 8.0
बरोबर चाचण्या
प्रति प्रयत्न पास दर 59.1% 63.6%
अस्थिर चाचण्या 3 5
एकूण रन 66 66
प्रति निकाल खर्च 4.761 10.973
एकूण खर्च $0.524 $1.207
इनपुट किंमत $5.000 / 1M $0.200 / 1M
आउटपुट किंमत $30.000 / 1M $1.150 / 1M
एकूण इनपुट टोकन्स 78,593 98,691
आउटपुट टोकन्स 4,357 1,032,395
रिझनिंग टोकन्स 0 0
प्रतिसाद वेळ (सरासरी) 2.16s 64.68s
प्रतिसाद वेळ (कमाल) 12.81s 364.99s
प्रतिसाद वेळ (एकूण) 47.62s 1423.01s

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#80 GPT-5.6 Sol

none
खर्च
$0.116
वेळ
78.7s
टोकन्स
3,944 tok

#83 Step 3.7 Flash

high
खर्च
$0.007
वेळ
63.6s
टोकन्स
6,030 tok

स्कोअरनुसार शीर्ष मॉडेल्स

स्कोअर विरुद्ध एकूण खर्च

प्रतिसाद वेळ (सरासरी)

स्कोअर vs प्रतिसाद वेळ (सरासरी)

एकूण आउटपुट टोकन्स

स्कोअर vs एकूण आउटपुट टोकन्स

श्रेणीवार तपशील

कोडिंग स्कोअर सुसंगतता प्रति प्रयत्न पास दर अस्थिर चाचण्या बरोबर चाचण्या प्रतिसाद वेळ (सरासरी) इनपुट टोकन्स आउटपुट टोकन्स रिझनिंग टोकन्स
GPT-5.6 Sol 5.5 10.0 33.3% 0 1.39s 7,302 390 0
Step 3.7 Flash 4.0 6.0 22.2% 1 206.21s 6,057 327,340 0

झटपट तुलना

तुलना जोडी बदला