नेव्हिगेशन
AI BENCHY
Advertise here

OpenAI: GPT-5 Mini vs StepFun: Step 3.7 Flash

average score जवळपास समान आहे: 8.1 vs 8.0. GPT-5 Mini (medium) चा benchmark खर्च कमी आहे: $0.237 vs $0.515. Step 3.7 Flash (medium) वेगवान आहे: 26.37s vs 27.63s, pass rates 63.6% vs 72.7%.

शिफारस केलेले मॉडेलGPT-5 Mini (medium)It has the best score here (8.1), while costing about 2.2x less than Step 3.7 Flash (medium).

AI BENCHY टेस्ट सूटमधून बेंचमार्क या वेळी तयार झाले: 2026-07-17

मेट्रिक GPT-5 Mini GPT-5 Mini medium प्रकाशन: 2025-08-07 Step 3.7 Flash Step 3.7 Flash medium प्रकाशन: 2026-05-29
स्कोअर 8.1 8.0
क्रमांक #26 #28
विश्वसनीयता 10.0 9.9
सुसंगतता 8.8 8.9
बरोबर चाचण्या
प्रति प्रयत्न पास दर 63.6% 72.7%
अस्थिर चाचण्या 3 3
एकूण रन 66 64
प्रति निकाल खर्च 1.971 3.676
एकूण खर्च $0.237 $0.515
इनपुट किंमत $0.250 / 1M $0.200 / 1M
आउटपुट किंमत $2.000 / 1M $1.150 / 1M
एकूण इनपुट टोकन्स 98,374 114,062
आउटपुट टोकन्स 14,434 427,572
रिझनिंग टोकन्स 91,498 0
प्रतिसाद वेळ (सरासरी) 27.63s 26.37s
प्रतिसाद वेळ (कमाल) 111.48s 152.83s
प्रतिसाद वेळ (एकूण) 607.92s 580.25s

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#26 GPT-5 Mini

medium
खर्च
$0.007
वेळ
42.9s
टोकन्स
3,432 tok

#28 Step 3.7 Flash

medium
खर्च
$0.006
वेळ
46.2s
टोकन्स
4,466 tok

स्कोअरनुसार शीर्ष मॉडेल्स

स्कोअर विरुद्ध एकूण खर्च

प्रतिसाद वेळ (सरासरी)

स्कोअर vs प्रतिसाद वेळ (सरासरी)

एकूण आउटपुट टोकन्स

स्कोअर vs एकूण आउटपुट टोकन्स

श्रेणीवार तपशील

कोडिंग स्कोअर सुसंगतता प्रति प्रयत्न पास दर अस्थिर चाचण्या बरोबर चाचण्या प्रतिसाद वेळ (सरासरी) इनपुट टोकन्स आउटपुट टोकन्स रिझनिंग टोकन्स
GPT-5 Mini 10.0 10.0 100.0% 0 27.63s 7,302 658 17,152
Step 3.7 Flash 8.8 7.8 88.9% 1 27.42s 7,437 44,797 0

झटपट तुलना

तुलना जोडी बदला