नेविगेशन
AI BENCHY
Advertise here

AI BENCHY तुलना

OpenAI: GPT-5.6 Sol vs StepFun: Step 3.7 Flash

सारांश

GPT-5.6 Sol (medium) vs Step 3.7 Flash (low) benchmark तुलना: GPT-5.6 Sol (medium) average score में आगे है: 9.4 vs 7.7. Step 3.7 Flash (low) की benchmark लागत कम है: $0.341 vs $0.966. GPT-5.6 Sol (medium) तेज है: 10.79s vs 15.74s, pass rates 90.5% vs 68.3%.

अनुशंसित मॉडल: GPT-5.6 Sol (medium) - It has the strongest score in this comparison (9.4) and the best overall balance of cost and response time across all 2 models.

बेंचमार्क AI BENCHY टेस्ट सूट्स से इस समय जनरेट किए गए:: 2026-07-09

मेट्रिक GPT-5.6 Sol GPT-5.6 Sol medium रिलीज़: 2026-07-09 Step 3.7 Flash Step 3.7 Flash low रिलीज़: 2026-05-29
स्कोर 9.4 7.7
रैंक #5 #49
विश्वसनीयता 10.0 10.0
संगति 8.8 8.4
सही परीक्षण
प्रति प्रयास पास दर 90.5% 68.3%
अस्थिर टेस्ट 3 4
कुल रन 63 63
प्रति परिणाम लागत 5.682 2.840
कुल लागत $0.966 $0.341
इनपुट कीमत $5.000 / 1M $0.200 / 1M
आउटपुट कीमत $30.000 / 1M $1.150 / 1M
कुल इनपुट टोकन 34,218 40,101
आउटपुट टोकन 1,895 289,325
रीजनिंग टोकन 24,600 0
प्रतिक्रिया समय (औसत) 10.79s 15.74s
प्रतिक्रिया समय (अधिकतम) 79.40s 124.75s
प्रतिक्रिया समय (कुल) 226.57s 330.63s

जनरेशन शोकेस

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#5 GPT-5.6 Sol

medium
लागत
$0.124
समय
57.2s
टोकन
4,199 tok

#49 Step 3.7 Flash

low
अमान्य SVG
लागत
$0.004
समय
25.3s
टोकन
3,072 tok

स्कोर के अनुसार शीर्ष मॉडल

स्कोर बनाम कुल लागत

प्रतिक्रिया समय (औसत)

स्कोर vs प्रतिक्रिया समय (औसत)

कुल आउटपुट टोकन

स्कोर vs कुल आउटपुट टोकन

श्रेणी विवरण

एंटी-एआई ट्रिक्स स्कोर संगति प्रति प्रयास पास दर अस्थिर टेस्ट सही परीक्षण प्रतिक्रिया समय (औसत) इनपुट टोकन आउटपुट टोकन रीजनिंग टोकन
GPT-5.6 Sol 10.0 10.0 100.0% 0 2.81s 606 173 572
Step 3.7 Flash 8.7 7.9 91.7% 1 4.02s 756 10,896 0
कोडिंग स्कोर संगति प्रति प्रयास पास दर अस्थिर टेस्ट सही परीक्षण प्रतिक्रिया समय (औसत) इनपुट टोकन आउटपुट टोकन रीजनिंग टोकन
GPT-5.6 Sol 10.0 10.0 100.0% 0 9.40s 7,302 394 4,706
Step 3.7 Flash 8.2 7.2 88.9% 1 9.46s 7,437 18,685 0
संयुक्त स्कोर संगति प्रति प्रयास पास दर अस्थिर टेस्ट सही परीक्षण प्रतिक्रिया समय (औसत) इनपुट टोकन आउटपुट टोकन रीजनिंग टोकन
GPT-5.6 Sol 10.0 10.0 100.0% 0 12.13s 11,019 318 1,214
Step 3.7 Flash 10.0 10.0 100.0% 0 7.98s 13,683 6,426 0
डेटा पार्सिंग और निष्कर्षण स्कोर संगति प्रति प्रयास पास दर अस्थिर टेस्ट सही परीक्षण प्रतिक्रिया समय (औसत) इनपुट टोकन आउटपुट टोकन रीजनिंग टोकन
GPT-5.6 Sol 10.0 10.0 100.0% 0 1.38s 7,140 222 0
Step 3.7 Flash 7.3 5.8 83.3% 1 2.29s 7,398 2,667 0
डोमेन-विशिष्ट स्कोर संगति प्रति प्रयास पास दर अस्थिर टेस्ट सही परीक्षण प्रतिक्रिया समय (औसत) इनपुट टोकन आउटपुट टोकन रीजनिंग टोकन
GPT-5.6 Sol 5.9 7.2 55.6% 1 47.86s 723 71 16,201
Step 3.7 Flash 5.3 7.2 44.4% 1 43.31s 828 104,487 0
Samanya Buddhimatta स्कोर संगति प्रति प्रयास पास दर अस्थिर टेस्ट सही परीक्षण प्रतिक्रिया समय (औसत) इनपुट टोकन आउटपुट टोकन रीजनिंग टोकन
GPT-5.6 Sol 10.0 10.0 100.0% 0 3.48s 477 99 214
Step 3.7 Flash 3.4 9.3 0.0% 0 7.00s 525 4,604 0
निर्देश पालन स्कोर संगति प्रति प्रयास पास दर अस्थिर टेस्ट सही परीक्षण प्रतिक्रिया समय (औसत) इनपुट टोकन आउटपुट टोकन रीजनिंग टोकन
GPT-5.6 Sol 10.0 10.0 100.0% 0 2.50s 660 96 249
Step 3.7 Flash 9.8 10.0 100.0% 0 1.58s 735 1,857 0
पहेली समाधान स्कोर संगति प्रति प्रयास पास दर अस्थिर टेस्ट सही परीक्षण प्रतिक्रिया समय (औसत) इनपुट टोकन आउटपुट टोकन रीजनिंग टोकन
GPT-5.6 Sol 8.2 7.2 88.9% 1 2.98s 642 228 566
Step 3.7 Flash 5.5 9.9 33.3% 0 1.84s 756 3,564 0
टूल कॉलिंग स्कोर संगति प्रति प्रयास पास दर अस्थिर टेस्ट सही परीक्षण प्रतिक्रिया समय (औसत) इनपुट टोकन आउटपुट टोकन रीजनिंग टोकन
GPT-5.6 Sol 10.0 10.0 100.0% 0 6.30s 5,454 264 361
Step 3.7 Flash 10.0 10.0 100.0% 0 3.25s 7,746 1,360 0
सामान्य ज्ञान स्कोर संगति प्रति प्रयास पास दर अस्थिर टेस्ट सही परीक्षण प्रतिक्रिया समय (औसत) इनपुट टोकन आउटपुट टोकन रीजनिंग टोकन
GPT-5.6 Sol 4.7 1.6 66.7% 1 4.94s 195 30 517
Step 3.7 Flash 3.0 10.0 0.0% 0 124.75s 237 134,779 0

त्वरित तुलना

तुलना जोड़ी बदलें