नेव्हिगेशन
AI BENCHY
Advertise here

Seed-2.0-Code (high) vs GLM 5.1 (medium)

GLM 5.1 (medium) average score मध्ये पुढे आहे: 7.0 vs 6.9. GLM 5.1 (medium) चा benchmark खर्च कमी आहे: $0.727 vs $1.273. GLM 5.1 (medium) वेगवान आहे: 58.80s vs 124.18s, pass rates 63.6% vs 65.2%.

AI BENCHY टेस्ट सूटमधून बेंचमार्क या वेळी तयार झाले: 2026-08-15

क्रमांक
#125
एकूण आउटपुट टोकन्स
410,575
प्रतिसाद वेळ (सरासरी)
124.18s
एकूण खर्च
$1.273
क्रमांक
#117
एकूण आउटपुट टोकन्स
215,889
प्रतिसाद वेळ (सरासरी)
58.80s
एकूण खर्च
$0.727
शिफारस केलेले मॉडेल GLM 5.1 (medium)

It has the best score here (7.0), while costing about 1.8x less than Seed-2.0-Code (high).

तपशीलवार तुलना

मेट्रिक Seed-2.0-Code Seed-2.0-Code high प्रकाशन: 2026-08-12 GLM 5.1 GLM 5.1 medium प्रकाशन: 2026-04-07
स्कोअर 6.9 7.0
क्रमांक #125 #117
विश्वसनीयता 8.6 8.1
सुसंगतता 7.8 8.4
प्रयत्न 66/66 66/66
बरोबर चाचण्या
प्रति प्रयत्न पास दर 63.6% 65.2%
अस्थिर चाचण्या 5 4
एकूण रन 66 66
प्रति निकाल खर्च 11.571 6.923
एकूण खर्च $1.273 $0.727
इनपुट किंमत $0.500 / 1M $0.966 / 1M
आउटपुट किंमत $3.000 / 1M $3.036 / 1M
एकूण इनपुट टोकन्स 81,970 82,592
आउटपुट टोकन्स 7,186 16,089
रिझनिंग टोकन्स 403,389 199,800
प्रतिसाद वेळ (सरासरी) 124.18s 58.80s
प्रतिसाद वेळ (कमाल) 675.30s 308.75s
प्रतिसाद वेळ (एकूण) 2732.03s 1234.72s
पॅरामीटर्स ~200B एकूण (~20B सक्रिय) 744B एकूण (40B सक्रिय)
उपलब्धता बंद स्रोत मुक्त स्रोत

मॉडेल जनरेशन शोकेस

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#125 Seed-2.0-Code

high
खर्च
$0.037
वेळ
183.6s
टोकन्स
12,388 tok

#117 GLM 5.1

medium
अवैध SVG
खर्च
$0.000
वेळ
300.0s
टोकन्स
0 tok

स्कोअरनुसार शीर्ष मॉडेल्स

स्कोअर विरुद्ध एकूण खर्च

प्रतिसाद वेळ (सरासरी)

स्कोअर vs प्रतिसाद वेळ (सरासरी)

एकूण आउटपुट टोकन्स

स्कोअर vs एकूण आउटपुट टोकन्स

श्रेणीवार तपशील

कोडिंग स्कोअर सुसंगतता प्रति प्रयत्न पास दर अस्थिर चाचण्या बरोबर चाचण्या प्रतिसाद वेळ (सरासरी) इनपुट टोकन्स आउटपुट टोकन्स रिझनिंग टोकन्स
Seed-2.0-Code 6.2 6.5 55.6% 1 266.74s 6,750 432 124,956
GLM 5.1 4.6 3.7 44.5% 2 109.63s 5,702 4,871 37,826

झटपट तुलना

तुलना जोडी बदला