नेव्हिगेशन
AI BENCHY
Advertise here

Seed-2.0-Code vs Granite 4.2 8B (medium)

Seed-2.0-Code average score मध्ये पुढे आहे: 5.3 vs 5.2. Granite 4.2 8B (medium) चा benchmark खर्च कमी आहे: $0.009 vs $0.151. Seed-2.0-Code वेगवान आहे: 14.67s vs 45.97s, pass rates 36.4% vs 34.9%.

AI BENCHY टेस्ट सूटमधून बेंचमार्क या वेळी तयार झाले: 2026-09-02

क्रमांक
#237
एकूण आउटपुट टोकन्स
23,433
प्रतिसाद वेळ (सरासरी)
14.67s
एकूण खर्च
$0.151
क्रमांक
#243
एकूण आउटपुट टोकन्स
19,330
प्रतिसाद वेळ (सरासरी)
45.97s
एकूण खर्च
$0.009
शिफारस केलेले मॉडेल Granite 4.2 8B (medium)

Its score stays close to the best score here (5.2 vs 5.3), while costing about 18.4x less than Seed-2.0-Code.

तपशीलवार तुलना

मेट्रिक Seed-2.0-Code Seed-2.0-Code none प्रकाशन: 2026-08-12 Granite 4.2 8B Granite 4.2 8B medium प्रकाशन: 2026-09-02
स्कोअर 5.3 5.2
क्रमांक #237 #243
विश्वसनीयता 8.6 8.7
सुसंगतता 8.1 9.6
प्रयत्न 66/66 66/66
बरोबर चाचण्या
प्रति प्रयत्न पास दर 36.4% 34.9%
अस्थिर चाचण्या 5 1
एकूण रन 66 66
प्रति निकाल खर्च 2.503 0.117
एकूण खर्च $0.151 $0.009
इनपुट किंमत $0.500 / 1M $0.100 / 1M
आउटपुट किंमत $3.000 / 1M $0.150 / 1M
एकूण इनपुट टोकन्स 159,749 52,909
आउटपुट टोकन्स 23,433 7,058
रिझनिंग टोकन्स 0 12,272
प्रतिसाद वेळ (सरासरी) 14.67s 45.97s
प्रतिसाद वेळ (कमाल) 132.84s 557.96s
प्रतिसाद वेळ (एकूण) 322.71s 1011.42s
पॅरामीटर्स ~200B एकूण (~20B सक्रिय) 8B
उपलब्धता बंद स्रोत मुक्त स्रोत

मॉडेल जनरेशन शोकेस

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#237 Seed-2.0-Code

none
खर्च
$0.030
वेळ
140.6s
टोकन्स
9,924 tok

#243 IBM: Granite 4.2 8B

medium
Provider returned error
खर्च
$0.000
वेळ
0.2s
टोकन्स
0 tok

स्कोअरनुसार शीर्ष मॉडेल्स

स्कोअर विरुद्ध एकूण खर्च

प्रतिसाद वेळ (सरासरी)

स्कोअर vs प्रतिसाद वेळ (सरासरी)

एकूण आउटपुट टोकन्स

स्कोअर vs एकूण आउटपुट टोकन्स

श्रेणीवार तपशील

कोडिंग स्कोअर सुसंगतता प्रति प्रयत्न पास दर अस्थिर चाचण्या बरोबर चाचण्या प्रतिसाद वेळ (सरासरी) इनपुट टोकन्स आउटपुट टोकन्स रिझनिंग टोकन्स
Seed-2.0-Code 3.6 9.8 0.0% 0 13.42s 7,230 505 0
Granite 4.2 8B 5.5 10.0 33.3% 0 12.09s 8,439 2,445 3,900

झटपट तुलना

तुलना जोडी बदला