Claude Fable 5.1 (low) vs Granite 4.2 8B (medium)

Claude Fable 5.1 (low) average score मध्ये पुढे आहे: 6.2 vs 6.1. Granite 4.2 8B (medium) चा benchmark खर्च कमी आहे: $0.029 vs $3.395. Claude Fable 5.1 (low) वेगवान आहे: 11.40s vs 50.47s, pass rates 55.1% vs 37.7%.

AI BENCHY टेस्ट सूटमधून बेंचमार्क या वेळी तयार झाले: 2026-10-01

तुलना केलेली मॉडेल्स

क्रमांक: #230
एकूण आउटपुट टोकन्स: 26,073
प्रतिसाद वेळ (सरासरी): 11.40s
एकूण खर्च: $3.395

क्रमांक: #235
एकूण आउटपुट टोकन्स: 50,147
प्रतिसाद वेळ (सरासरी): 50.47s
एकूण खर्च: $0.029

शिफारस केलेले मॉडेल Granite 4.2 8B (medium)

Its score stays close to the best score here (6.1 vs 6.2), while costing about 120.8x less than Claude Fable 5.1 (low).

तपशीलवार तुलना

मेट्रिक	Claude Fable 5.1 Claude Fable 5.1 low प्रकाशन: 2026-09-02	Granite 4.2 8B Granite 4.2 8B medium प्रकाशन: 2026-09-02

मेट्रिक	Claude Fable 5.1 Claude Fable 5.1 low प्रकाशन: 2026-09-02	Granite 4.2 8B Granite 4.2 8B medium प्रकाशन: 2026-09-02
स्कोअर	6.2	6.1
क्रमांक	#230	#235
विश्वसनीयता	10.0	8.9
सुसंगतता	8.9	9.7
प्रयत्न	69/69	69/69
बरोबर चाचण्या
प्रति प्रयत्न पास दर	55.1%	37.7%
अस्थिर चाचण्या	3	1
एकूण रन	69	69
प्रति निकाल खर्च	30.862	0.354
एकूण खर्च	$3.395	$0.029
इनपुट किंमत	$10.000 / 1M	$0.060 / 1M
आउटपुट किंमत	$50.000 / 1M	$0.250 / 1M
एकूण इनपुट टोकन्स	209,116	259,708
आउटपुट टोकन्स	10,031	16,567
रिझनिंग टोकन्स	16,042	33,580
प्रतिसाद वेळ (सरासरी)	11.40s	50.47s
प्रतिसाद वेळ (कमाल)	34.77s	557.96s
प्रतिसाद वेळ (एकूण)	262.14s	1160.91s
पॅरामीटर्स	~9.5T एकूण (~878B सक्रिय)	8B
उपलब्धता	बंद स्रोत	मुक्त स्रोत

मॉडेल जनरेशन शोकेस

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#230 Claude Fable 5.1

low

खर्च: $0.126
वेळ: 28.5s
टोकन्स: 2,652 tok

#235 IBM: Granite 4.2 8B

medium

Provider returned error

खर्च: $0.000
वेळ: 0.2s
टोकन्स: 0 tok

स्कोअरनुसार शीर्ष मॉडेल्स

स्कोअर विरुद्ध एकूण खर्च

प्रतिसाद वेळ (सरासरी)

स्कोअर vs प्रतिसाद वेळ (सरासरी)

एकूण आउटपुट टोकन्स

स्कोअर vs एकूण आउटपुट टोकन्स

श्रेणीवार तपशील

श्रेणी:

स्वायत्त एजंट कार्ये	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Claude Fable 5.1	2.8	1.6	33.3%	1		34.77s	74,534	1,076	622
Granite 4.2 8B	10.0	10.0	100.0%	0		149.50s	206,799	9,509	21,308

अँटी-एआय युक्त्या	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Claude Fable 5.1	6.5	10.0	50.0%	0		4.54s	858	666	0
Granite 4.2 8B	8.4	10.0	75.0%	0		10.34s	777	1,452	889

कोडिंग	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Claude Fable 5.1	3.4	10.0	0.0%	0		6.75s	10,608	1,753	0
Granite 4.2 8B	5.5	10.0	33.3%	0		12.09s	8,439	2,445	3,900

संयुक्त	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Claude Fable 5.1	10.0	10.0	100.0%	0		29.40s	97,043	4,733	3,850
Granite 4.2 8B	3.0	10.0	0.0%	0		291.12s	24,807	1,902	6,258

डेटा पार्सिंग आणि निष्कर्षण	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Claude Fable 5.1	10.0	10.0	100.0%	0		4.71s	10,515	312	0
Granite 4.2 8B	6.5	10.0	50.0%	0		1.43s	7,683	270	75

डोमेन-विशिष्ट	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Claude Fable 5.1	4.1	4.4	44.5%	2		19.30s	990	61	8,940
Granite 4.2 8B	5.3	10.0	33.3%	0		13.96s	876	154	290

Samanya Buddhimatta	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Claude Fable 5.1	10.0	10.0	100.0%	0		5.62s	714	325	0
Granite 4.2 8B	4.0	10.0	0.0%	0		605ms	561	102	24

सूचनांचे पालन	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Claude Fable 5.1	6.5	10.0	50.0%	0		5.24s	921	278	0
Granite 4.2 8B	3.8	6.0	33.3%	1		36.86s	636	127	425

कोडी सोडवणे	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Claude Fable 5.1	7.7	10.0	66.7%	0		4.78s	912	452	0
Granite 4.2 8B	3.1	10.0	0.0%	0		75.99s	469	206	56

टूल कॉलिंग	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Claude Fable 5.1	10.0	10.0	100.0%	0		13.22s	11,757	354	0
Granite 4.2 8B	10.0	10.0	100.0%	0		2.28s	8,412	359	214

सामान्य ज्ञान	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Claude Fable 5.1	3.0	10.0	0.0%	0		19.18s	264	21	2,630
Granite 4.2 8B	3.0	10.0	0.0%	0		2.24s	249	41	141

झटपट तुलना

तुलना जोडी बदला

Granite 4.2 8BmediumvsKAT-Coder-Pro V2.5none Claude Fable 5.1lowvsGemini 3.1 Flash Lite Previewnone Granite 4.2 8BmediumvsQwen3.5 Plus 2026-04-20none Granite 4.2 8BmediumvsInklingnoneमोफत उपलब्ध Claude Fable 5.1lowvsDeepSeek V4 Flash 0731none Claude Fable 5.1lowvsKAT-Coder-Pro V2.5medium Gemini 3.5 FlashnonevsGranite 4.2 8Bmedium Claude Fable 5.1lowvsGemini 3.5 Flashnone Claude Fable 5.1lowvsSpace Bunny Alphaxhigh Claude Fable 5.1lowvsTrinity Large Thinkingmedium Claude Fable 5.1lowvsInklingnoneमोफत उपलब्ध Claude Fable 5.1lowvsQwen3.5 Plus 2026-04-20none