Claude Fable 5.1 (low) vs KAT-Coder-Pro V2.5

Claude Fable 5.1 (low) average score मध्ये पुढे आहे: 6.2 vs 6.1. KAT-Coder-Pro V2.5 चा benchmark खर्च कमी आहे: $0.487 vs $3.395. Claude Fable 5.1 (low) वेगवान आहे: 11.40s vs 24.96s, pass rates 55.1% vs 68.1%.

AI BENCHY टेस्ट सूटमधून बेंचमार्क या वेळी तयार झाले: 2026-10-01

तुलना केलेली मॉडेल्स

क्रमांक: #230
एकूण आउटपुट टोकन्स: 26,073
प्रतिसाद वेळ (सरासरी): 11.40s
एकूण खर्च: $3.395

क्रमांक: #236
एकूण आउटपुट टोकन्स: 139,572
प्रतिसाद वेळ (सरासरी): 24.96s
एकूण खर्च: $0.487

शिफारस केलेले मॉडेल KAT-Coder-Pro V2.5

Its score stays close to the best score here (6.1 vs 6.2), while costing about 7.0x less than Claude Fable 5.1 (low).

तपशीलवार तुलना

मेट्रिक	Claude Fable 5.1 Claude Fable 5.1 low प्रकाशन: 2026-09-02	KAT-Coder-Pro V2.5 KAT-Coder-Pro V2.5 none प्रकाशन: 2026-07-14

मेट्रिक	Claude Fable 5.1 Claude Fable 5.1 low प्रकाशन: 2026-09-02	KAT-Coder-Pro V2.5 KAT-Coder-Pro V2.5 none प्रकाशन: 2026-07-14
स्कोअर	6.2	6.1
क्रमांक	#230	#236
विश्वसनीयता	10.0	10.0
सुसंगतता	8.9	7.1
प्रयत्न	69/69	69/69
बरोबर चाचण्या
प्रति प्रयत्न पास दर	55.1%	68.1%
अस्थिर चाचण्या	3	8
एकूण रन	69	69
प्रति निकाल खर्च	30.862	4.419
एकूण खर्च	$3.395	$0.487
इनपुट किंमत	$10.000 / 1M	$0.740 / 1M
आउटपुट किंमत	$50.000 / 1M	$2.960 / 1M
एकूण इनपुट टोकन्स	209,116	98,508
आउटपुट टोकन्स	10,031	139,572
रिझनिंग टोकन्स	16,042	0
प्रतिसाद वेळ (सरासरी)	11.40s	24.96s
प्रतिसाद वेळ (कमाल)	34.77s	335.41s
प्रतिसाद वेळ (एकूण)	262.14s	574.12s
पॅरामीटर्स	~9.5T एकूण (~878B सक्रिय)	~700B एकूण (~72B सक्रिय)
उपलब्धता	बंद स्रोत	बंद स्रोत

मॉडेल जनरेशन शोकेस

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#230 Claude Fable 5.1

low

खर्च: $0.126
वेळ: 28.5s
टोकन्स: 2,652 tok

#236 KAT-Coder-Pro V2.5

none

खर्च: $0.010
वेळ: 29.0s
टोकन्स: 3,439 tok

स्कोअरनुसार शीर्ष मॉडेल्स

स्कोअर विरुद्ध एकूण खर्च

प्रतिसाद वेळ (सरासरी)

स्कोअर vs प्रतिसाद वेळ (सरासरी)

एकूण आउटपुट टोकन्स

स्कोअर vs एकूण आउटपुट टोकन्स

श्रेणीवार तपशील

श्रेणी:

स्वायत्त एजंट कार्ये	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Claude Fable 5.1	2.8	1.6	33.3%	1		34.77s	74,534	1,076	622
KAT-Coder-Pro V2.5	3.0	10.0	0.0%	0		1.90s	0	0	0

अँटी-एआय युक्त्या	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Claude Fable 5.1	6.5	10.0	50.0%	0		4.54s	858	666	0
KAT-Coder-Pro V2.5	8.7	7.9	91.7%	1		4.58s	672	3,998	0

कोडिंग	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Claude Fable 5.1	3.4	10.0	0.0%	0		6.75s	10,608	1,753	0
KAT-Coder-Pro V2.5	6.1	4.7	66.7%	2		22.52s	7,893	22,440	0

संयुक्त	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Claude Fable 5.1	10.0	10.0	100.0%	0		29.40s	97,043	4,733	3,850
KAT-Coder-Pro V2.5	4.1	5.0	33.3%	1		183.08s	70,881	77,889	0

डेटा पार्सिंग आणि निष्कर्षण	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Claude Fable 5.1	10.0	10.0	100.0%	0		4.71s	10,515	312	0
KAT-Coder-Pro V2.5	10.0	10.0	100.0%	0		5.07s	7,776	2,361	0

डोमेन-विशिष्ट	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Claude Fable 5.1	4.1	4.4	44.5%	2		19.30s	990	61	8,940
KAT-Coder-Pro V2.5	4.1	4.4	44.5%	2		24.90s	780	24,683	0

Samanya Buddhimatta	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Claude Fable 5.1	10.0	10.0	100.0%	0		5.62s	714	325	0
KAT-Coder-Pro V2.5	4.8	3.2	33.3%	1		5.16s	516	1,067	0

सूचनांचे पालन	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Claude Fable 5.1	6.5	10.0	50.0%	0		5.24s	921	278	0
KAT-Coder-Pro V2.5	9.8	10.0	100.0%	0		2.61s	699	1,084	0

कोडी सोडवणे	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Claude Fable 5.1	7.7	10.0	66.7%	0		4.78s	912	452	0
KAT-Coder-Pro V2.5	8.2	7.2	88.9%	1		3.03s	696	1,929	0

टूल कॉलिंग	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Claude Fable 5.1	10.0	10.0	100.0%	0		13.22s	11,757	354	0
KAT-Coder-Pro V2.5	10.0	10.0	100.0%	0		5.93s	8,391	1,103	0

सामान्य ज्ञान	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Claude Fable 5.1	3.0	10.0	0.0%	0		19.18s	264	21	2,630
KAT-Coder-Pro V2.5	3.0	10.0	0.0%	0		9.91s	204	3,018	0

झटपट तुलना

तुलना जोडी बदला