Claude Sonnet 4.6 vs GPT-5.4 Mini (medium)

GPT-5.4 Mini (medium) average score मध्ये पुढे आहे: 7.5 vs 7.3. Claude Sonnet 4.6 चा benchmark खर्च कमी आहे: $0.661 vs $0.786. Claude Sonnet 4.6 वेगवान आहे: 7.67s vs 26.72s, pass rates 57.6% vs 68.2%.

AI BENCHY टेस्ट सूटमधून बेंचमार्क या वेळी तयार झाले: 2026-09-18

तुलना केलेली मॉडेल्स

क्रमांक: #121
एकूण आउटपुट टोकन्स: 19,362
प्रतिसाद वेळ (सरासरी): 7.67s
एकूण खर्च: $0.661

क्रमांक: #110
एकूण आउटपुट टोकन्स: 158,344
प्रतिसाद वेळ (सरासरी): 26.72s
एकूण खर्च: $0.786

शिफारस केलेले मॉडेल Claude Sonnet 4.6

Its score stays close to the best score here (7.3 vs 7.5), while responding about 3.5x faster than GPT-5.4 Mini (medium).

तपशीलवार तुलना

मेट्रिक	Claude Sonnet 4.6 Claude Sonnet 4.6 none प्रकाशन: 2026-02-17	GPT-5.4 Mini GPT-5.4 Mini medium प्रकाशन: 2026-03-17

मेट्रिक	Claude Sonnet 4.6 Claude Sonnet 4.6 none प्रकाशन: 2026-02-17	GPT-5.4 Mini GPT-5.4 Mini medium प्रकाशन: 2026-03-17
स्कोअर	7.3	7.5
क्रमांक	#121	#110
विश्वसनीयता	10.0	10.0
सुसंगतता	9.7	8.1
प्रयत्न	66/66	66/66
बरोबर चाचण्या
प्रति प्रयत्न पास दर	57.6%	68.2%
अस्थिर चाचण्या	1	5
एकूण रन	66	66
प्रति निकाल खर्च	5.503	6.546
एकूण खर्च	$0.661	$0.786
इनपुट किंमत	$3.000 / 1M	$0.750 / 1M
आउटपुट किंमत	$15.000 / 1M	$4.500 / 1M
एकूण इनपुट टोकन्स	123,273	97,164
आउटपुट टोकन्स	19,362	6,211
रिझनिंग टोकन्स	0	152,133
प्रतिसाद वेळ (सरासरी)	7.67s	26.72s
प्रतिसाद वेळ (कमाल)	51.18s	138.75s
प्रतिसाद वेळ (एकूण)	122.78s	587.90s
पॅरामीटर्स	~1T एकूण (~100B सक्रिय)	~400B एकूण (~17B सक्रिय)
उपलब्धता	बंद स्रोत	बंद स्रोत

मॉडेल जनरेशन शोकेस

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#121 Claude Sonnet 4.6

none

खर्च: $0.038
वेळ: 27.3s
टोकन्स: 2,598 tok

#110 GPT-5.4 Mini

medium

खर्च: $0.056
वेळ: 95.5s
टोकन्स: 12,464 tok

स्कोअरनुसार शीर्ष मॉडेल्स

स्कोअर विरुद्ध एकूण खर्च

प्रतिसाद वेळ (सरासरी)

स्कोअर vs प्रतिसाद वेळ (सरासरी)

एकूण आउटपुट टोकन्स

स्कोअर vs एकूण आउटपुट टोकन्स

श्रेणीवार तपशील

श्रेणी:

अँटी-एआय युक्त्या	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Claude Sonnet 4.6	4.8	10.0	25.0%	0		2.94s	636	1,214	0
GPT-5.4 Mini	8.6	7.9	91.7%	1		4.05s	606	296	2,876

कोडिंग	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Claude Sonnet 4.6	5.5	10.0	33.3%	0		5.19s	8,522	2,127	0
GPT-5.4 Mini	8.4	7.4	88.9%	1		57.87s	7,305	467	40,902

संयुक्त	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Claude Sonnet 4.6	9.8	10.0	100.0%	0		37.51s	91,402	13,663	0
GPT-5.4 Mini	6.9	5.9	66.7%	1		59.64s	74,058	4,347	40,924

डेटा पार्सिंग आणि निष्कर्षण	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Claude Sonnet 4.6	10.0	10.0	100.0%	0		3.43s	8,574	252	0
GPT-5.4 Mini	10.0	10.0	100.0%	0		2.43s	7,140	234	650

डोमेन-विशिष्ट	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Claude Sonnet 4.6	7.7	10.0	66.7%	0		2.27s	768	413	0
GPT-5.4 Mini	3.6	7.2	22.2%	1		71.05s	628	60	49,875

Samanya Buddhimatta	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Claude Sonnet 4.6	6.1	3.1	66.7%	1		2.56s	513	192	0
GPT-5.4 Mini	4.5	10.0	0.0%	0		3.72s	477	150	510

सूचनांचे पालन	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Claude Sonnet 4.6	6.5	10.0	50.0%	0		1.96s	690	90	0
GPT-5.4 Mini	9.8	10.0	100.0%	0		2.13s	660	96	1,185

कोडी सोडवणे	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Claude Sonnet 4.6	7.7	10.0	66.7%	0		2.53s	663	533	0
GPT-5.4 Mini	7.8	10.0	66.7%	0		4.37s	642	278	2,443

टूल कॉलिंग	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Claude Sonnet 4.6	10.0	10.0	100.0%	0		4.11s	11,301	447	0
GPT-5.4 Mini	4.7	1.6	66.7%	1		9.62s	5,453	251	2,594

सामान्य ज्ञान	स्कोअर	सुसंगतता	प्रति प्रयत्न पास दर	अस्थिर चाचण्या	बरोबर चाचण्या	प्रतिसाद वेळ (सरासरी)	इनपुट टोकन्स	आउटपुट टोकन्स	रिझनिंग टोकन्स
Claude Sonnet 4.6	3.0	10.0	0.0%	0		4.67s	204	431	0
GPT-5.4 Mini	3.0	10.0	0.0%	0		30.10s	195	32	10,174

झटपट तुलना

तुलना जोडी बदला