AI BENCHY
Advertise here
#69

Claude Sonnet 4.6

Anthropic प्रकाशन: 2026-02-17 चाचणी तारीख: 2026-05-22 00:12 anthropic/claude-sonnet-4.6::none
~1T एकूण (~100B सक्रिय)MoEबंद स्रोतअंदाजित
(medium) (none)

सारांश

Claude Sonnet 4.6 AI BENCHY वर 7.0 स्कोर करते आणि #69 वर आहे. याची reliability 10.0, pass rate 58.3%, एकूण खर्च $0.306, आणि सरासरी response time 5.33s आहे.

Claude Sonnet 4.6 खास का आहे: हे डोमेन-विशिष्ट मध्ये सर्वाधिक उठून दिसते, जिथे त्याचा rank #1 आहे; तर अँटी-एआय युक्त्या हा सर्वात कमकुवत भाग आहे, rank #17. समान मॉडेल्सच्या तुलनेत हे लक्षणीय वेगवान आहे.

मॉडेलची माहिती

संशोधन दिनांक: 2026-08-12

अंदाजित
पॅरामीटर्स
~1T एकूण (~100B सक्रिय)
आर्किटेक्चर
MoE
उपलब्धता
बंद स्रोत
परवाना
-

सार्वजनिक पुराव्यावर आधारित सर्वोत्तम अंदाज; प्रदात्याने सर्व मूल्ये जाहीर केलेली नाहीत.

पॅरामीटर स्रोत उपलब्धता स्रोत

स्कोअर

7.0

सुसंगतता

9.7

विश्वसनीयता

10.0

एकूण खर्च (सध्याची किंमत)

$0.306

एकूण आउटपुट टोकन्स

9,453

एकूण इनपुट टोकन्स

0

इनपुट किंमत

$3.000 / 1M

आउटपुट किंमत

$15.000 / 1M

बरोबर चाचण्या

चुकीच्या चाचण्या: 9

प्रति प्रयत्न पास दर: 58.3%

अस्थिर चाचण्या

1

अस्थिर चाचण्यांत रन्समध्ये मिश्र निकाल असतात (किमान एक पास आणि एक फेल).

प्रतिसाद वेळ (सरासरी)

5.33s

प्रतिसाद वेळ (कमाल): 23.84s

प्रतिसाद वेळ (एकूण): 69.29s

अतिरिक्त फॉरमॅटिंग: 4 चुकीचे उत्तर: 4 सूचनांचे पालन केले नाही: 1

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#69 Claude Sonnet 4.6

none
खर्च
$0.038
वेळ
27.3s
टोकन्स
2,598 tok

रन इतिहास

चाचणी तारीख स्कोअर विश्वसनीयता बरोबर चाचण्या एकूण खर्च तुलना करा
2026-08-14 02:00 पुन्हा चाचणी 7.3 10.0 $0.661 तुलना करा
2026-07-16 22:21 नवीन चाचणी जोडली 7.3 10.0 $0.661 तुलना करा
2026-06-04 13:40 नवीन चाचणी जोडली 6.8 10.0 $0.316 तुलना करा
2026-05-22 00:12 सूट बदलला 7.0 10.0 $0.306 सध्याची रन
2026-04-11 01:44 पहिली नोंदलेली रन 7.4 लागू नाही $0.262 तुलना करा

या रनमध्ये वेगळा बेंचमार्क सूट वापरला गेला. ऐतिहासिक बदल वाचताना सूटमधील बदल लक्षात घ्या.

रन तुलना

रनबेंचमार्क कव्हरेजस्कोअरसुसंगतताविश्वसनीयताबरोबर चाचण्याअस्थिर चाचण्याएकूण आउटपुट टोकन्सएकूण इनपुट टोकन्सएकूण खर्चप्रतिसाद वेळ (सरासरी)
2026-05-22 00:12 · सूट बदलला60/60 प्रयत्न7.09.710.011/2019,4530$0.3065.33s
2026-04-11 01:44 · पहिली नोंदलेली रन54/54 प्रयत्न7.49.6लागू नाही11/1817,4330$0.2624.98s
फरक—-0.4+0.100+20200+$0.045+345ms

बेंचमार्क कव्हरेज वेगळे आहे: 60/60 प्रयत्न (लक्ष्य: प्रत्येक चाचणीसाठी 3 पुनरावृत्ती) विरुद्ध 54/54 प्रयत्न (लक्ष्य: प्रत्येक चाचणीसाठी 3 पुनरावृत्ती). एकूण मूल्ये आणि पुनरावृत्तीवर अवलंबून मेट्रिक्स थेट तुलना करता येत नाहीत.

या दोन रनमध्ये वेगवेगळे बेंचमार्क सूट वापरले गेले, त्यामुळे फरकांमध्ये मॉडेलमधील आणि सूटमधील दोन्ही बदल दिसतात.

चार्ट्स

पहिले मॉडेल निवडा, नंतर दुसरे मॉडेल क्लिक करून बाजू-बाजूची तुलना पेज उघडा.

एकूण आउटपुट टोकन्स

स्कोअर vs एकूण आउटपुट टोकन्स

झटपट तुलना

Claude Sonnet 4.6nonevsGemini 3 Flash PreviewlowClaude Sonnet 4.6nonevsKAT-Coder-Pro V2.5lowClaude Sonnet 4.6nonevsGrok 4.6lowClaude Sonnet 4.6nonevsGemini 3.1 Flash LitemediumClaude Sonnet 4.6nonevsQwen3.8 2.4T A95BhighClaude Sonnet 4.6nonevsQwen3.7 PlusnoneClaude Sonnet 4.6nonevsLongCat 2.0mediumClaude Sonnet 4.6nonevsDeepSeek V4 Flash 0731mediumClaude Sonnet 4.6nonevsGPT-5.6 LunamediumClaude Sonnet 4.6nonevsClaude Opus 4.8none

श्रेणीवार तपशील

श्रेणी स्कोअर सुसंगतता बरोबर चाचण्या
अँटी-एआय युक्त्या 4.8 10.0
कोडिंग 6.8 10.0
संयुक्त 9.5 10.0
डेटा पार्सिंग आणि निष्कर्षण 10.0 10.0
डोमेन-विशिष्ट 7.7 10.0
Samanya Buddhimatta 6.1 3.1
सूचनांचे पालन 6.5 10.0
कोडी सोडवणे 7.7 10.0
टूल कॉलिंग 10.0 10.0
सामान्य ज्ञान 3.0 10.0

तुलना केलेली मॉडेल्स