AI BENCHY
Advertise here
#69

Claude Sonnet 4.6

Anthropic Toleo: 2026-02-17 Imepimwa tarehe: 2026-05-22 00:12 anthropic/claude-sonnet-4.6::none
(medium) (none)

Muhtasari

Claude Sonnet 4.6 hupata alama 7.0 kwenye AI BENCHY na iko nafasi ya #69. Ina reliability 10.0, pass rate 58.3%, gharama jumla $0.306, na wastani wa response time 5.33s.

Kinachofanya Claude Sonnet 4.6 iwe ya kipekee: Inaonekana zaidi kwenye Mahususi kwa domeni, ambako iko #2; huku Mbinu za kupinga AI ikiwa eneo lake dhaifu zaidi kwenye #13.

Alama

7.0

Uthabiti

9.7

Uaminifu

10.0

Jumla ya gharama (bei ya sasa)

$0.306

Jumla ya tokeni za matokeo

9,453

Jumla ya tokeni za ingizo

0

Bei ya ingizo

$3.000 / 1M

Bei ya toleo

$15.000 / 1M

Majaribio sahihi

Majaribio yenye makosa: 9

Kiwango cha kupita kwa kila jaribio: 58.3%

Majaribio yasiyo thabiti

1

Majaribio yasiyo thabiti yalikuwa na matokeo mchanganyiko kati ya run (angalau kupita moja na kufeli moja).

Muda wa majibu (wastani)

5.33s

Muda wa majibu (upeo): 23.84s

Muda wa majibu (jumla): 69.29s

Muundo wa ziada: 4 Jibu lisilo sahihi: 4 Hakufuata maelekezo: 1

Onyesho la kizazi

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#69 Claude Sonnet 4.6

none
Gharama
$0.038
Muda
27.3s
Tokeni
2,598 tok

Historia ya uendeshaji

Imepimwa tarehe Alama Uaminifu Majaribio sahihi Jumla ya gharama Linganisha
2026-06-04 13:40 Jaribio jipya limeongezwa 6.8 10.0 $0.316 Linganisha
2026-05-22 00:12 Suite imebadilika 7.0 10.0 $0.306 Uendeshaji wa sasa
2026-04-11 01:44 Jaribio la kwanza lililorekodiwa 7.4 Haipo $0.262 Linganisha

Uendeshaji huu ulitumia suite tofauti ya benchmark. Zingatia mabadiliko ya suite unapochambua mwenendo wa kihistoria.

Ulinganisho wa uendeshaji

UendeshajiAlamaUthabitiUaminifuMajaribio sahihiMajaribio yasiyo thabitiJumla ya tokeni za matokeoJumla ya tokeni za ingizoJumla ya gharamaMuda wa majibu (wastani)
2026-05-22 00:12 · Suite imebadilika7.09.710.011/2019,4530$0.3065.33s
2026-06-04 13:40 · Jaribio jipya limeongezwa6.89.710.011/2119,46557,886$0.3165.04s
Tofauti+0.20.00.000-12-57886-$0.010+287ms

Uendeshaji huu miwili ulitumia suite tofauti za benchmark, hivyo tofauti zinaonyesha mabadiliko ya modeli na ya suite pia.

Chati

Chagua modeli ya kwanza, kisha bofya modeli ya pili kufungua ukurasa wa kulinganisha bega kwa bega.

Jumla ya tokeni za matokeo

Alama vs Jumla ya tokeni za matokeo

Ulinganisho wa haraka

Claude Sonnet 4.6nonevsMiMo-V2.5-PromediumClaude Sonnet 4.6nonevsGrok 4.20mediumClaude Sonnet 4.6nonevsSeed-2.0-MinimediumClaude Sonnet 4.6nonevsGemini 3.5 FlashhighClaude Sonnet 4.6nonevsGemini 3 Flash PreviewmediumClaude Sonnet 4.6nonevsNemotron 3 Ultra 550b A55bmediumInapatikana bureClaude Sonnet 4.6nonevsGPT-5.5low

Mgawanyo wa kategoria

Kategoria Alama Uthabiti Majaribio sahihi
Mbinu za kupinga AI 4.8 10.0
Uandishi wa msimbo 6.8 10.0
Mchanganyiko 9.5 10.0
Uchanganuzi na uchimbaji wa data 10.0 10.0
Mahususi kwa domeni 7.7 10.0
Akili ya jumla 6.1 3.1
Ufuataji wa maagizo 6.5 10.0
Utatuzi wa mafumbo 7.7 10.0
Mwito wa zana 10.0 10.0
Maarifa ya jumla 3.0 10.0

Modeli zilizolinganishwa