AI BENCHY
Advertise here
#161

Claude Sonnet 5

Anthropic Toleo: 2026-06-30 Imepimwa tarehe: 2026-08-14 02:10 anthropic/claude-sonnet-5::none
~1T jumla (~100B vinavyotumika)MoEImefungwaMakadirio
(medium) (none)

Muhtasari

Claude Sonnet 5 hupata alama 6.1 kwenye AI BENCHY na iko nafasi ya #161. Ina reliability 10.0, pass rate 40.9%, gharama jumla $0.548, na wastani wa response time 6.05s.

Kinachofanya Claude Sonnet 5 iwe ya kipekee: Inaonekana zaidi kwenye Mchanganyiko, ambako iko #3; huku Mbinu za kupinga AI ikiwa eneo lake dhaifu zaidi kwenye #13.

Taarifa za modeli

Ilifanyiwa utafiti tarehe 2026-08-12

Makadirio
Vigezo
~1T jumla (~100B vinavyotumika)
Muundo
MoE
Upatikanaji
Imefungwa
Leseni
-

Makadirio bora kulingana na ushahidi wa umma; mtoa huduma hakufichua thamani zote.

Chanzo cha vigezo Chanzo cha upatikanaji

Alama

6.1

Uthabiti

8.7

Uaminifu

10.0

Jumla ya gharama (bei ya sasa)

$0.548

Jumla ya tokeni za matokeo

22,508

Jumla ya tokeni za ingizo

161,032

Bei ya ingizo

$2.000 / 1M

Bei ya toleo

$10.000 / 1M

Majaribio sahihi

Majaribio yenye makosa: 15

Kiwango cha kupita kwa kila jaribio: 40.9%

Majaribio yasiyo thabiti

4

Majaribio yasiyo thabiti yalikuwa na matokeo mchanganyiko kati ya run (angalau kupita moja na kufeli moja).

Muda wa majibu (wastani)

6.05s

Muda wa majibu (upeo): 33.39s

Muda wa majibu (jumla): 132.99s

Jibu lisilo sahihi: 8 Muundo wa ziada: 4 Hakuna jibu: 2 Hakufuata maelekezo: 1

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#161 Claude Sonnet 5

none
Gharama
$0.061
Muda
53.7s
Tokeni
6,172 tok

Historia ya uendeshaji

Imepimwa tarehe Alama Uaminifu Majaribio sahihi Jumla ya gharama Linganisha
2026-08-14 02:10 Jaribio tena 6.1 10.0 $0.548 Uendeshaji wa sasa
2026-07-16 22:32 Jaribio jipya limeongezwa 6.3 10.0 $0.548 Linganisha
2026-06-30 21:33 Uendeshaji wa kwanza 5.7 10.0 $0.287 Linganisha

Uendeshaji huu ulitumia suite tofauti ya benchmark. Zingatia mabadiliko ya suite unapochambua mwenendo wa kihistoria.

Historia ya bei

Data ya kihistoria ya bei ya modeli hii kutoka OpenRouter.

Tarehe Bei ya ingizo Bei ya toleo
2026-08-14 12:51 $2.000 / 1M $10.000 / 1M

Chati

Chagua modeli ya kwanza, kisha bofya modeli ya pili kufungua ukurasa wa kulinganisha bega kwa bega.

Jumla ya tokeni za matokeo

Alama vs Jumla ya tokeni za matokeo

Ulinganisho wa haraka

Claude Sonnet 5nonevsGPT-5.6 LunalowClaude Sonnet 5nonevsGemini 3.1 Flash LiteminimalClaude Sonnet 5nonevsGemma 4 31BmediumInapatikana bureClaude Sonnet 5nonevsQwen3.5-35B-A3BmediumClaude Sonnet 5nonevsSeed-2.0-LitenoneClaude Sonnet 5nonevsgpt-oss-120bmediumClaude Sonnet 5nonevsRing-2.6-1TmediumClaude Sonnet 5nonevsQwen3.7 FlashnoneClaude Sonnet 5nonevsLing-3.0-flashhighClaude Sonnet 5nonevsGemini 3.1 Flash Litenone

Mgawanyo wa kategoria

Kategoria Alama Uthabiti Majaribio sahihi
Mbinu za kupinga AI 5.3 10.0
Uandishi wa msimbo 4.6 7.9
Mchanganyiko 6.5 10.0
Uchanganuzi na uchimbaji wa data 10.0 10.0
Mahususi kwa domeni 2.9 7.2
Akili ya jumla 4.7 3.1
Ufuataji wa maagizo 6.4 10.0
Utatuzi wa mafumbo 6.0 7.4
Mwito wa zana 10.0 10.0
Maarifa ya jumla 3.0 10.0

Modeli zilizolinganishwa