AI BENCHY
AD
Track all your projects in one dashboard. Get 📊stats, 🔥heatmaps and 👀recordings in one self-hosted dashboard.
uxwizz.com
#37

Claude Sonnet 4.6

Anthropic Toleo: 2026-02-17 Imepimwa tarehe: 2026-07-16 22:27 anthropic/claude-sonnet-4.6::medium
~1T jumla (~100B vinavyotumika)MoEImefungwaMakadirio
(medium) (none)

Muhtasari

Claude Sonnet 4.6 hupata alama 7.8 kwenye AI BENCHY na iko nafasi ya #37. Ina reliability 10.0, pass rate 66.7%, gharama jumla $2.057, na wastani wa response time 25.91s.

Kinachofanya Claude Sonnet 4.6 iwe ya kipekee: Inaonekana zaidi kwenye Utatuzi wa mafumbo, ambako iko #1; huku Mbinu za kupinga AI ikiwa eneo lake dhaifu zaidi kwenye #18.

Taarifa za modeli

Ilifanyiwa utafiti tarehe 2026-08-12

Makadirio
Vigezo
~1T jumla (~100B vinavyotumika)
Muundo
MoE
Upatikanaji
Imefungwa
Leseni
-

Makadirio bora kulingana na ushahidi wa umma; mtoa huduma hakufichua thamani zote.

Alama

7.8

Uthabiti

9.2

Uaminifu

10.0

Jumla ya tokeni za matokeo

115,865

Jumla ya tokeni za ingizo

106,292

Bei ya ingizo

$3.000 / 1M

Bei ya toleo

$15.000 / 1M

Majaribio sahihi

Majaribio yenye makosa: 8

Kiwango cha kupita kwa kila jaribio: 66.7%

Majaribio yasiyo thabiti

2

Majaribio yasiyo thabiti yalikuwa na matokeo mchanganyiko kati ya run (angalau kupita moja na kufeli moja).

Muda wa majibu (wastani)

25.91s

Muda wa majibu (upeo): 140.96s

Muda wa majibu (jumla): 362.78s

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#37 Claude Sonnet 4.6

medium
SVG batili
Gharama
$0.000
Muda
300.0s
Tokeni
0 tok

Historia ya uendeshaji

Imepimwa tarehe Alama Uaminifu Majaribio sahihi Jumla ya gharama Linganisha
2026-08-14 02:03 Jaribio tena 7.8 10.0 $2.126 Linganisha
2026-07-16 22:27 Jaribio jipya limeongezwa 7.8 10.0 $2.057 Uendeshaji wa sasa
2026-06-04 13:42 Jaribio jipya limeongezwa 7.4 10.0 $1.418 Linganisha
2026-05-22 00:14 Suite imebadilika 7.6 10.0 $1.330 Linganisha
2026-04-11 01:44 Jaribio la kwanza lililorekodiwa 8.0 Haipo $1.161 Linganisha

Uendeshaji huu ulitumia suite tofauti ya benchmark. Zingatia mabadiliko ya suite unapochambua mwenendo wa kihistoria.

Ulinganisho wa uendeshaji

UendeshajiUfunikaji wa benchmarkAlamaUthabitiUaminifuMajaribio sahihiMajaribio yasiyo thabitiJumla ya tokeni za matokeoJumla ya tokeni za ingizoJumla ya gharamaMuda wa majibu (wastani)
2026-07-16 22:27 · Jaribio jipya limeongezwamarudio 66/667.89.210.014/222115,865106,292$2.05725.91s
2026-08-14 02:03 · Jaribio tenamarudio 66/667.89.510.014/221120,427106,316$2.12628.08s
Tofauti0.0-0.30.00+1-4562-24-$0.069-2164ms

Uendeshaji huu miwili ulitumia suite tofauti za benchmark, hivyo tofauti zinaonyesha mabadiliko ya modeli na ya suite pia.

Historia ya bei

Data ya kihistoria ya bei ya modeli hii kutoka OpenRouter.

Tarehe Bei ya ingizo Bei ya toleo
2026-06-04 15:40 $3.000 / 1M $15.000 / 1M

Chati

Chagua modeli ya kwanza, kisha bofya modeli ya pili kufungua ukurasa wa kulinganisha bega kwa bega.

Jumla ya tokeni za matokeo

Alama vs Jumla ya tokeni za matokeo

Ulinganisho wa haraka

Mgawanyo wa kategoria

Kategoria Alama Uthabiti Majaribio sahihi
Mbinu za kupinga AI 6.5 10.0
Uandishi wa msimbo 5.7 6.6
Mchanganyiko 10.0 10.0
Uchanganuzi na uchimbaji wa data 10.0 10.0
Mahususi kwa domeni 2.9 7.2
Akili ya jumla 10.0 10.0
Ufuataji wa maagizo 10.0 10.0
Utatuzi wa mafumbo 10.0 10.0
Mwito wa zana 10.0 10.0
Maarifa ya jumla 3.0 10.0

Modeli zilizolinganishwa