AI BENCHY
Advertise here
#51

DeepSeek V4 Pro

DeepSeek Toleo: 2026-04-24 Imepimwa tarehe: 2026-04-29 14:47 deepseek/deepseek-v4-pro::high
1.6T jumla (49B vinavyotumika)MoEChanzo huria
(high) (none)

Muhtasari

DeepSeek V4 Pro hupata alama 7.5 kwenye AI BENCHY na iko nafasi ya #51. Ina reliability 9.3, pass rate 73.2%, gharama jumla $0.209, na wastani wa response time 60.03s.

Kinachofanya DeepSeek V4 Pro iwe ya kipekee: Inaonekana zaidi kwenye Ufuataji wa maagizo, ambako iko #1; huku Uandishi wa msimbo ikiwa eneo lake dhaifu zaidi kwenye #18. Gharama yake ya benchmark ni ya chini isivyo kawaida kwa kiwango hiki cha score.

Taarifa za modeli

Ilifanyiwa utafiti tarehe 2026-08-12

Imeripotiwa
Vigezo
1.6T jumla (49B vinavyotumika)
Muundo
MoE
Upatikanaji
Chanzo huria
Leseni
MIT

Alama

7.5

Uthabiti

8.0

Uaminifu

9.3

Jumla ya tokeni za matokeo

62,125

Jumla ya tokeni za ingizo

0

Bei ya ingizo

$0.435 / 1M

Bei ya toleo

$0.870 / 1M

Majaribio sahihi

Majaribio yenye makosa: 7

Kiwango cha kupita kwa kila jaribio: 73.2%

Majaribio yasiyo thabiti

4

Majaribio yasiyo thabiti yalikuwa na matokeo mchanganyiko kati ya run (angalau kupita moja na kufeli moja).

Muda wa majibu (wastani)

60.03s

Muda wa majibu (upeo): 358.35s

Muda wa majibu (jumla): 1080.60s

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#51 DeepSeek V4 Pro

high
Gharama
$0.023
Muda
257.6s
Tokeni
14,870 tok

Historia ya uendeshaji

Imepimwa tarehe Alama Uaminifu Majaribio sahihi Jumla ya gharama Linganisha
2026-08-14 03:17 Jaribio tena 7.7 10.0 $0.555 Linganisha
2026-07-16 23:19 Jaribio jipya limeongezwa 7.7 10.0 $0.200 Linganisha
2026-06-16 15:31 Jaribio tena 7.6 9.3 $0.157 Linganisha
2026-06-16 14:47 Suite imebadilika 8.1 9.6 $0.098 Linganisha
2026-06-04 14:38 Jaribio jipya limeongezwa 6.0 8.9 $0.079 Linganisha
2026-05-22 00:54 Suite imebadilika 6.6 9.0 $0.212 Linganisha
2026-04-29 14:47 Jaribio tena 7.5 9.3 $0.209 Uendeshaji wa sasa
2026-04-26 10:50 Jaribio tena 7.5 8.4 $0.201 Linganisha
2026-04-25 21:53 Uendeshaji wa kwanza 8.2 Haipo $0.329 Linganisha

Ulinganisho wa uendeshaji

UendeshajiUfunikaji wa benchmarkAlamaUthabitiUaminifuMajaribio sahihiMajaribio yasiyo thabitiJumla ya tokeni za matokeoJumla ya tokeni za ingizoJumla ya gharamaMuda wa majibu (wastani)
2026-04-29 14:47 · Jaribio tenamarudio 54/547.58.09.311/18462,1250$0.20960.03s
2026-06-04 14:38 · Jaribio jipya limeongezwamarudio 63/636.07.38.98/21784,50732,240$0.07965.21s
Tofauti+1.5+0.7+0.4+3-3-22382-32240+$0.131-5176ms

Ufunikaji wa benchmark unatofautiana: marudio 54/54 (Lengo: marudio 3 kwa kila jaribio) dhidi ya marudio 63/63 (Lengo: marudio 3 kwa kila jaribio). Jumla na vipimo vinavyoathiriwa na marudio haviwezi kulinganishwa moja kwa moja.

Uendeshaji huu miwili ulitumia suite tofauti za benchmark, hivyo tofauti zinaonyesha mabadiliko ya modeli na ya suite pia.

Chati

Chagua modeli ya kwanza, kisha bofya modeli ya pili kufungua ukurasa wa kulinganisha bega kwa bega.

Jumla ya tokeni za matokeo

Alama vs Jumla ya tokeni za matokeo

Ulinganisho wa haraka

Mgawanyo wa kategoria

Kategoria Alama Uthabiti Majaribio sahihi
Mbinu za kupinga AI 8.3 10.0
Uandishi wa msimbo 3.0 0.0
Mchanganyiko 10.0 10.0
Uchanganuzi na uchimbaji wa data 10.0 10.0
Mahususi kwa domeni 3.2 6.9
Akili ya jumla 6.1 3.1
Ufuataji wa maagizo 10.0 10.0
Utatuzi wa mafumbo 8.0 7.0
Mwito wa zana 10.0 10.0

Modeli zilizolinganishwa