AI BENCHY
Advertise here
#95

DeepSeek V4 Pro

DeepSeek Toleo: 2026-04-24 Imepimwa tarehe: 2026-05-22 00:38 deepseek/deepseek-v4-pro::none
1.6T jumla (49B vinavyotumika)MoEChanzo huria
(high) (none)

Muhtasari

DeepSeek V4 Pro hupata alama 6.0 kwenye AI BENCHY na iko nafasi ya #95. Ina reliability 8.1, pass rate 48.3%, gharama jumla $0.046, na wastani wa response time 13.48s.

Kinachofanya DeepSeek V4 Pro iwe ya kipekee: Inaonekana zaidi kwenye Mahususi kwa domeni, ambako iko #3; huku Mbinu za kupinga AI ikiwa eneo lake dhaifu zaidi kwenye #17.

Taarifa za modeli

Ilifanyiwa utafiti tarehe 2026-08-12

Imeripotiwa
Vigezo
1.6T jumla (49B vinavyotumika)
Muundo
MoE
Upatikanaji
Chanzo huria
Leseni
MIT
Chanzo cha vigezo Chanzo cha upatikanaji

Alama

6.0

Uthabiti

8.9

Uaminifu

8.1

Jumla ya gharama (bei ya sasa)

$0.046

Jumla ya tokeni za matokeo

5,347

Jumla ya tokeni za ingizo

0

Bei ya ingizo

$0.435 / 1M

Bei ya toleo

$0.870 / 1M

Majaribio sahihi

Majaribio yenye makosa: 12

Kiwango cha kupita kwa kila jaribio: 48.3%

Majaribio yasiyo thabiti

3

Majaribio yasiyo thabiti yalikuwa na matokeo mchanganyiko kati ya run (angalau kupita moja na kufeli moja).

Muda wa majibu (wastani)

13.48s

Muda wa majibu (upeo): 58.65s

Muda wa majibu (jumla): 269.56s

Jibu lisilo sahihi: 9 Hakufuata maelekezo: 2 Muundo wa ziada: 1

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#95 DeepSeek V4 Pro

none
Reached the allocated time limit (300 seconds) without receiving showcase output.
Gharama
$0.000
Muda
300.0s
Tokeni
0 tok

Historia ya uendeshaji

Imepimwa tarehe Alama Uaminifu Majaribio sahihi Jumla ya gharama Linganisha
2026-08-14 03:00 Jaribio tena 6.8 10.0 $0.256 ↑ Linganisha
2026-07-16 23:18 Jaribio jipya limeongezwa 6.9 10.0 $0.096 Linganisha
2026-06-16 15:17 Jaribio tena 7.2 9.9 $0.034 Linganisha
2026-06-16 14:39 Suite imebadilika 7.2 9.9 $0.030 Linganisha
2026-06-04 14:24 Jaribio jipya limeongezwa 5.7 8.5 $0.025 ↓ Linganisha
2026-05-22 00:38 Suite imebadilika 6.0 8.1 $0.046 Uendeshaji wa sasa
2026-04-29 14:46 Jaribio tena 6.2 7.9 $0.043 Linganisha
2026-04-24 09:19 Uendeshaji wa kwanza 3.1 Haipo $0.009 Linganisha

Uendeshaji huu ulitumia suite tofauti ya benchmark. Zingatia mabadiliko ya suite unapochambua mwenendo wa kihistoria.

Ulinganisho wa uendeshaji

UendeshajiUfunikaji wa benchmarkAlamaUthabitiUaminifuMajaribio sahihiMajaribio yasiyo thabitiJumla ya tokeni za matokeoJumla ya tokeni za ingizoJumla ya gharamaMuda wa majibu (wastani)
2026-05-22 00:38 · Suite imebadilikamarudio 60/606.08.98.18/2035,3470$0.04613.48s
2026-08-14 03:00 · Jaribio tenamarudio 66/666.88.610.09/22435,547148,078$0.25611.71s
Tofauti—-0.8+0.3-1.9-1-1-30200-148078-$0.211+1766ms

Ufunikaji wa benchmark unatofautiana: marudio 60/60 (Lengo: marudio 3 kwa kila jaribio) dhidi ya marudio 66/66 (Lengo: marudio 3 kwa kila jaribio). Jumla na vipimo vinavyoathiriwa na marudio haviwezi kulinganishwa moja kwa moja.

Uendeshaji huu miwili ulitumia suite tofauti za benchmark, hivyo tofauti zinaonyesha mabadiliko ya modeli na ya suite pia.

Chati

Chagua modeli ya kwanza, kisha bofya modeli ya pili kufungua ukurasa wa kulinganisha bega kwa bega.

Jumla ya tokeni za matokeo

Alama vs Jumla ya tokeni za matokeo

Ulinganisho wa haraka

DeepSeek V4 PrononevsSolar Pro 4mediumDeepSeek V4 PrononevsGLM 5.3lowDeepSeek V4 PrononevsSolar Pro 4lowDeepSeek V4 PrononevsMiMo-V2.5-PromediumDeepSeek V4 PrononevsSeed-2.0-CodemediumDeepSeek V4 PrononevsGemini 3 Flash PreviewnoneDeepSeek V4 PrononevsStep 3.7 FlashhighDeepSeek V4 PrononevsGemma 4 26B A4BmediumInapatikana bureDeepSeek V4 PrononevsQwen3.6 FlashmediumDeepSeek V4 PrononevsGLM 5.2none

Mgawanyo wa kategoria

Kategoria Alama Uthabiti Majaribio sahihi
Mbinu za kupinga AI 3.5 8.0
Uandishi wa msimbo 5.4 6.8
Mchanganyiko 9.5 10.0
Uchanganuzi na uchimbaji wa data 8.8 10.0
Mahususi kwa domeni 5.3 10.0
Akili ya jumla 4.3 9.9
Ufuataji wa maagizo 6.3 10.0
Utatuzi wa mafumbo 7.6 7.2
Mwito wa zana 10.0 10.0
Maarifa ya jumla 3.0 10.0

Modeli zilizolinganishwa