Advertise here
#354

Seed-2.0-Code

Bytedance Seed Toleo: 2026-08-12 Imepimwa tarehe: 2026-10-01 04:07 bytedance-seed/seed-2.0-code::none
~200B jumla (~20B vinavyotumika)MoEImefungwaMakadirio
(high) (medium) (low) (none)

Muhtasari

Seed-2.0-Code hupata alama 5.4 kwenye AI BENCHY na iko nafasi ya #354. Ina reliability 9.0, pass rate 37.7%, gharama jumla $0.257, na wastani wa response time 17.51s.

Kinachofanya Seed-2.0-Code iwe ya kipekee: Inaonekana zaidi kwenye Kazi za mawakala, ambako iko #1; huku Mbinu za kupinga AI ikiwa eneo lake dhaifu zaidi kwenye #13.

Taarifa za modeli

Ilifanyiwa utafiti tarehe 2026-08-12

Makadirio
Vigezo
~200B jumla (~20B vinavyotumika)
Muundo
MoE
Upatikanaji
Imefungwa
Leseni
-

Makadirio bora kulingana na ushahidi wa umma; mtoa huduma hakufichua thamani zote.

Chanzo cha vigezo Chanzo cha upatikanaji

Alama

5.4

Uthabiti

7.9

Uaminifu

9.0

Jumla ya gharama (bei ya sasa)

$0.257

Jumla ya tokeni za matokeo

32,069

Jumla ya tokeni za ingizo

319,668

Bei ya ingizo

$0.500 / 1M

Bei ya toleo

$3.000 / 1M

Bei ya kusoma akiba

Haipo

Bei ya kuandika akiba

Haipo

Bei za akiba zinahusu tokeni za ingizo. Kusoma hutumia tena maelekezo yaliyohifadhiwa; kuandika huyahifadhi na kunaweza kuongeza gharama. Tokeni za matokeo hutumia bei ya matokeo.

Majaribio sahihi

Majaribio yenye makosa: 17

Kiwango cha kupita kwa kila jaribio: 37.7%

Majaribio yasiyo thabiti

6

Majaribio yasiyo thabiti yalikuwa na matokeo mchanganyiko kati ya run (angalau kupita moja na kufeli moja).

Muda wa majibu (wastani)

17.51s

Muda wa majibu (upeo): 132.84s

Muda wa majibu (jumla): 402.66s

Jibu lisilo sahihi: 12 Muundo wa ziada: 2 Hakufuata maelekezo: 2 Hakuna jibu: 1

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#354 Seed-2.0-Code

none
Gharama
$0.030
Muda
140.6s
Tokeni
9,924 tok

Historia ya uendeshaji

Imepimwa tarehe Alama Uaminifu Majaribio sahihi Jumla ya gharama Linganisha
2026-10-01 04:07 Jaribio tena 5.4 9.0 $0.257 Uendeshaji wa sasa
2026-08-12 22:36 Uendeshaji wa kwanza 5.3 6.7 $0.151 Linganisha

Uendeshaji huu ulitumia suite tofauti ya benchmark. Zingatia mabadiliko ya suite unapochambua mwenendo wa kihistoria.

Ulinganisho wa uendeshaji

UendeshajiUfunikaji wa benchmarkAlamaUthabitiUaminifuMajaribio sahihiMajaribio yasiyo thabitiJumla ya tokeni za matokeoJumla ya tokeni za ingizoJumla ya gharamaMuda wa majibu (wastani)
2026-10-01 04:07 · Uendeshaji wa sasamarudio 69/695.47.99.06/23632,069319,668$0.25717.51s
2026-08-12 22:36 · Uendeshaji wa kwanzamarudio 66/665.38.16.76/22523,432159,740$0.15114.67s
Tofauti—+0.2-0.2+2.30+1+8637+159928+$0.106+2837ms

Ufunikaji wa benchmark unatofautiana: marudio 69/69 (Lengo: marudio 3 kwa kila jaribio) dhidi ya marudio 66/66 (Lengo: marudio 3 kwa kila jaribio). Jumla na vipimo vinavyoathiriwa na marudio haviwezi kulinganishwa moja kwa moja.

Uendeshaji huu miwili ulitumia suite tofauti za benchmark, hivyo tofauti zinaonyesha mabadiliko ya modeli na ya suite pia.

Chati

Chagua modeli ya kwanza, kisha bofya modeli ya pili kufungua ukurasa wa kulinganisha bega kwa bega.

Jumla ya tokeni za matokeo

Alama vs Jumla ya tokeni za matokeo

Ulinganisho wa haraka

Seed-2.0-CodenonevsGemma 4 26B A4BnoneInapatikana bureSeed-2.0-CodenonevsQwen3.8 27BnoneInapatikana bureSeed-2.0-CodenonevsGPT-6 LunanoneSeed-2.0-CodenonevsNorth Mini CodemediumInapatikana bureSeed-2.0-CodenonevsGemini 2.5 FlashnoneSeed-2.0-CodenonevsHy4 previewlowSeed-2.0-CodenonevsLing 3.1 FlashnoneSeed-2.0-CodenonevsMiMo-V2.6-FlashnoneSeed-2.0-CodenonevsKimi K2.6noneSeed-2.0-CodenonevsStep 3.5 Flashmedium

Mgawanyo wa kategoria

Kategoria Alama Uthabiti Majaribio sahihi
Kazi za mawakala 6.1 3.1
Mbinu za kupinga AI 3.0 5.9
Uandishi wa msimbo 3.6 9.8
Mchanganyiko 3.0 10.0
Uchanganuzi na uchimbaji wa data 10.0 10.0
Mahususi kwa domeni 3.5 4.4
Akili ya jumla 5.0 10.0
Ufuataji wa maagizo 6.2 5.8
Utatuzi wa mafumbo 7.7 10.0
Mwito wa zana 10.0 10.0
Maarifa ya jumla 3.0 10.0

Modeli zilizolinganishwa