AI BENCHY
Advertise here
#141

LongCat 2.0

Meituan Toleo: 2026-07-20 Imepimwa tarehe: 2026-08-14 04:15 meituan/longcat-2.0::high
1.6T jumla (48B vinavyotumika)MoEChanzo huria
(high) (medium) (low) (none)

Muhtasari

LongCat 2.0 hupata alama 6.7 kwenye AI BENCHY na iko nafasi ya #141. Ina reliability 10.0, pass rate 51.5%, gharama jumla $0.492, na wastani wa response time 153.29s.

Kinachofanya LongCat 2.0 iwe ya kipekee: Inaonekana zaidi kwenye Uandishi wa msimbo, ambako iko #1; huku Uchanganuzi na uchimbaji wa data ikiwa eneo lake dhaifu zaidi kwenye #15.

Taarifa za modeli

Ilifanyiwa utafiti tarehe 2026-08-12

Imeripotiwa
Vigezo
1.6T jumla (48B vinavyotumika)
Muundo
MoE
Upatikanaji
Chanzo huria
Leseni
MIT
Chanzo cha vigezo Chanzo cha upatikanaji

Alama

6.7

Uthabiti

8.4

Uaminifu

10.0

Jumla ya gharama (bei ya sasa)

$0.492

Jumla ya tokeni za matokeo

386,642

Jumla ya tokeni za ingizo

93,411

Bei ya ingizo

$0.300 / 1M

Bei ya toleo

$1.200 / 1M

Majaribio sahihi

Majaribio yenye makosa: 13

Kiwango cha kupita kwa kila jaribio: 51.5%

Majaribio yasiyo thabiti

4

Majaribio yasiyo thabiti yalikuwa na matokeo mchanganyiko kati ya run (angalau kupita moja na kufeli moja).

Muda wa majibu (wastani)

153.29s

Muda wa majibu (upeo): 941.66s

Muda wa majibu (jumla): 3372.36s

Jibu lisilo sahihi: 7 Hakufuata maelekezo: 2 Hakuna jibu: 2 Muda umeisha: 2

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#141 LongCat 2.0

high
SVG batili
Gharama
$0.000
Muda
600.0s
Tokeni
0 tok

Historia ya uendeshaji

Imepimwa tarehe Alama Uaminifu Majaribio sahihi Jumla ya gharama Linganisha
2026-08-14 04:15 Jaribio tena 6.7 10.0 $0.492 Uendeshaji wa sasa
2026-07-20 17:01 Uendeshaji wa kwanza 6.6 9.4 $0.469 Linganisha

Uendeshaji huu ulitumia suite tofauti ya benchmark. Zingatia mabadiliko ya suite unapochambua mwenendo wa kihistoria.

Historia ya bei

Data ya kihistoria ya bei ya modeli hii kutoka OpenRouter.

Tarehe Bei ya ingizo Bei ya toleo
2026-08-14 12:51 $0.300 / 1M $1.200 / 1M

Chati

Chagua modeli ya kwanza, kisha bofya modeli ya pili kufungua ukurasa wa kulinganisha bega kwa bega.

Jumla ya tokeni za matokeo

Alama vs Jumla ya tokeni za matokeo

Ulinganisho wa haraka

LongCat 2.0highvsGemini 3.5 FlashminimalLongCat 2.0highvsGemini 3.5 Flash LitelowLongCat 2.0highvsLongCat 2.0lowLongCat 2.0highvsQwen3.5-27BnoneLongCat 2.0highvsKAT-Coder-Pro V2.5noneLongCat 2.0highvsGemini 3.1 Flash Lite PreviewlowLongCat 2.0highvsGLM 5.2noneLongCat 2.0highvsInkling SmallmediumLongCat 2.0highvsGemma 4 26B A4BmediumInapatikana bureLongCat 2.0highvsGemini 3.1 Flash Litelow

Mgawanyo wa kategoria

Kategoria Alama Uthabiti Majaribio sahihi
Mbinu za kupinga AI 8.9 8.1
Uandishi wa msimbo 7.8 9.3
Mchanganyiko 10.0 10.0
Uchanganuzi na uchimbaji wa data 3.6 5.8
Mahususi kwa domeni 3.6 7.2
Akili ya jumla 5.1 10.0
Ufuataji wa maagizo 6.5 10.0
Utatuzi wa mafumbo 3.1 7.4
Mwito wa zana 10.0 10.0
Maarifa ya jumla 3.0 10.0

Modeli zilizolinganishwa