AI BENCHY
Advertise here
#97

LongCat 2.0

Meituan Releasedatum: 2026-07-20 Getest op: 2026-07-20 17:01 meituan/longcat-2.0::high
1.6T totaal (48B actief)MoEOpen-source
(high) (medium) (low) (none)

Samenvatting

LongCat 2.0 scoort 6.6 op AI BENCHY en staat op #97. Het model heeft 9.4 betrouwbaarheid, een slagingspercentage van 53.0%, $0.469 totale kosten en 148.73s gemiddelde responstijd.

Modelgegevens

Onderzocht op 2026-08-12

Gerapporteerd
Parameters
1.6T totaal (48B actief)
Architectuur
MoE
Beschikbaarheid
Open-source
Licentie
MIT
Bron voor parameters Bron voor beschikbaarheid

Score

6.6

Consistentie

8.2

Betrouwbaarheid

9.4

Totale kosten (huidige prijs)

$0.469

Totaal aantal uitvoer-tokens

366,791

Totaal aantal invoer-tokens

93,357

Invoerprijs

$0.300 / 1M

Uitvoerprijs

$1.200 / 1M

Correcte tests

Foute tests: 13

Slaagpercentage per poging: 53.0%

Instabiele tests

5

Instabiele tests hadden gemengde uitkomsten over runs (minstens één geslaagd en één gefaald).

Responstijd (gem.)

148.73s

Responstijd (max): 941.66s

Responstijd (totaal): 3272.00s

Verkeerd antwoord: 6 Time-out: 3 Instructies niet gevolgd: 2 Geen antwoord: 2

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#97 LongCat 2.0

high
Reached the allocated time limit (600 seconds) without receiving showcase output.
Kosten
$0.000
Tijd
600.0s
Tokens
0 tok

Rungeschiedenis

Getest op Score Betrouwbaarheid Correcte tests Totale kosten Vergelijken
2026-08-14 04:15 Hertest 6.7 10.0 $0.492 Vergelijken
2026-07-20 17:01 Eerste run 6.6 9.4 $0.469 Huidige run

Runvergelijking

RunBenchmarkdekkingScoreConsistentieBetrouwbaarheidCorrecte testsInstabiele testsTotaal aantal uitvoer-tokensTotaal aantal invoer-tokensTotale kostenResponstijd (gem.)
2026-07-20 17:01 · Eerste run66/66 pogingen6.68.29.49/225366,79193,357$0.469148.73s
2026-08-14 04:15 · Hertest66/66 pogingen6.78.410.09/224386,64293,411$0.492153.29s
Verschil—-0.1-0.2-0.60+1-19851-54-$0.024-4562ms

Deze twee runs gebruikten verschillende benchmarksets, dus de verschillen weerspiegelen zowel modelveranderingen als suitewijzigingen.

Prijsgeschiedenis

Historische prijsgegevens voor dit model van OpenRouter.

Datum Invoerprijs Uitvoerprijs
2026-07-20 17:49 $0.300 / 1M $1.200 / 1M

Grafieken

Kies eerst het eerste model en klik daarna op een tweede model om een zij-aan-zijpagina te openen.

Totaal aantal uitvoer-tokens

Score vs Totaal aantal uitvoer-tokens

Snelle vergelijking

LongCat 2.0highvsGemini 3.5 FlashminimalLongCat 2.0highvsGemini 3.5 Flash LitelowLongCat 2.0highvsLongCat 2.0lowLongCat 2.0highvsQwen3.5-27BnoneLongCat 2.0highvsKAT-Coder-Pro V2.5noneLongCat 2.0highvsGemini 3.1 Flash Lite PreviewlowLongCat 2.0highvsGLM 5.2noneLongCat 2.0highvsInkling SmallmediumLongCat 2.0highvsGemma 4 26B A4BmediumGratis beschikbaarLongCat 2.0highvsGemini 3.1 Flash Litelow

Categorie-uitsplitsing

Categorie Score Consistentie Correcte tests
Anti-AI-trucs 8.9 8.1
Programmeren 7.6 7.2
Gecombineerd 10.0 10.0
Gegevensparsering en extractie 3.6 5.8
Domeinspecifiek 3.6 7.2
Algemene intelligentie 5.1 10.0
Instructies opvolgen 6.5 10.0
Puzzeloplossing 3.1 7.4
Toolaanroepen 10.0 10.0
Algemene kennis 3.0 10.0

Vergeleken modellen