AI BENCHY
Advertise here
#91

LongCat 2.0

Meituan اجرا: 2026-07-20 ٹیسٹ کیا گیا: 2026-07-20 16:55 meituan/longcat-2.0::low
1.6T کل (48B فعال)MoEکھلا ماخذ

خلاصہ

LongCat 2.0 AI BENCHY پر 6.7 اسکور کرتا ہے اور #91 پر ہے۔ اس کی reliability 9.6، pass rate 53.0%، کل لاگت $0.391، اور اوسط response time 100.31s ہے۔

LongCat 2.0 کو منفرد کیا بناتا ہے: یہ اینٹی اے آئی چالیں میں سب سے نمایاں ہے، جہاں اس کا rank #1 ہے؛ جبکہ ڈیٹا پارسنگ اور استخراج اس کا کمزور ترین حصہ ہے، rank #17.

ماڈل کی تفصیلات

تحقیق کی تاریخ: 2026-08-12

شائع شدہ
پیرامیٹرز
1.6T کل (48B فعال)
ساخت
MoE
دستیابی
کھلا ماخذ
لائسنس
MIT

تسلسل

8.9

کل آؤٹ پٹ ٹوکنز

303,048

کل ان پٹ ٹوکنز

90,909

ان پٹ قیمت

$0.300 / 1M

آؤٹ پٹ قیمت

$1.200 / 1M

درست ٹیسٹس

غلط ٹیسٹس: 12

فی کوشش کامیابی کی شرح: 53.0%

غیر مستحکم ٹیسٹ

3

غیر مستحکم ٹیسٹس میں رنز کے درمیان ملے جلے نتائج آئے (کم از کم ایک کامیاب اور ایک ناکام).

ردِعمل کا وقت (اوسط)

100.31s

ردِعمل کا وقت (زیادہ سے زیادہ): 560.39s

ردِعمل کا وقت (کل): 2206.82s

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#91 LongCat 2.0

low
لاگت
$0.024
وقت
428.0s
ٹوکنز
19,557 tok

رن ہسٹری

ٹیسٹ کیا گیا اسکور اعتماد پذیری درست ٹیسٹس کل لاگت موازنہ کریں
2026-08-14 04:16 دوبارہ ٹیسٹ 6.7 9.9 $0.412 موازنہ کریں
2026-07-20 16:55 پہلا رن 6.7 9.6 $0.391 موجودہ رن

رن موازنہ

رنبینچ مارک کوریجاسکورتسلسلاعتماد پذیریدرست ٹیسٹسغیر مستحکم ٹیسٹکل آؤٹ پٹ ٹوکنزکل ان پٹ ٹوکنزکل لاگتردِعمل کا وقت (اوسط)
2026-07-20 16:55 · پہلا رن66/66 کوششیں6.78.99.610/223303,04890,909$0.391100.31s
2026-08-14 04:16 · دوبارہ ٹیسٹ66/66 کوششیں6.78.59.910/224320,59490,870$0.412113.61s
فرق0.0+0.4-0.30-1-17546+39-$0.022-13302ms

ان دو رنز میں مختلف بینچ مارک سوٹس استعمال ہوئے تھے، اس لیے فرق میں ماڈل کی تبدیلی اور سوٹ کی تبدیلی دونوں شامل ہیں۔

قیمت کی تاریخ

OpenRouter سے اس ماڈل کے تاریخی قیمت کے اعداد و شمار۔

تاریخ ان پٹ قیمت آؤٹ پٹ قیمت
2026-07-20 17:49 $0.300 / 1M $1.200 / 1M

چارٹس

پہلا ماڈل منتخب کریں، پھر دوسرا ماڈل کلک کریں تاکہ سائیڈ بائی سائیڈ صفحہ کھلے۔

کل آؤٹ پٹ ٹوکنز

اسکور vs کل آؤٹ پٹ ٹوکنز

فوری موازنہ

زمرہ وار تفصیل

زمرہ اسکور تسلسل درست ٹیسٹس
اینٹی اے آئی چالیں 10.0 10.0
کوڈنگ 6.6 4.6
مشترکہ 10.0 10.0
ڈیٹا پارسنگ اور استخراج 6.3 10.0
ڈومین مخصوص 3.0 10.0
عمومی ذہانت 3.4 2.2
ہدایات کی پیروی 6.5 10.0
پہیلی حل کرنا 3.1 10.0
ٹول کالنگ 10.0 10.0
معلومات عامہ 3.0 10.0

موازنہ کیے گئے ماڈلز