#218 Mercury 2
medium- لاگت
- $0.002
- وقت
- 2.1s
- ٹوکنز
- 1,702 tok
Inception
اجرا: 2026-02-24
ٹیسٹ کیا گیا: 2026-10-01 02:52
inception/mercury-2::medium
~100Bدیگربند ماخذتخمینہ
(medium)
(none)
خلاصہ
Mercury 2 AI BENCHY پر 6.6 اسکور کرتا ہے اور #218 پر ہے۔ اس کی reliability 10.0، pass rate 53.6%، کل لاگت $0.121، اور اوسط response time 4.40s ہے۔
Mercury 2 کو منفرد کیا بناتا ہے: یہ ہدایات کی پیروی میں سب سے نمایاں ہے، جہاں اس کا rank #1 ہے؛ جبکہ ڈومین مخصوص اس کا کمزور ترین حصہ ہے، rank #15. یہ ملتے جلتے models کے مقابلے میں نمایاں طور پر تیز ہے۔
ماڈل کی تفصیلات
تحقیق کی تاریخ: 2026-08-12
- پیرامیٹرز
- ~100B
- ساخت
- دیگر
- دستیابی
- بند ماخذ
- لائسنس
- -
عوامی شواہد کی بنیاد پر بہترین تخمینہ؛ فراہم کنندہ نے تمام اقدار ظاہر نہیں کیں۔
6.6
تسلسل
8.1
10.0
$0.121
کل آؤٹ پٹ ٹوکنز
96,943
کل ان پٹ ٹوکنز
189,300
ان پٹ قیمت
$0.250 / 1M
آؤٹ پٹ قیمت
$0.750 / 1M
کیش پڑھنے کی قیمت
$0.025 / 1M
کیش میں لکھنے کی قیمت
دستیاب نہیں
کیش کی قیمتیں ان پٹ ٹوکنز پر لاگو ہوتی ہیں۔ پڑھنے سے محفوظ پرامپٹ دوبارہ استعمال ہوتے ہیں؛ لکھنے سے وہ محفوظ ہوتے ہیں اور اضافی لاگت آ سکتی ہے۔ آؤٹ پٹ ٹوکنز پر آؤٹ پٹ کی قیمت لاگو ہوتی ہے۔
غیر مستحکم ٹیسٹ
5
غیر مستحکم ٹیسٹس میں رنز کے درمیان ملے جلے نتائج آئے (کم از کم ایک کامیاب اور ایک ناکام).
Hamster playing table tennis
Prompt: Create a detailed SVG illustration of a hamster playing table tennis.
رن ہسٹری
| ٹیسٹ کیا گیا | اسکور | اعتماد پذیری | درست ٹیسٹس | کل لاگت | موازنہ کریں |
|---|---|---|---|---|---|
| 2026-10-01 02:52 دوبارہ ٹیسٹ | 6.6 | 10.0 | $0.121 | موجودہ رن | |
| 2026-07-16 23:14 نیا ٹیسٹ شامل ہوا | 7.0 | 10.0 | $0.093 | موازنہ کریں | |
| 2026-06-04 14:27 نیا ٹیسٹ شامل ہوا | 6.6 | 10.0 | $0.058 | موازنہ کریں | |
| 2026-05-22 00:40 دوبارہ ٹیسٹ | 6.3 | 10.0 | $0.055 | موازنہ کریں | |
| 2026-04-11 01:44 پہلا ریکارڈ شدہ رن | 6.5 | دستیاب نہیں | $0.047 | موازنہ کریں |
اس رن میں مختلف بینچ مارک سوٹ استعمال ہوا تھا۔ تاریخی تبدیلی سمجھتے وقت سوٹ کی تبدیلی کو بھی ذہن میں رکھیں۔
رن موازنہ
| رن | بینچ مارک کوریج | اسکور | تسلسل | اعتماد پذیری | درست ٹیسٹس | غیر مستحکم ٹیسٹ | کل آؤٹ پٹ ٹوکنز | کل ان پٹ ٹوکنز | کل لاگت | ردِعمل کا وقت (اوسط) |
|---|---|---|---|---|---|---|---|---|---|---|
| 2026-10-01 02:52 · موجودہ رن | 69/69 کوششیں | 6.6 | 8.1 | 10.0 | 10/23 | 5 | 96,943 | 189,300 | $0.121 | 4.40s |
| 2026-06-04 14:27 · نیا ٹیسٹ شامل ہوا | 63/63 کوششیں | 6.6 | 8.8 | 10.0 | 10/21 | 3 | 65,267 | 35,116 | $0.058 | 2.24s |
| فرق | — | -0.1 | -0.7 | 0.0 | 0 | +2 | +31676 | +154184 | +$0.063 | +2165ms |
بینچ مارک کوریج مختلف ہے: 69/69 کوششیں (ہدف: فی ٹیسٹ 3 دہرائیاں۔) بمقابلہ 63/63 کوششیں (ہدف: فی ٹیسٹ 3 دہرائیاں۔)۔ مجموعے اور تکرار سے متاثر ہونے والے پیمانے براہ راست قابل موازنہ نہیں ہیں۔
ان دو رنز میں مختلف بینچ مارک سوٹس استعمال ہوئے تھے، اس لیے فرق میں ماڈل کی تبدیلی اور سوٹ کی تبدیلی دونوں شامل ہیں۔
قیمت کی تاریخ
OpenRouter سے اس ماڈل کے تاریخی قیمت کے اعداد و شمار۔
| تاریخ | ان پٹ قیمت | آؤٹ پٹ قیمت | کیش پڑھنے کی قیمت | کیش میں لکھنے کی قیمت |
|---|---|---|---|---|
| 2026-08-14 12:51 | $0.250 / 1M | $0.750 / 1M | دستیاب نہیں | دستیاب نہیں |
| 2026-10-01 18:33 | $0.250 / 1M | $0.750 / 1M | $0.025 / 1M | دستیاب نہیں |
چارٹس
پہلا ماڈل منتخب کریں، پھر دوسرا ماڈل کلک کریں تاکہ سائیڈ بائی سائیڈ صفحہ کھلے۔
اسکور کے لحاظ سے سرفہرست ماڈلز
اسکور vs کل لاگت
ردِعمل کا وقت (اوسط)
اسکور vs ردِعمل کا وقت (اوسط)
کل آؤٹ پٹ ٹوکنز
اسکور vs کل آؤٹ پٹ ٹوکنز
فوری موازنہ
Mercury 2mediumvsLongCat 2.0lowMercury 2mediumvsStep 3.7 FlashhighMercury 2mediumvsQwen3.7 FlashmediumMercury 2mediumvsBeam 1.0 501B A23BmediumMercury 2mediumvsGLM 5.2noneMercury 2mediumvsKAT-Coder-Pro V2.5lowMercury 2mediumvsGPT-5.5noneMercury 2mediumvsClaude Sonnet 5.5mediumMercury 2mediumvsGLM 5.3 FlashlowMercury 2mediumvsQwen3.6 35B A3Bmedium
زمرہ وار تفصیل
| زمرہ | اسکور | تسلسل | درست ٹیسٹس |
|---|---|---|---|
| خودمختار ایجنٹ کے کام | 4.7 | 1.6 | |
| اینٹی اے آئی چالیں | 6.9 | 9.9 | |
| کوڈنگ | 8.2 | 7.7 | |
| مشترکہ | 6.7 | 9.1 | |
| ڈیٹا پارسنگ اور استخراج | 7.3 | 5.9 | |
| ڈومین مخصوص | 2.9 | 4.4 | |
| عمومی ذہانت | 4.8 | 10.0 | |
| ہدایات کی پیروی | 10.0 | 10.0 | |
| پہیلی حل کرنا | 5.4 | 10.0 | |
| ٹول کالنگ | 10.0 | 10.0 | |
| معلومات عامہ | 3.0 | 10.0 |