AI BENCHY
Advertise here
#275

Mercury 2

Inception Rilis: 2026-02-24 Diuji pada: 2026-08-14 03:05 inception/mercury-2::none
~100BLainnyaTertutupPerkiraan
(medium) (none)

Ringkasan

Mercury 2 mendapat skor 4.7 di AI BENCHY dan berada di peringkat #275. Model ini memiliki reliabilitas 10.0, tingkat keberhasilan 24.2%, total biaya $0.030, dan waktu respons rata-rata 825ms.

Yang membuat Mercury 2 unik: Model ini paling menonjol di Spesifik domain, dengan peringkat #1, sementara Trik anti-AI adalah area terlemahnya di #10. Model ini terasa cepat dibandingkan model serupa.

Fakta model

Ditelaah pada 2026-08-12

Perkiraan
Parameter
~100B
Arsitektur
Lainnya
Ketersediaan
Tertutup
Lisensi
-

Perkiraan terbaik berdasarkan bukti publik; penyedia tidak mengungkapkan semua nilai.

Sumber parameter Sumber ketersediaan

Skor

4.7

Konsistensi

9.2

Keandalan

10.0

Total biaya (harga saat ini)

$0.030

Total token output

9,584

Total token input

89,637

Harga input

$0.250 / 1M

Harga output

$0.750 / 1M

Tes benar

Tes Salah: 18

Tingkat lulus per percobaan: 24.2%

Tes tidak stabil

2

Tes tidak stabil memiliki hasil campuran antar run (setidaknya satu lulus dan satu gagal).

Waktu respons (rata-rata)

825ms

Waktu respons (maks): 4.52s

Waktu respons (total): 18.14s

Jawaban salah: 17 Tidak mengikuti instruksi: 1

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#275 Mercury 2

none
Biaya
$0.002
Waktu
1.8s
Token
1,514 tok

Riwayat run

Diuji pada Skor Keandalan Tes benar Total Biaya Bandingkan
2026-08-14 03:05 Uji ulang 4.7 10.0 $0.030 Run saat ini
2026-07-16 23:13 Tes baru ditambahkan 4.6 10.0 $0.030 Bandingkan
2026-06-04 14:27 Tes baru ditambahkan 4.5 10.0 $0.011 Bandingkan
2026-05-22 00:39 Suite berubah 4.6 10.0 $0.009 Bandingkan
2026-04-11 01:44 Run pertama yang tercatat 4.8 T/A $0.007 Bandingkan

Run ini menggunakan suite benchmark yang berbeda. Perhatikan perubahan suite saat membaca pergerakan historis.

Riwayat harga

Data harga historis untuk model ini dari OpenRouter.

Tanggal Harga input Harga output
2026-08-14 12:51 $0.250 / 1M $0.750 / 1M

Grafik

Pilih model pertama, lalu klik model kedua untuk membuka halaman berdampingan.

Total token output

Skor vs Total token output

Perbandingan Cepat

Mercury 2nonevsCobuddymediumMercury 2nonevsGranite 4.2 8BhighMercury 2nonevsTrinity Large PreviewnoneMercury 2nonevsQwen3 Coder NextmediumMercury 2nonevsGLM 4.7 FlashnoneMercury 2nonevsMiniMax M2.5mediumMercury 2nonevsKAT-Coder-Air V2.5noneMercury 2nonevsLaguna S 2.1noneTersedia gratisMercury 2nonevsTrinity Large ThinkinghighMercury 2nonevsGLM 4.7 Flashmedium

Rincian Kategori

Kategori Skor Konsistensi Tes benar
Trik anti-AI 3.0 10.0
Pemrograman 3.4 9.6
Gabungan 3.0 10.0
Parsing dan ekstraksi data 7.3 5.9
Spesifik domain 5.9 7.2
Kecerdasan umum 4.8 10.0
Kepatuhan instruksi 6.5 10.0
Pemecahan teka-teki 3.1 10.0
Pemanggilan alat 10.0 10.0
Pengetahuan umum 3.0 10.0

Model yang Dibandingkan