Navigasi
AI BENCHY
Advertise here

AI BENCHY Compare

Cobuddy vs Inception: Mercury 2

Benchmark dihasilkan dari suite pengujian AI BENCHY pada: 2026-06-03

Metrik Cobuddy Cobuddy medium Rilis: 2026-05-06 Mercury 2 Mercury 2 none Rilis: 2026-02-24
Skor 5.8 4.6
Peringkat #116 #153
Keandalan 10.0 10.0
Konsistensi 7.4 9.1
Tes benar
Tingkat lulus per percobaan 50.0% 25.0%
Tes tidak stabil 6 2
Total Run 60 60
Biaya per hasil 0.000 0.216
Total Biaya $0.000 $0.009
Harga input $0.000 / 1M $0.250 / 1M
Harga output $0.000 / 1M $0.750 / 1M
Total token input 37,449 25,515
Token output 1,677 3,001
Token penalaran 116,703 0
Waktu respons (rata-rata) 39.90s 614ms
Waktu respons (maks) 309.02s 1.27s
Waktu respons (total) 797.98s 12.28s

Model teratas berdasarkan skor

Skor vs Total Biaya

Waktu respons (rata-rata)

Skor vs Waktu respons (rata-rata)

Total token output

Skor vs Total token output

Rincian Kategori

Trik anti-AI Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token input Token output Token penalaran
Cobuddy 8.7 7.9 91.7% 1 10.00s 453 98 4,666
Mercury 2 3.0 10.0 0.0% 0 483ms 631 286 0
Pemrograman Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token input Token output Token penalaran
Cobuddy 4.1 5.1 33.3% 1 79.17s 4,726 358 30,138
Mercury 2 3.5 9.4 0.0% 0 831ms 4,631 1,650 0
Gabungan Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token input Token output Token penalaran
Cobuddy 3.0 10.0 0.0% 0 47.38s 18,324 465 7,265
Mercury 2 3.0 10.0 0.0% 0 606ms 4,821 131 0
Parsing dan ekstraksi data Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token input Token output Token penalaran
Cobuddy 6.3 5.8 66.7% 1 17.36s 8,181 275 5,591
Mercury 2 7.3 5.9 83.3% 1 667ms 6,362 180 0
Spesifik domain Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token input Token output Token penalaran
Cobuddy 2.9 4.4 22.2% 2 128.15s 540 10 49,454
Mercury 2 5.3 7.2 44.4% 1 534ms 784 46 0
Kecerdasan umum Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token input Token output Token penalaran
Cobuddy 4.2 9.9 0.0% 0 23.23s 498 76 3,782
Mercury 2 4.8 10.0 0.0% 0 628ms 495 159 0
Kepatuhan instruksi Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token input Token output Token penalaran
Cobuddy 9.8 10.0 100.0% 0 11.60s 508 64 2,842
Mercury 2 6.5 10.0 50.0% 0 551ms 691 82 0
Pemecahan teka-teki Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token input Token output Token penalaran
Cobuddy 3.6 7.2 22.2% 1 12.83s 561 189 5,808
Mercury 2 3.1 10.0 0.0% 0 535ms 694 251 0
Pemanggilan alat Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token input Token output Token penalaran
Cobuddy 10.0 10.0 100.0% 0 11.19s 3,505 133 294
Mercury 2 10.0 10.0 100.0% 0 1.27s 6,193 197 0
Pengetahuan umum Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token input Token output Token penalaran
Cobuddy 3.0 10.0 0.0% 0 36.98s 153 9 6,863
Mercury 2 3.0 10.0 0.0% 0 548ms 213 19 0

Perbandingan Cepat

Ganti Pasangan Perbandingan

CobuddymediumvsQwen3.6 27BnoneCobuddymediumvsQwen3.5-27BnoneCobuddymediumvsMimo V2 PROnoneCobuddymediumvsQwen3.5-35B-A3BnoneCobuddymediumvsQwen3.5 Plus 2026-04-20noneCobuddymediumvsDeepSeek V4 PrononeCobuddymediumvsGLM 5.1noneCobuddymediumvsOwl AlphanoneCobuddymediumvsGLM 4.7 FlashnoneMercury 2nonevsQwen3 Coder NextmediumCobuddymediumvsSeed-2.0-LitenoneMercury 2nonevsGLM 4.7 Flashmedium