Navigasi
Advertise here

North Mini Code (medium) vs Ember-1

Skor rata-rata hampir imbang di 5.4 vs 5.4. North Mini Code (medium) memiliki biaya benchmark lebih rendah di $0.000 vs $0.786. Ember-1 lebih cepat di 22.65s vs 140.39s, dengan tingkat keberhasilan 42.0% vs 43.5%.

Benchmark dihasilkan dari suite pengujian AI BENCHY pada: 2026-10-01

Model yang Dibandingkan

Peringkat
#273
Total token output
1,818,271
Waktu respons (rata-rata)
140.39s
Total Biaya
$0.000
Peringkat
#277
Total token output
11,832
Waktu respons (rata-rata)
22.65s
Total Biaya
$0.786
Model yang direkomendasikan Ember-1

It has the best score here (5.4), while responding about 6.2x faster than North Mini Code (medium).

Perbandingan terperinci

Metrik North Mini Code North Mini Code medium Rilis: 2026-06-18 Tersedia gratis Ember-1 Ember-1 none Rilis: 2026-09-28
Skor 5.4 5.4
Peringkat #273 #277
Keandalan 8.9 8.8
Konsistensi 8.6 8.6
Percobaan 61/69 69/69
Tes benar
Tingkat lulus per percobaan 42.0% 43.5%
Tes tidak stabil 4 4
Total Run 61 69
Biaya per hasil 0.000 9.817
Total Biaya $0.000 $0.786
Harga input $0.000 / 1M $3.000 / 1M
Harga output $0.000 / 1M $15.000 / 1M
Total token input 166,347 202,617
Token output 423,884 11,832
Token penalaran 1,394,387 0
Waktu respons (rata-rata) 140.39s 22.65s
Waktu respons (maks) 786.72s 93.12s
Waktu respons (total) 3229.07s 520.91s
Parameter 30B total (3B aktif) ~2.8T total (~104B aktif)
Ketersediaan Sumber terbuka Tertutup

Showcase generasi model

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#273 North Mini Code

medium
Biaya
$0.000
Waktu
51.8s
Token
12,460 tok

#277 Ember-1

none
Biaya
$0.156
Waktu
224.6s
Token
10,555 tok

Model teratas berdasarkan skor

Skor vs Total Biaya

Waktu respons (rata-rata)

Skor vs Waktu respons (rata-rata)

Total token output

Skor vs Total token output

Rincian Kategori

Pemrograman Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token input Token output Token penalaran
North Mini Code 4.5 4.9 33.3% 2 320.43s 7,119 219,891 561,569
Ember-1 5.5 10.0 33.3% 0 1.94s 7,485 393 0

Perbandingan Cepat

Ganti Pasangan Perbandingan