Navigasi
Advertise here

Ember-1 vs Granite 4.2 8B (low)

Skor rata-rata hampir imbang di 5.4 vs 5.3. Granite 4.2 8B (low) memiliki biaya benchmark lebih rendah di $0.036 vs $0.786. Ember-1 lebih cepat di 22.65s vs 58.20s, dengan tingkat keberhasilan 43.5% vs 33.3%.

Benchmark dihasilkan dari suite pengujian AI BENCHY pada: 2026-11-13

Model yang Dibandingkan

Peringkat
#375
Total token output
11,832
Waktu respons (rata-rata)
22.65s
Total Biaya
$0.786
Peringkat
#378
Total token output
61,249
Waktu respons (rata-rata)
58.20s
Total Biaya
$0.036
Model yang direkomendasikan Granite 4.2 8B (low)

It has the best score here (5.3), while costing about 22.1x less than Ember-1.

Perbandingan terperinci

Metrik Ember-1 Ember-1 none Rilis: 2026-09-28 Granite 4.2 8B Granite 4.2 8B low Rilis: 2026-09-02
Skor 5.4 5.3
Peringkat #375 #378
Keandalan 8.8 9.2
Konsistensi 8.6 9.7
Percobaan 69/69 69/69
Tes benar
Tingkat lulus per percobaan 43.5% 33.3%
Tes tidak stabil 4 1
Total Run 69 69
Biaya per hasil 9.817 0.508
Total Biaya $0.786 $0.036
Harga input $3.000 / 1M $0.060 / 1M
Harga output $15.000 / 1M $0.250 / 1M
Harga baca cache $0.300 / 1M $0.015 / 1M
Harga tulis cache T/A T/A
Total token input 202,617 332,917
Token output 11,832 18,989
Token penalaran 0 42,362
Waktu respons (rata-rata) 22.65s 58.20s
Waktu respons (maks) 93.12s 566.80s
Waktu respons (total) 520.91s 1338.65s
Parameter ~2.8T total (~104B aktif) 8B
Ketersediaan Tertutup Sumber terbuka

Harga cache berlaku untuk token input. Pembacaan memakai kembali prompt tersimpan; penulisan menyimpannya dan dapat menambah biaya. Token output menggunakan harga output.

Showcase generasi model

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#375 Ember-1

none
Biaya
$0.156
Waktu
224.6s
Token
10,555 tok

#378 IBM: Granite 4.2 8B

low
Provider returned error
Biaya
$0.000
Waktu
0.2s
Token
0 tok

Model teratas berdasarkan skor

Skor vs Total Biaya

Waktu respons (rata-rata)

Skor vs Waktu respons (rata-rata)

Total token output

Skor vs Total token output

Rincian Kategori

Pemrograman Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token input Token output Token penalaran
Ember-1 5.5 10.0 33.3% 0 1.94s 7,485 393 0
Granite 4.2 8B 5.5 10.0 33.3% 0 13.01s 8,439 2,469 2,984

Ganti Pasangan Perbandingan