Navigasi
Advertise here

Beam 1.0 501B A23B (high) vs Step 5 Preview (medium)

Skor rata-rata hampir imbang di 6.1 vs 6.1. Beam 1.0 501B A23B (high) memiliki biaya benchmark lebih rendah di $0.674 vs $4.136. Beam 1.0 501B A23B (high) lebih cepat di 9.03s vs 136.10s, dengan tingkat keberhasilan 59.4% vs 53.6%.

Benchmark dihasilkan dari suite pengujian AI BENCHY pada: 2026-10-17

Model yang Dibandingkan

Peringkat
#266
Total token output
147,207
Waktu respons (rata-rata)
9.03s
Total Biaya
$0.674
Peringkat
#271
Total token output
1,434,621
Waktu respons (rata-rata)
136.10s
Total Biaya
$4.136
Model yang direkomendasikan Beam 1.0 501B A23B (high)

It has the best score here (6.1), while costing about 6.1x less than Step 5 Preview (medium).

Perbandingan terperinci

Metrik Beam 1.0 501B A23B Beam 1.0 501B A23B high Rilis: 2026-10-17 Step 5 Preview Step 5 Preview medium Rilis: 2026-10-09
Skor 6.1 6.1
Peringkat #266 #271
Keandalan 10.0 9.6
Konsistensi 8.3 8.2
Percobaan 69/69 69/69
Tes benar
Tingkat lulus per percobaan 59.4% 53.6%
Tes tidak stabil 5 5
Total Run 69 69
Biaya per hasil 6.126 41.354
Total Biaya $0.674 $4.136
Harga input $1.000 / 1M $1.000 / 1M
Harga output $3.000 / 1M $2.700 / 1M
Harga baca cache $0.100 / 1M $0.050 / 1M
Harga tulis cache T/A T/A
Total token input 232,218 261,842
Token output 4,944 1,434,621
Token penalaran 142,263 0
Waktu respons (rata-rata) 9.03s 136.10s
Waktu respons (maks) 36.04s 438.09s
Waktu respons (total) 207.67s 3130.27s
Parameter 501B total (23B aktif) 600B total (27B aktif)
Ketersediaan Sumber terbuka Tertutup

Harga cache berlaku untuk token input. Pembacaan memakai kembali prompt tersimpan; penulisan menyimpannya dan dapat menambah biaya. Token output menggunakan harga output.

Showcase generasi model

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#266 Beam 1.0 501B A23B

high
Biaya
$0.008
Waktu
15.6s
Token
6,162 tok

#271 Step 5 Preview

medium
Biaya
$0.042
Waktu
90.3s
Token
15,574 tok

Model teratas berdasarkan skor

Skor vs Total Biaya

Waktu respons (rata-rata)

Skor vs Waktu respons (rata-rata)

Total token output

Skor vs Total token output

Rincian Kategori

Pemrograman Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token input Token output Token penalaran
Beam 1.0 501B A23B 8.4 7.4 88.9% 1 21.05s 7,800 559 44,608
Step 5 Preview 2.8 7.2 11.1% 1 363.90s 7,428 546,725 0

Ganti Pasangan Perbandingan