Navigasi
AI BENCHY
Advertise here

Step 3.7 Flash (medium) vs Inkling (medium)

Skor rata-rata hampir imbang di 7.9 vs 8.0. Inkling (medium) memiliki biaya benchmark lebih rendah di $0.377 vs $0.495. Inkling (medium) lebih cepat di 15.66s vs 23.51s, dengan tingkat keberhasilan 68.2% vs 75.8%.

Benchmark dihasilkan dari suite pengujian AI BENCHY pada: 2026-08-29

Peringkat
#61
Total token output
409,709
Waktu respons (rata-rata)
23.51s
Total Biaya
$0.495
Peringkat
#57
Total token output
63,842
Waktu respons (rata-rata)
15.66s
Total Biaya
$0.377
Model yang direkomendasikan Inkling (medium)

It has the best score here (8.0), while responding about 1.5x faster than Step 3.7 Flash (medium).

Perbandingan terperinci

Metrik Step 3.7 Flash Step 3.7 Flash medium Rilis: 2026-05-29 Inkling Inkling medium Rilis: 2026-07-18
Skor 7.9 8.0
Peringkat #61 #57
Keandalan 10.0 10.0
Konsistensi 8.9 8.5
Percobaan 66/66 66/66
Tes benar
Tingkat lulus per percobaan 68.2% 75.8%
Tes tidak stabil 3 4
Total Run 66 66
Biaya per hasil 3.801 2.551
Total Biaya $0.495 $0.377
Harga input $0.200 / 1M $0.950 / 1M
Harga output $1.150 / 1M $4.050 / 1M
Total token input 114,191 124,062
Token output 409,709 12,190
Token penalaran 0 51,652
Waktu respons (rata-rata) 23.51s 15.66s
Waktu respons (maks) 152.83s 85.12s
Waktu respons (total) 517.21s 344.52s
Parameter 198B total (11B aktif) 975B total (41B aktif)
Ketersediaan Sumber terbuka Sumber terbuka

Showcase generasi model

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#61 Step 3.7 Flash

medium
Biaya
$0.006
Waktu
46.2s
Token
4,466 tok

#57 Thinking Machines: Inkling

medium
Biaya
$0.004
Waktu
11.2s
Token
852 tok

Model teratas berdasarkan skor

Skor vs Total Biaya

Waktu respons (rata-rata)

Skor vs Waktu respons (rata-rata)

Total token output

Skor vs Total token output

Rincian Kategori

Pemrograman Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token input Token output Token penalaran
Step 3.7 Flash 8.8 7.8 88.9% 1 27.42s 7,437 44,797 0
Inkling 8.4 7.8 77.8% 1 25.20s 7,374 525 14,457

Perbandingan Cepat

Ganti Pasangan Perbandingan