- Peringkat
- #304
- Total token output
- 3,627
- Waktu respons (rata-rata)
- 4.16s
- Total Biaya
- $0.024
GPT-4o-mini vs Inkling Small
GPT-4o-mini unggul dalam skor rata-rata dengan 5.0 vs 4.9. GPT-4o-mini memiliki biaya benchmark lebih rendah di $0.024 vs $0.054. Inkling Small lebih cepat di 1.45s vs 4.16s, dengan tingkat keberhasilan 21.7% vs 23.2%.
Model yang Dibandingkan
- Peringkat
- #307
- Total token output
- 8,770
- Waktu respons (rata-rata)
- 1.45s
- Total Biaya
- $0.054
Model yang direkomendasikan
Inkling Small
Its score stays close to the best score here (4.9 vs 5.0), while responding about 2.9x faster than GPT-4o-mini.
Perbandingan terperinci
| Metrik | GPT-4o-mini GPT-4o-mini none | Inkling Small Inkling Small none Tersedia gratis |
|---|---|---|
| Skor | 5.0 | 4.9 |
| Peringkat | #304 | #307 |
| Keandalan | 10.0 | 10.0 |
| Konsistensi | 9.9 | 9.6 |
| Percobaan | 69/69 | 69/69 |
| Tes benar | ||
| Tingkat lulus per percobaan | 21.7% | 23.2% |
| Tes tidak stabil | 0 | 1 |
| Total Run | 69 | 69 |
| Biaya per hasil | 0.480 | 1.158 |
| Total Biaya | $0.024 | $0.054 |
| Harga input | $0.150 / 1M | $0.450 / 1M |
| Harga output | $0.600 / 1M | $1.200 / 1M |
| Harga baca cache | $0.075 / 1M | $0.100 / 1M |
| Harga tulis cache | T/A | T/A |
| Total token input | 145,180 | 94,733 |
| Token output | 3,627 | 8,770 |
| Token penalaran | 0 | 0 |
| Waktu respons (rata-rata) | 4.16s | 1.45s |
| Waktu respons (maks) | 39.99s | 12.35s |
| Waktu respons (total) | 70.70s | 33.24s |
| Parameter | ~8B | 276B total (12B aktif) |
| Ketersediaan | Tertutup | Tertutup |
Harga cache berlaku untuk token input. Pembacaan memakai kembali prompt tersimpan; penulisan menyimpannya dan dapat menambah biaya. Token output menggunakan harga output.
Showcase generasi model
Hamster playing table tennis
Prompt: Create a detailed SVG illustration of a hamster playing table tennis.
#304 GPT-4o-mini
none- Biaya
- $0.001
- Waktu
- 6.6s
- Token
- 742 tok
#307 Thinking Machines: Inkling Small
none- Biaya
- $0.008
- Waktu
- 42.1s
- Token
- 6,319 tok
Model teratas berdasarkan skor
Skor vs Total Biaya
Waktu respons (rata-rata)
Skor vs Waktu respons (rata-rata)
Total token output
Skor vs Total token output
Rincian Kategori
| Tugas agen | Skor | Konsistensi | Tingkat lulus per percobaan | Tes tidak stabil | Tes benar | Waktu respons (rata-rata) | Token input | Token output | Token penalaran |
|---|---|---|---|---|---|---|---|---|---|
| GPT-4o-mini | 5.0 | 10.0 | 0.0% | 0 | 39.99s | 92,035 | 714 | 0 | |
| Inkling Small | 3.0 | 10.0 | 0.0% | 0 | 31ms | 0 | 0 | 0 |
| Trik anti-AI | Skor | Konsistensi | Tingkat lulus per percobaan | Tes tidak stabil | Tes benar | Waktu respons (rata-rata) | Token input | Token output | Token penalaran |
|---|---|---|---|---|---|---|---|---|---|
| GPT-4o-mini | 4.8 | 10.0 | 25.0% | 0 | 1.34s | 618 | 186 | 0 | |
| Inkling Small | 3.1 | 8.0 | 8.3% | 1 | 526ms | 678 | 250 | 0 |
| Pemrograman | Skor | Konsistensi | Tingkat lulus per percobaan | Tes tidak stabil | Tes benar | Waktu respons (rata-rata) | Token input | Token output | Token penalaran |
|---|---|---|---|---|---|---|---|---|---|
| GPT-4o-mini | 3.2 | 9.6 | 0.0% | 0 | 1.63s | 7,314 | 367 | 0 | |
| Inkling Small | 3.6 | 10.0 | 0.0% | 0 | 759ms | 7,356 | 454 | 0 |
| Gabungan | Skor | Konsistensi | Tingkat lulus per percobaan | Tes tidak stabil | Tes benar | Waktu respons (rata-rata) | Token input | Token output | Token penalaran |
|---|---|---|---|---|---|---|---|---|---|
| GPT-4o-mini | 3.0 | 10.0 | 0.0% | 0 | 6.32s | 29,916 | 1,497 | 0 | |
| Inkling Small | 6.5 | 10.0 | 50.0% | 0 | 9.33s | 68,294 | 6,854 | 0 |
| Parsing dan ekstraksi data | Skor | Konsistensi | Tingkat lulus per percobaan | Tes tidak stabil | Tes benar | Waktu respons (rata-rata) | Token input | Token output | Token penalaran |
|---|---|---|---|---|---|---|---|---|---|
| GPT-4o-mini | 10.0 | 10.0 | 100.0% | 0 | 1.27s | 7,161 | 183 | 0 | |
| Inkling Small | 10.0 | 10.0 | 100.0% | 0 | 782ms | 7,056 | 279 | 0 |
| Spesifik domain | Skor | Konsistensi | Tingkat lulus per percobaan | Tes tidak stabil | Tes benar | Waktu respons (rata-rata) | Token input | Token output | Token penalaran |
|---|---|---|---|---|---|---|---|---|---|
| GPT-4o-mini | 3.0 | 10.0 | 0.0% | 0 | 743ms | 741 | 17 | 0 | |
| Inkling Small | 5.3 | 10.0 | 33.3% | 0 | 442ms | 786 | 42 | 0 |
| Kecerdasan umum | Skor | Konsistensi | Tingkat lulus per percobaan | Tes tidak stabil | Tes benar | Waktu respons (rata-rata) | Token input | Token output | Token penalaran |
|---|---|---|---|---|---|---|---|---|---|
| GPT-4o-mini | 4.0 | 10.0 | 0.0% | 0 | 909ms | 480 | 66 | 0 | |
| Inkling Small | 5.0 | 10.0 | 0.0% | 0 | 964ms | 495 | 178 | 0 |
| Kepatuhan instruksi | Skor | Konsistensi | Tingkat lulus per percobaan | Tes tidak stabil | Tes benar | Waktu respons (rata-rata) | Token input | Token output | Token penalaran |
|---|---|---|---|---|---|---|---|---|---|
| GPT-4o-mini | 6.3 | 10.0 | 50.0% | 0 | 1.11s | 666 | 69 | 0 | |
| Inkling Small | 6.3 | 10.0 | 50.0% | 0 | 767ms | 696 | 72 | 0 |
| Pemecahan teka-teki | Skor | Konsistensi | Tingkat lulus per percobaan | Tes tidak stabil | Tes benar | Waktu respons (rata-rata) | Token input | Token output | Token penalaran |
|---|---|---|---|---|---|---|---|---|---|
| GPT-4o-mini | 3.5 | 10.0 | 0.0% | 0 | 1.21s | 651 | 308 | 0 | |
| Inkling Small | 3.2 | 9.7 | 0.0% | 0 | 665ms | 696 | 332 | 0 |
| Pemanggilan alat | Skor | Konsistensi | Tingkat lulus per percobaan | Tes tidak stabil | Tes benar | Waktu respons (rata-rata) | Token input | Token output | Token penalaran |
|---|---|---|---|---|---|---|---|---|---|
| GPT-4o-mini | 10.0 | 10.0 | 100.0% | 0 | 2.51s | 5,400 | 205 | 0 | |
| Inkling Small | 3.0 | 10.0 | 0.0% | 0 | 2.31s | 8,463 | 291 | 0 |
| Pengetahuan umum | Skor | Konsistensi | Tingkat lulus per percobaan | Tes tidak stabil | Tes benar | Waktu respons (rata-rata) | Token input | Token output | Token penalaran |
|---|---|---|---|---|---|---|---|---|---|
| GPT-4o-mini | 3.0 | 10.0 | 0.0% | 0 | 794ms | 198 | 15 | 0 | |
| Inkling Small | 3.0 | 10.0 | 0.0% | 0 | 481ms | 213 | 18 | 0 |
Perbandingan Cepat
Ganti Pasangan Perbandingan
KAT Coder AIR V2.5lowvsGPT-4o-mininoneMiniMax M2.7mediumvsGPT-4o-mininoneLaguna S 2.1highTersedia gratisvsInkling SmallnoneTersedia gratisKAT Coder AIR V2.5lowvsInkling SmallnoneTersedia gratisMercury 2.5 PreviewlowvsGPT-4o-mininoneMiniMax M2.7mediumvsInkling SmallnoneTersedia gratisGPT-4o-mininonevsLaguna S 2.1highTersedia gratisGPT-4o-mininonevsLaguna S 2.1mediumTersedia gratisMercury 2.5 PreviewlowvsInkling SmallnoneTersedia gratisLaguna S 2.1mediumTersedia gratisvsInkling SmallnoneTersedia gratisKAT Coder AIR V2.5mediumvsGPT-4o-mininoneMercury 2.5lowvsGPT-4o-mininone