- Peringkat
- #322
- Total token output
- 3,627
- Waktu respons (rata-rata)
- 4.16s
- Total Biaya
- $0.024
GPT-4o-mini (default) vs Qwen3.5-9B
GPT-4o-mini (default) unggul dalam skor rata-rata dengan 5.0 vs 4.9. GPT-4o-mini (default) memiliki biaya benchmark lebih rendah di $0.024 vs $0.041. GPT-4o-mini (default) lebih cepat di 4.16s vs 37.19s, dengan tingkat keberhasilan 21.7% vs 18.8%.
Model yang Dibandingkan
- Peringkat
- #331
- Total token output
- 70,427
- Waktu respons (rata-rata)
- 37.19s
- Total Biaya
- $0.041
Model yang direkomendasikan
GPT-4o-mini (default)
It has the best score here (5.0), while costing about 1.7x less than Qwen3.5-9B.
Perbandingan terperinci
| Metrik | GPT-4o-mini GPT-4o-mini default | Qwen3.5-9B Qwen3.5-9B none |
|---|---|---|
| Skor | 5.0 | 4.9 |
| Peringkat | #322 | #331 |
| Keandalan | 10.0 | 9.8 |
| Konsistensi | 9.9 | 9.7 |
| Percobaan | 69/69 | 69/69 |
| Tes benar | ||
| Tingkat lulus per percobaan | 21.7% | 18.8% |
| Tes tidak stabil | 0 | 1 |
| Total Run | 69 | 69 |
| Biaya per hasil | 0.480 | 1.022 |
| Total Biaya | $0.024 | $0.041 |
| Harga input | $0.150 / 1M | $0.100 / 1M |
| Harga output | $0.600 / 1M | $0.150 / 1M |
| Harga baca cache | $0.075 / 1M | T/A |
| Harga tulis cache | T/A | T/A |
| Total token input | 145,180 | 307,670 |
| Token output | 3,627 | 70,427 |
| Token penalaran | 0 | 0 |
| Waktu respons (rata-rata) | 4.16s | 37.19s |
| Waktu respons (maks) | 39.99s | 433.02s |
| Waktu respons (total) | 70.70s | 855.27s |
| Parameter | ~8B | 9B |
| Ketersediaan | Tertutup | Sumber terbuka |
Harga cache berlaku untuk token input. Pembacaan memakai kembali prompt tersimpan; penulisan menyimpannya dan dapat menambah biaya. Token output menggunakan harga output.
Showcase generasi model
Hamster playing table tennis
Prompt: Create a detailed SVG illustration of a hamster playing table tennis.
#322 GPT-4o-mini
default- Biaya
- $0.001
- Waktu
- 6.6s
- Token
- 742 tok
#331 Qwen3.5-9B
none
Reached the allocated time limit (300 seconds) without receiving showcase output.
- Biaya
- $0.000
- Waktu
- 300.0s
- Token
- 0 tok
Rincian Kategori
| Tugas agen | Skor | Konsistensi | Tingkat lulus per percobaan | Tes tidak stabil | Tes benar | Waktu respons (rata-rata) | Token input | Token output | Token penalaran |
|---|---|---|---|---|---|---|---|---|---|
| GPT-4o-mini | 5.0 | 10.0 | 0.0% | 0 | 39.99s | 92,035 | 714 | 0 | |
| Qwen3.5-9B | 3.9 | 9.6 | 0.0% | 0 | 433.02s | 163,254 | 32,943 | 0 |
| Trik anti-AI | Skor | Konsistensi | Tingkat lulus per percobaan | Tes tidak stabil | Tes benar | Waktu respons (rata-rata) | Token input | Token output | Token penalaran |
|---|---|---|---|---|---|---|---|---|---|
| GPT-4o-mini | 4.8 | 10.0 | 25.0% | 0 | 1.34s | 618 | 186 | 0 | |
| Qwen3.5-9B | 3.1 | 9.9 | 0.0% | 0 | 1.71s | 696 | 582 | 0 |
| Pemrograman | Skor | Konsistensi | Tingkat lulus per percobaan | Tes tidak stabil | Tes benar | Waktu respons (rata-rata) | Token input | Token output | Token penalaran |
|---|---|---|---|---|---|---|---|---|---|
| GPT-4o-mini | 3.2 | 9.6 | 0.0% | 0 | 1.63s | 7,314 | 367 | 0 | |
| Qwen3.5-9B | 3.9 | 7.8 | 11.1% | 1 | 5.60s | 7,913 | 1,042 | 0 |
| Gabungan | Skor | Konsistensi | Tingkat lulus per percobaan | Tes tidak stabil | Tes benar | Waktu respons (rata-rata) | Token input | Token output | Token penalaran |
|---|---|---|---|---|---|---|---|---|---|
| GPT-4o-mini | 3.0 | 10.0 | 0.0% | 0 | 6.32s | 29,916 | 1,497 | 0 | |
| Qwen3.5-9B | 3.0 | 10.0 | 0.0% | 0 | 193.98s | 116,763 | 34,787 | 0 |
| Parsing dan ekstraksi data | Skor | Konsistensi | Tingkat lulus per percobaan | Tes tidak stabil | Tes benar | Waktu respons (rata-rata) | Token input | Token output | Token penalaran |
|---|---|---|---|---|---|---|---|---|---|
| GPT-4o-mini | 10.0 | 10.0 | 100.0% | 0 | 1.27s | 7,161 | 183 | 0 | |
| Qwen3.5-9B | 10.0 | 10.0 | 100.0% | 0 | 847ms | 7,788 | 249 | 0 |
| Spesifik domain | Skor | Konsistensi | Tingkat lulus per percobaan | Tes tidak stabil | Tes benar | Waktu respons (rata-rata) | Token input | Token output | Token penalaran |
|---|---|---|---|---|---|---|---|---|---|
| GPT-4o-mini | 3.0 | 10.0 | 0.0% | 0 | 743ms | 741 | 17 | 0 | |
| Qwen3.5-9B | 3.0 | 10.0 | 0.0% | 0 | 636ms | 798 | 24 | 0 |
| Kecerdasan umum | Skor | Konsistensi | Tingkat lulus per percobaan | Tes tidak stabil | Tes benar | Waktu respons (rata-rata) | Token input | Token output | Token penalaran |
|---|---|---|---|---|---|---|---|---|---|
| GPT-4o-mini | 4.0 | 10.0 | 0.0% | 0 | 909ms | 480 | 66 | 0 | |
| Qwen3.5-9B | 4.4 | 9.9 | 0.0% | 0 | 552ms | 522 | 99 | 0 |
| Kepatuhan instruksi | Skor | Konsistensi | Tingkat lulus per percobaan | Tes tidak stabil | Tes benar | Waktu respons (rata-rata) | Token input | Token output | Token penalaran |
|---|---|---|---|---|---|---|---|---|---|
| GPT-4o-mini | 6.3 | 10.0 | 50.0% | 0 | 1.11s | 666 | 69 | 0 | |
| Qwen3.5-9B | 6.5 | 10.0 | 50.0% | 0 | 514ms | 711 | 75 | 0 |
| Pemecahan teka-teki | Skor | Konsistensi | Tingkat lulus per percobaan | Tes tidak stabil | Tes benar | Waktu respons (rata-rata) | Token input | Token output | Token penalaran |
|---|---|---|---|---|---|---|---|---|---|
| GPT-4o-mini | 3.5 | 10.0 | 0.0% | 0 | 1.21s | 651 | 308 | 0 | |
| Qwen3.5-9B | 3.2 | 10.0 | 0.0% | 0 | 621ms | 714 | 347 | 0 |
| Pemanggilan alat | Skor | Konsistensi | Tingkat lulus per percobaan | Tes tidak stabil | Tes benar | Waktu respons (rata-rata) | Token input | Token output | Token penalaran |
|---|---|---|---|---|---|---|---|---|---|
| GPT-4o-mini | 10.0 | 10.0 | 100.0% | 0 | 2.51s | 5,400 | 205 | 0 | |
| Qwen3.5-9B | 10.0 | 10.0 | 100.0% | 0 | 1.27s | 8,301 | 273 | 0 |
| Pengetahuan umum | Skor | Konsistensi | Tingkat lulus per percobaan | Tes tidak stabil | Tes benar | Waktu respons (rata-rata) | Token input | Token output | Token penalaran |
|---|---|---|---|---|---|---|---|---|---|
| GPT-4o-mini | 3.0 | 10.0 | 0.0% | 0 | 794ms | 198 | 15 | 0 | |
| Qwen3.5-9B | 3.0 | 10.0 | 0.0% | 0 | 2.32s | 210 | 6 | 0 |
Perbandingan Cepat
Ganti Pasangan Perbandingan
KAT Coder AIR V2.5lowvsGPT-4o-minidefaultLing 2.6 1tdefaultvsQwen3.5-9BnoneMiniMax M2.7mediumvsGPT-4o-minidefaultLaguna S 2.1highTersedia gratisvsQwen3.5-9BnoneGPT-4o-minidefaultvsInkling SmallnoneTersedia gratisMercury 2.5 PreviewlowvsGPT-4o-minidefaultGPT-4o-minidefaultvsLaguna S 2.1highTersedia gratisGPT-4o-minidefaultvsLaguna S 2.1mediumTersedia gratisGPT-4o-minidefaultvsMiMo-V2.5noneKAT Coder AIR V2.5lowvsQwen3.5-9BnoneGPT-4o-minidefaultvsHy4 previewnoneDots 3 Note PreviewdefaultTersedia gratisvsQwen3.5-9Bnone