AI BENCHY
Advertise here
#49

GPT-5.4 Mini

OpenAI Rilis: 2026-03-17 Diuji pada: 2026-04-11 01:44 openai/gpt-5.4-mini::medium
(medium) (none)

Ringkasan

GPT-5.4 Mini mendapat skor 7.3 di AI BENCHY dan berada di peringkat #49. Model ini memiliki reliabilitas T/A, tingkat keberhasilan 70.4%, total biaya $0.299, dan waktu respons rata-rata 15.22s.

Yang membuat GPT-5.4 Mini unik: Model ini paling menonjol di Pemrograman, dengan peringkat #1, sementara Kepatuhan instruksi adalah area terlemahnya di #16.

Skor

7.3

Konsistensi

7.4

Keandalan

T/A

Total token output

61,698

Total token input

0

Harga input

$0.750 / 1M

Harga output

$4.500 / 1M

Tes benar

Tes Salah: 9

Tingkat lulus per percobaan: 70.4%

Tes tidak stabil

6

Tes tidak stabil memiliki hasil campuran antar run (setidaknya satu lulus dan satu gagal).

Waktu respons (rata-rata)

15.22s

Waktu respons (maks): 102.91s

Waktu respons (total): 273.90s

Generation showcase

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#49 GPT-5.4 Mini

medium
Cost
$0.056
Time
95.5s
Tokens
12,464 tok

Riwayat run

Diuji pada Skor Keandalan Tes benar Total Biaya Bandingkan
2026-06-04 13:47 Tes baru ditambahkan 7.5 10.0 $0.526 Bandingkan
2026-05-22 00:21 Suite berubah 7.1 10.0 $0.487 Bandingkan
2026-04-11 01:44 Run pertama yang tercatat 7.3 T/A $0.299 Run saat ini

Perbandingan run

RunSkorKonsistensiKeandalanTes benarTes tidak stabilTotal token outputTotal token inputTotal BiayaWaktu respons (rata-rata)
2026-04-11 01:44 · Run pertama yang tercatat7.37.4T/A9/18661,6980$0.29915.22s
2026-05-22 00:21 · Suite berubah7.17.610.010/206102,8920$0.48722.14s
Selisih+0.2-0.2-10-411940-$0.189-6920ms

Kedua run ini menggunakan suite benchmark yang berbeda, jadi selisihnya mencerminkan perubahan model sekaligus perubahan suite.

Grafik

Pilih model pertama, lalu klik model kedua untuk membuka halaman berdampingan.

Total token output

Skor vs Total token output

Perbandingan Cepat

Rincian Kategori

Kategori Skor Konsistensi Tes benar
Trik anti-AI 8.6 7.9
Pemrograman 10.0 10.0
Gabungan 10.0 10.0
Parsing dan ekstraksi data 10.0 10.0
Spesifik domain 4.1 4.4
Kecerdasan umum 4.5 10.0
Kepatuhan instruksi 7.4 6.5
Pemecahan teka-teki 6.8 7.9
Pemanggilan alat 4.7 1.6

Model yang Dibandingkan