Claude Opus 5 vs OpenAI: GPT-5.4 Mini

Claude Opus 5 unggul dalam skor rata-rata dengan 7.5 vs 7.5. GPT-5.4 Mini (medium) memiliki biaya benchmark lebih rendah di $0.756 vs $1.550. Claude Opus 5 lebih cepat di 7.60s vs 25.94s, dengan tingkat keberhasilan 57.6% vs 71.2%.

Model yang direkomendasikanClaude Opus 5It has the best score here (7.5), while responding about 3.4x faster than GPT-5.4 Mini (medium).

Benchmark dihasilkan dari suite pengujian AI BENCHY pada: 2026-07-25

Metrik	Claude Opus 5 Claude Opus 5 none Rilis: 2026-07-25	GPT-5.4 Mini GPT-5.4 Mini medium Rilis: 2026-03-17

Metrik	Claude Opus 5 Claude Opus 5 none Rilis: 2026-07-25	GPT-5.4 Mini GPT-5.4 Mini medium Rilis: 2026-03-17
Skor	7.5	7.5
Peringkat	#59	#64
Keandalan	10.0	10.0
Konsistensi	9.6	7.7
Tes benar
Tingkat lulus per percobaan	57.6%	71.2%
Tes tidak stabil	1	6
Total Run	66	66
Biaya per hasil	12.912	6.299
Total Biaya	$1.550	$0.756
Harga input	$5.000 / 1M	$0.750 / 1M
Harga output	$25.000 / 1M	$4.500 / 1M
Total token input	185,550	97,155
Token output	24,866	6,211
Token penalaran	0	145,544
Waktu respons (rata-rata)	7.60s	25.94s
Waktu respons (maks)	47.72s	138.75s
Waktu respons (total)	167.28s	570.66s

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#59 Claude Opus 5

none

Biaya: $0.271
Waktu: 149.3s
Token: 10,962 tok

#64 GPT-5.4 Mini

medium

Biaya: $0.056
Waktu: 95.5s
Token: 12,464 tok

Model teratas berdasarkan skor

Skor vs Total Biaya

Waktu respons (rata-rata)

Skor vs Waktu respons (rata-rata)

Total token output

Skor vs Total token output

Rincian Kategori

Kategori:

Trik anti-AI	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Claude Opus 5	5.5	8.3	41.7%	1		4.33s	834	1,398	0
GPT-5.4 Mini	8.6	7.9	91.7%	1		4.05s	606	296	2,876

Pemrograman	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Claude Opus 5	5.9	9.7	33.3%	0		5.54s	10,590	2,886	0
GPT-5.4 Mini	8.4	7.4	88.9%	1		57.87s	7,305	467	40,902

Gabungan	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Claude Opus 5	8.3	10.0	50.0%	0		30.54s	148,140	13,011	0
GPT-5.4 Mini	6.9	5.9	66.7%	1		59.64s	74,058	4,347	40,924

Parsing dan ekstraksi data	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Claude Opus 5	10.0	10.0	100.0%	0		3.88s	10,503	309	0
GPT-5.4 Mini	10.0	10.0	100.0%	0		2.43s	7,140	234	650

Spesifik domain	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Claude Opus 5	5.3	10.0	33.3%	0		10.75s	975	5,440	0
GPT-5.4 Mini	4.1	4.4	44.5%	2		65.31s	619	60	43,286

Kecerdasan umum	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Claude Opus 5	10.0	10.0	100.0%	0		3.70s	708	316	0
GPT-5.4 Mini	4.5	10.0	0.0%	0		3.72s	477	150	510

Kepatuhan instruksi	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Claude Opus 5	10.0	10.0	100.0%	0		2.81s	909	99	0
GPT-5.4 Mini	9.8	10.0	100.0%	0		2.13s	660	96	1,185

Pemecahan teka-teki	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Claude Opus 5	7.7	10.0	66.7%	0		3.66s	894	874	0
GPT-5.4 Mini	7.8	10.0	66.7%	0		4.37s	642	278	2,443

Pemanggilan alat	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Claude Opus 5	10.0	10.0	100.0%	0		7.89s	11,739	355	0
GPT-5.4 Mini	4.7	1.6	66.7%	1		9.62s	5,453	251	2,594

Pengetahuan umum	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Claude Opus 5	3.0	10.0	0.0%	0		4.08s	258	178	0
GPT-5.4 Mini	3.0	10.0	0.0%	0		30.10s	195	32	10,174

Perbandingan Cepat

Ganti Pasangan Perbandingan

Claude Opus 5nonevsNemotron 3 UltramediumTersedia gratis Claude Opus 5nonevsKimi K2.7 Codemedium Claude Opus 5nonevsGPT-5.4 Nanomedium Claude Opus 5nonevsGPT-5.6 Lunamedium Claude Opus 5nonevsGrok Build 0.1medium GPT-5.4 MinimediumvsQwen3.7 Maxnone Claude Opus 5nonevsGPT-5.6 Terralow Claude Opus 5nonevsQwen3.5 Plus 2026-02-15medium Claude Opus 5nonevsMiniMax M3medium Claude Opus 5nonevsQwen3.5-27Bmedium Gemini 3 Flash PreviewlowvsGPT-5.4 Minimedium Claude Opus 5nonevsDeepSeek V4 Prohigh