OpenAI: GPT-5.4 vs Thinking Machines: Inkling

Inkling (low) unggul dalam skor rata-rata dengan 6.1 vs 5.8. Inkling (low) memiliki biaya benchmark lebih rendah di $0.187 vs $0.397. GPT-5.4 lebih cepat di 2.07s vs 5.15s, dengan tingkat keberhasilan 34.9% vs 54.6%.

Model yang direkomendasikanInkling (low)It has the best score here (6.1), while costing about 2.1x less than GPT-5.4.

Benchmark dihasilkan dari suite pengujian AI BENCHY pada: 2026-07-18

Metrik	GPT-5.4 GPT-5.4 none Rilis: 2026-03-05	Inkling Inkling low Rilis: 2026-07-18

Metrik	GPT-5.4 GPT-5.4 none Rilis: 2026-03-05	Inkling Inkling low Rilis: 2026-07-18
Skor	5.8	6.1
Peringkat	#135	#119
Keandalan	10.0	9.9
Konsistensi	9.2	8.6
Tes benar
Tingkat lulus per percobaan	34.9%	54.6%
Tes tidak stabil	2	4
Total Run	66	66
Biaya per hasil	5.663	1.866
Total Biaya	$0.397	$0.187
Harga input	$2.500 / 1M	$1.000 / 1M
Harga output	$15.000 / 1M	$4.050 / 1M
Total token input	108,632	109,884
Token output	8,321	8,579
Token penalaran	0	10,343
Waktu respons (rata-rata)	2.07s	5.15s
Waktu respons (maks)	15.63s	41.58s
Waktu respons (total)	45.51s	113.39s

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#135 GPT-5.4

none

Biaya: $0.026
Waktu: 18.1s
Token: 1,792 tok

#119 Thinking Machines: Inkling

low

Biaya: $0.002
Waktu: 6.1s
Token: 502 tok

Model teratas berdasarkan skor

Skor vs Total Biaya

Waktu respons (rata-rata)

Skor vs Waktu respons (rata-rata)

Total token output

Skor vs Total token output

Rincian Kategori

Kategori:

Trik anti-AI	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
GPT-5.4	3.2	8.0	8.3%	1		1.21s	606	406	0
Inkling	8.3	10.0	75.0%	0		2.51s	702	172	1,024

Pemrograman	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
GPT-5.4	5.5	10.0	33.3%	0		1.62s	7,305	516	0
Inkling	5.1	7.2	22.2%	1		8.71s	7,374	355	4,961

Gabungan	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
GPT-5.4	3.0	10.0	0.0%	0		9.26s	85,439	6,195	0
Inkling	2.9	5.8	16.7%	1		22.73s	85,854	6,920	1,367

Parsing dan ekstraksi data	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
GPT-5.4	10.0	10.0	100.0%	0		1.04s	7,140	222	0
Inkling	10.0	10.0	100.0%	0		2.07s	7,068	216	344

Spesifik domain	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
GPT-5.4	5.3	7.2	44.4%	1		1.07s	723	50	0
Inkling	5.3	10.0	33.3%	0		1.99s	795	66	504

Kecerdasan umum	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
GPT-5.4	4.4	9.9	0.0%	0		1.78s	477	184	0
Inkling	10.0	10.0	100.0%	0		3.44s	501	160	213

Kepatuhan instruksi	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
GPT-5.4	6.5	10.0	50.0%	0		1.07s	660	81	0
Inkling	9.8	10.0	100.0%	0		1.81s	708	93	379

Pemecahan teka-teki	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
GPT-5.4	5.6	9.8	33.3%	0		1.44s	642	381	0
Inkling	6.4	5.0	66.7%	2		2.97s	714	347	908

Pemanggilan alat	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
GPT-5.4	10.0	10.0	100.0%	0		2.75s	5,445	246	0
Inkling	3.0	10.0	0.0%	0		2.57s	5,949	219	0

Pengetahuan umum	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
GPT-5.4	3.0	10.0	0.0%	0		990ms	195	40	0
Inkling	3.0	10.0	0.0%	0		3.12s	219	31	643

Perbandingan Cepat

Ganti Pasangan Perbandingan

Gemini 3.1 Flash LitenonevsInklinglow gpt-oss-120bmediumvsInklinglow Qwen3.6 FlashnonevsInklinglow Qwen3.5-FlashnonevsInklinglow Qwen3.5 Plus 2026-04-20nonevsInklinglow Gemini 3.1 Flash LiteminimalvsInklinglow Qwen3.5-35B-A3BnonevsInklinglow GPT-5 NanomediumvsInklinglow Nemotron 3 UltranoneTersedia gratisvsInklinglow Qwen3.5-35B-A3BmediumvsInklinglow Gemini 2.5 FlashnonevsInklinglow Nemotron 3 SupermediumTersedia gratisvsGPT-5.4none