Navigasi
AI BENCHY
Advertise here

AI BENCHY Compare

DeepSeek: DeepSeek V4 Pro vs OpenAI: GPT-5.4 Nano

Ringkasan

Perbandingan benchmark DeepSeek V4 Pro vs GPT-5.4 Nano: GPT-5.4 Nano unggul dalam skor rata-rata dengan 7.5 vs 7.2. DeepSeek V4 Pro memiliki biaya benchmark lebih rendah di $0.030 vs $0.107. DeepSeek V4 Pro lebih cepat di 5.30s vs 11.95s, dengan tingkat keberhasilan 52.4% vs 63.5%.

Model yang direkomendasikan: DeepSeek V4 Pro - Its score stays close to the best score here (7.2 vs 7.5), while costing about 3.6x less than GPT-5.4 Nano.

Benchmark dihasilkan dari suite pengujian AI BENCHY pada: 2026-06-12

Metrik DeepSeek V4 Pro DeepSeek V4 Pro none Rilis: 2026-04-24 GPT-5.4 Nano GPT-5.4 Nano medium Rilis: 2026-03-17
Skor 7.2 7.5
Peringkat #61 #49
Keandalan 9.9 10.0
Konsistensi 8.8 8.4
Tes benar
Tingkat lulus per percobaan 52.4% 63.5%
Tes tidak stabil 3 4
Total Run 61 63
Biaya per hasil 0.293 0.969
Total Biaya $0.030 $0.107
Harga input $0.435 / 1M $0.200 / 1M
Harga output $0.870 / 1M $1.250 / 1M
Total token input 53,078 35,434
Token output 7,047 3,014
Token penalaran 0 76,520
Waktu respons (rata-rata) 5.30s 11.95s
Waktu respons (maks) 23.74s 94.06s
Waktu respons (total) 111.39s 250.98s

Generation showcase

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#61 DeepSeek V4 Pro

none
Invalid SVG
Cost
$0.000
Time
300.0s
Tokens
0 tok

#49 GPT-5.4 Nano

medium
Cost
$0.007
Time
24.6s
Tokens
4,943 tok

Model teratas berdasarkan skor

Skor vs Total Biaya

Waktu respons (rata-rata)

Skor vs Waktu respons (rata-rata)

Total token output

Skor vs Total token output

Rincian Kategori

Trik anti-AI Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token input Token output Token penalaran
DeepSeek V4 Pro 3.2 6.1 16.7% 2 4.02s 540 1,168 0
GPT-5.4 Nano 8.3 10.0 75.0% 0 4.52s 606 683 2,254
Pemrograman Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token input Token output Token penalaran
DeepSeek V4 Pro 5.6 10.0 33.3% 0 5.62s 6,795 1,123 0
GPT-5.4 Nano 6.1 4.7 66.7% 2 19.12s 7,305 516 20,778
Gabungan Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token input Token output Token penalaran
DeepSeek V4 Pro 9.5 10.0 100.0% 0 23.74s 27,529 2,235 0
GPT-5.4 Nano 9.8 10.0 100.0% 0 24.13s 12,345 349 5,719
Parsing dan ekstraksi data Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token input Token output Token penalaran
DeepSeek V4 Pro 10.0 10.0 100.0% 0 4.61s 7,568 200 0
GPT-5.4 Nano 10.0 10.0 100.0% 0 2.54s 7,140 234 516
Spesifik domain Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token input Token output Token penalaran
DeepSeek V4 Pro 5.3 10.0 33.3% 0 3.72s 666 24 0
GPT-5.4 Nano 5.9 7.2 55.6% 1 38.18s 619 60 43,325
Kecerdasan umum Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token input Token output Token penalaran
DeepSeek V4 Pro 5.0 10.0 0.0% 0 2.05s 471 126 0
GPT-5.4 Nano 4.5 10.0 0.0% 0 4.15s 477 179 443
Kepatuhan instruksi Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token input Token output Token penalaran
DeepSeek V4 Pro 6.3 5.8 66.7% 1 4.12s 627 713 0
GPT-5.4 Nano 9.8 10.0 100.0% 0 1.88s 660 95 521
Pemecahan teka-teki Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token input Token output Token penalaran
DeepSeek V4 Pro 10.0 10.0 100.0% 0 3.61s 594 442 0
GPT-5.4 Nano 4.1 7.2 22.2% 1 3.79s 642 594 1,408
Pemanggilan alat Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token input Token output Token penalaran
DeepSeek V4 Pro 10.0 10.0 100.0% 0 7.40s 8,105 328 0
GPT-5.4 Nano 10.0 10.0 100.0% 0 7.71s 5,445 234 382
Pengetahuan umum Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token input Token output Token penalaran
DeepSeek V4 Pro 3.0 10.0 0.0% 0 5.76s 183 688 0
GPT-5.4 Nano 3.0 10.0 0.0% 0 4.81s 195 70 1,174

Perbandingan Cepat

Ganti Pasangan Perbandingan