Navigasi
AI BENCHY
Advertise here

AI BENCHY Compare

Google: Gemini 3.5 Flash vs OpenAI: GPT-5.4 Nano

Ringkasan

Perbandingan benchmark Gemini 3.5 Flash vs GPT-5.4 Nano: GPT-5.4 Nano unggul dalam skor rata-rata dengan 7.5 vs 6.8. GPT-5.4 Nano memiliki biaya benchmark lebih rendah di $0.107 vs $0.108. Gemini 3.5 Flash lebih cepat di 1.57s vs 11.95s, dengan tingkat keberhasilan 68.3% vs 63.5%.

Model yang direkomendasikan: Gemini 3.5 Flash - Its score stays close to the best score here (6.8 vs 7.5), while responding about 7.6x faster than GPT-5.4 Nano.

Benchmark dihasilkan dari suite pengujian AI BENCHY pada: 2026-06-12

Metrik Gemini 3.5 Flash Gemini 3.5 Flash minimal Rilis: 2026-05-19 GPT-5.4 Nano GPT-5.4 Nano medium Rilis: 2026-03-17
Skor 6.8 7.5
Peringkat #71 #48
Keandalan 10.0 10.0
Konsistensi 9.6 8.4
Tes benar
Tingkat lulus per percobaan 68.3% 63.5%
Tes tidak stabil 1 4
Total Run 63 63
Biaya per hasil 0.767 0.969
Total Biaya $0.108 $0.107
Harga input $1.500 / 1M $0.200 / 1M
Harga output $9.000 / 1M $1.250 / 1M
Total token input 39,847 35,434
Token output 5,277 3,014
Token penalaran 0 76,520
Waktu respons (rata-rata) 1.57s 11.95s
Waktu respons (maks) 5.51s 94.06s
Waktu respons (total) 33.02s 250.98s

Generation showcase

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#71 Gemini 3.5 Flash

minimal
Cost
$0.041
Time
20.4s
Tokens
4,608 tok

#48 GPT-5.4 Nano

medium
Cost
$0.007
Time
24.6s
Tokens
4,943 tok

Model teratas berdasarkan skor

Skor vs Total Biaya

Waktu respons (rata-rata)

Skor vs Waktu respons (rata-rata)

Total token output

Skor vs Total token output

Rincian Kategori

Trik anti-AI Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token input Token output Token penalaran
Gemini 3.5 Flash 6.5 10.0 50.0% 0 892ms 492 405 0
GPT-5.4 Nano 8.3 10.0 75.0% 0 4.52s 606 683 2,254
Pemrograman Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token input Token output Token penalaran
Gemini 3.5 Flash 5.6 9.9 33.3% 0 2.75s 8,122 3,456 0
GPT-5.4 Nano 6.1 4.7 66.7% 2 19.12s 7,305 516 20,778
Gabungan Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token input Token output Token penalaran
Gemini 3.5 Flash 3.0 10.0 0.0% 0 3.56s 15,780 404 0
GPT-5.4 Nano 9.8 10.0 100.0% 0 24.13s 12,345 349 5,719
Parsing dan ekstraksi data Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token input Token output Token penalaran
Gemini 3.5 Flash 10.0 10.0 100.0% 0 1.66s 7,548 279 0
GPT-5.4 Nano 10.0 10.0 100.0% 0 2.54s 7,140 234 516
Spesifik domain Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token input Token output Token penalaran
Gemini 3.5 Flash 10.0 10.0 100.0% 0 899ms 633 12 0
GPT-5.4 Nano 5.9 7.2 55.6% 1 38.18s 619 60 43,325
Kecerdasan umum Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token input Token output Token penalaran
Gemini 3.5 Flash 10.0 10.0 100.0% 0 922ms 486 117 0
GPT-5.4 Nano 4.5 10.0 0.0% 0 4.15s 477 179 443
Kepatuhan instruksi Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token input Token output Token penalaran
Gemini 3.5 Flash 6.4 5.8 66.7% 1 893ms 615 76 0
GPT-5.4 Nano 9.8 10.0 100.0% 0 1.88s 660 95 521
Pemecahan teka-teki Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token input Token output Token penalaran
Gemini 3.5 Flash 10.0 10.0 100.0% 0 1.45s 558 282 0
GPT-5.4 Nano 4.1 7.2 22.2% 1 3.79s 642 594 1,408
Pemanggilan alat Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token input Token output Token penalaran
Gemini 3.5 Flash 10.0 10.0 100.0% 0 2.79s 5,457 234 0
GPT-5.4 Nano 10.0 10.0 100.0% 0 7.71s 5,445 234 382
Pengetahuan umum Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token input Token output Token penalaran
Gemini 3.5 Flash 3.0 10.0 0.0% 0 1.76s 156 12 0
GPT-5.4 Nano 3.0 10.0 0.0% 0 4.81s 195 70 1,174

Perbandingan Cepat

Ganti Pasangan Perbandingan

Gemini 3.5 FlashminimalvsQwen3.5-FlashmediumGemini 3.5 FlashminimalvsRing-2.6-1TmediumGemini 3.5 FlashminimalvsQwen3.7 MaxnoneGemini 3.5 FlashminimalvsQwen3.6 35B A3BmediumGemini 3.5 FlashminimalvsMiMo-V2.5mediumGemini 3.5 FlashminimalvsStep 3.5 FlashmediumGemini 3.5 Flashminimalvsgpt-oss-120bmediumTersedia gratisGemini 3 Flash PreviewlowvsGPT-5.4 NanomediumGemini 3.5 FlashminimalvsGPT-5 NanomediumGemini 3.5 FlashminimalvsKimi K2.7 CodemediumGPT-5.4 NanomediumvsStep 3.7 FlashlowClaude Sonnet 4.6nonevsGPT-5.4 Nanomedium