Navigasi
AI BENCHY
Advertise here

AI BENCHY Compare

Google: Gemini 3.1 Flash Lite vs OpenAI: GPT-5.4 Mini

Benchmark dihasilkan dari suite pengujian AI BENCHY pada: 2026-05-08

Metrik Gemini 3.1 Flash Lite Gemini 3.1 Flash Lite minimal Rilis: 2026-05-08 GPT-5.4 Mini GPT-5.4 Mini medium Rilis: 2026-03-17
Skor 6.8 7.2
Peringkat #68 #60
Keandalan 10.0 10.0
Konsistensi 8.7 7.9
Tes benar
Tingkat lulus per percobaan 59.7% 68.4%
Tes tidak stabil 3 5
Total Run 57 57
Biaya per hasil 0.111 3.443
Total Biaya $0.012 $0.345
Harga input $0.250 / 1M $0.750 / 1M
Harga output $1.500 / 1M $4.500 / 1M
Token output 2,457 2,163
Token penalaran 0 69,741
Waktu respons (rata-rata) 1.41s 16.00s
Waktu respons (maks) 4.49s 102.91s
Waktu respons (total) 26.72s 303.99s

Model teratas berdasarkan skor

Skor vs Total Biaya

Waktu respons (rata-rata)

Skor vs Waktu respons (rata-rata)

Total token output

Skor vs Total token output

Rincian Kategori

Trik anti-AI Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token output Token penalaran
Gemini 3.1 Flash Lite 8.3 10.0 75.0% 0 1.10s 639 0
GPT-5.4 Mini 8.6 7.9 91.7% 1 4.05s 296 2,876
Pemrograman Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token output Token penalaran
Gemini 3.1 Flash Lite 10.0 10.0 100.0% 0 1.31s 636 0
GPT-5.4 Mini 10.0 10.0 100.0% 0 7.76s 423 1,548
Gabungan Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token output Token penalaran
Gemini 3.1 Flash Lite 3.0 10.0 0.0% 0 2.53s 357 0
GPT-5.4 Mini 10.0 10.0 100.0% 0 17.81s 317 4,317
Parsing dan ekstraksi data Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token output Token penalaran
Gemini 3.1 Flash Lite 10.0 10.0 100.0% 0 1.04s 279 0
GPT-5.4 Mini 10.0 10.0 100.0% 0 2.43s 234 650
Spesifik domain Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token output Token penalaran
Gemini 3.1 Flash Lite 2.9 7.2 11.1% 1 1.02s 15 0
GPT-5.4 Mini 4.1 4.4 44.5% 2 65.31s 60 43,286
Kecerdasan umum Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token output Token penalaran
Gemini 3.1 Flash Lite 4.0 10.0 0.0% 0 791ms 63 0
GPT-5.4 Mini 4.5 10.0 0.0% 0 3.72s 150 510
Kepatuhan instruksi Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token output Token penalaran
Gemini 3.1 Flash Lite 10.0 10.0 100.0% 0 932ms 72 0
GPT-5.4 Mini 7.4 6.7 66.7% 1 2.50s 129 1,337
Pemecahan teka-teki Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token output Token penalaran
Gemini 3.1 Flash Lite 6.0 4.6 66.7% 2 2.15s 153 0
GPT-5.4 Mini 7.8 10.0 66.7% 0 4.33s 271 2,449
Pemanggilan alat Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token output Token penalaran
Gemini 3.1 Flash Lite 10.0 10.0 100.0% 0 3.51s 234 0
GPT-5.4 Mini 4.7 1.6 66.7% 1 9.62s 251 2,594
Pengetahuan umum Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token output Token penalaran
Gemini 3.1 Flash Lite 3.0 10.0 0.0% 0 724ms 9 0
GPT-5.4 Mini 3.0 10.0 0.0% 0 30.10s 32 10,174

Perbandingan Cepat

Ganti Pasangan Perbandingan