Navigasi
AI BENCHY
Advertise here

AI BENCHY Compare

Google: Gemma 4 31B vs OpenAI: GPT-5.6 Sol

Ringkasan

Perbandingan benchmark Gemma 4 31B (medium) vs GPT-5.6 Sol: Skor rata-rata hampir imbang di 6.3 vs 6.3. Gemma 4 31B (medium) memiliki biaya benchmark lebih rendah di $0.033 vs $0.225. GPT-5.6 Sol lebih cepat di 1.66s vs 56.55s, dengan tingkat keberhasilan 69.8% vs 57.1%.

Model yang direkomendasikan: GPT-5.6 Sol - It has the best score here (6.3), while responding about 34.1x faster than Gemma 4 31B (medium).

Benchmark dihasilkan dari suite pengujian AI BENCHY pada: 2026-07-09

Metrik Gemma 4 31B Gemma 4 31B medium Rilis: 2026-04-02 Tersedia gratis GPT-5.6 Sol GPT-5.6 Sol none Rilis: 2026-07-09
Skor 6.3 6.3
Peringkat #102 #101
Keandalan 10.0 10.0
Konsistensi 9.4 9.0
Tes benar
Tingkat lulus per percobaan 69.8% 57.1%
Tes tidak stabil 1 3
Total Run 63 63
Biaya per hasil 0.257 2.244
Total Biaya $0.033 $0.225
Harga input $0.120 / 1M $5.000 / 1M
Harga output $0.350 / 1M $30.000 / 1M
Total token input 17,957 34,218
Token output 22,356 1,776
Token penalaran 65,726 0
Waktu respons (rata-rata) 56.55s 1.66s
Waktu respons (maks) 437.40s 3.93s
Waktu respons (total) 1074.41s 34.81s

Showcase generasi

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#102 Gemma 4 31B

medium
Biaya
$0.002
Waktu
45.7s
Token
2,696 tok

#101 GPT-5.6 Sol

none
Biaya
$0.116
Waktu
78.7s
Token
3,944 tok

Model teratas berdasarkan skor

Skor vs Total Biaya

Waktu respons (rata-rata)

Skor vs Waktu respons (rata-rata)

Total token output

Skor vs Total token output

Rincian Kategori

Trik anti-AI Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token input Token output Token penalaran
Gemma 4 31B 10.0 10.0 100.0% 0 12.89s 816 962 2,046
GPT-5.6 Sol 8.3 10.0 75.0% 0 1.27s 606 154 0
Pemrograman Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token input Token output Token penalaran
Gemma 4 31B 4.3 5.8 22.2% 1 219.76s 5,568 11,098 33,212
GPT-5.6 Sol 5.5 10.0 33.3% 0 1.39s 7,302 390 0
Gabungan Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token input Token output Token penalaran
Gemma 4 31B 3.0 10.0 0.0% 0 0ms 0 0 0
GPT-5.6 Sol 3.0 10.0 0.0% 0 3.93s 11,019 300 0
Parsing dan ekstraksi data Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token input Token output Token penalaran
Gemma 4 31B 10.0 10.0 100.0% 0 21.11s 8,334 1,822 2,951
GPT-5.6 Sol 10.0 10.0 100.0% 0 1.53s 7,140 222 0
Spesifik domain Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token input Token output Token penalaran
Gemma 4 31B 7.7 10.0 66.7% 0 38.48s 876 4,349 8,985
GPT-5.6 Sol 3.6 7.2 22.2% 1 1.43s 723 54 0
Kecerdasan umum Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token input Token output Token penalaran
Gemma 4 31B 10.0 10.0 100.0% 0 9.57s 567 105 888
GPT-5.6 Sol 6.5 3.4 66.7% 1 1.52s 477 91 0
Kepatuhan instruksi Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token input Token output Token penalaran
Gemma 4 31B 10.0 10.0 100.0% 0 12.76s 777 533 2,035
GPT-5.6 Sol 8.5 6.8 83.3% 1 1.33s 660 84 0
Pemecahan teka-teki Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token input Token output Token penalaran
Gemma 4 31B 9.9 10.0 100.0% 0 26.91s 801 1,795 5,595
GPT-5.6 Sol 7.7 10.0 66.7% 0 1.49s 642 211 0
Pemanggilan alat Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token input Token output Token penalaran
Gemma 4 31B 3.0 10.0 0.0% 0 0ms 0 0 0
GPT-5.6 Sol 10.0 10.0 100.0% 0 3.70s 5,454 246 0
Pengetahuan umum Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token input Token output Token penalaran
Gemma 4 31B 3.0 10.0 0.0% 0 90.14s 218 1,692 10,014
GPT-5.6 Sol 3.0 10.0 0.0% 0 1.95s 195 24 0

Perbandingan Cepat

Ganti Pasangan Perbandingan

Nemotron 3 SupermediumTersedia gratisvsGPT-5.6 SolnoneGPT-5.6 SolnonevsQwen3.5-35B-A3BmediumGemma 4 31BmediumTersedia gratisvsGPT-5.5noneSeed-2.0-LitenonevsGemma 4 31BmediumTersedia gratisGemini 3.1 Flash LitelowvsGPT-5.6 SolnoneGemma 4 31BmediumTersedia gratisvsGPT-5.6 LunalowGemini 3.1 Flash Lite PreviewlowvsGPT-5.6 SolnoneGemini 3.1 Flash LiteminimalvsGPT-5.6 SolnoneGemma 4 31BmediumTersedia gratisvsQwen3.5-FlashnoneGemma 4 31BmediumTersedia gratisvsNemotron 3 Ultra 550b A55bnoneTersedia gratisGPT-5.6 SolnonevsQwen3.6 27BmediumGPT-5.6 SolnonevsStep 3.5 Flashmedium