Navigasi
AI BENCHY
Advertise here

AI BENCHY Compare

Anthropic: Claude Sonnet 5 vs Google: Gemma 4 31B

Ringkasan

Perbandingan benchmark Claude Sonnet 5 vs Gemma 4 31B: Gemma 4 31B unggul dalam skor rata-rata dengan 6.3 vs 5.7. Gemma 4 31B memiliki biaya benchmark lebih rendah di $0.033 vs $0.287. Claude Sonnet 5 lebih cepat di 4.74s vs 56.55s, dengan tingkat keberhasilan 42.9% vs 69.8%.

Model yang direkomendasikan: Gemma 4 31B - It has the best score here (6.3), while costing about 8.8x less than Claude Sonnet 5.

Benchmark dihasilkan dari suite pengujian AI BENCHY pada: 2026-06-30

Metrik Claude Sonnet 5 Claude Sonnet 5 none Rilis: 2026-06-30 Gemma 4 31B Gemma 4 31B medium Rilis: 2026-04-02 Tersedia gratis
Skor 5.7 6.3
Peringkat #117 #90
Keandalan 10.0 10.0
Konsistensi 8.6 9.4
Tes benar
Tingkat lulus per percobaan 42.9% 69.8%
Tes tidak stabil 4 1
Total Run 63 63
Biaya per hasil 4.098 0.257
Total Biaya $0.287 $0.033
Harga input $2.000 / 1M $0.120 / 1M
Harga output $10.000 / 1M $0.350 / 1M
Total token input 76,797 17,957
Token output 13,325 22,356
Token penalaran 0 65,726
Waktu respons (rata-rata) 4.74s 56.55s
Waktu respons (maks) 29.46s 437.40s
Waktu respons (total) 99.46s 1074.41s

Showcase generasi

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#117 Claude Sonnet 5

none
Biaya
$0.061
Waktu
53.7s
Token
6,172 tok

#90 Gemma 4 31B

medium
Biaya
$0.002
Waktu
45.7s
Token
2,696 tok

Model teratas berdasarkan skor

Skor vs Total Biaya

Waktu respons (rata-rata)

Skor vs Waktu respons (rata-rata)

Total token output

Skor vs Total token output

Rincian Kategori

Trik anti-AI Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token input Token output Token penalaran
Claude Sonnet 5 5.3 10.0 25.0% 0 3.60s 834 1,813 0
Gemma 4 31B 10.0 10.0 100.0% 0 12.89s 816 962 2,046
Pemrograman Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token input Token output Token penalaran
Claude Sonnet 5 4.6 7.9 22.2% 1 3.67s 10,590 1,864 0
Gemma 4 31B 4.3 5.8 22.2% 1 219.76s 5,568 11,098 33,212
Gabungan Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token input Token output Token penalaran
Claude Sonnet 5 3.0 10.0 0.0% 0 29.46s 38,775 6,340 0
Gemma 4 31B 3.0 10.0 0.0% 0 0ms 0 0 0
Parsing dan ekstraksi data Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token input Token output Token penalaran
Claude Sonnet 5 10.0 10.0 100.0% 0 3.01s 10,503 309 0
Gemma 4 31B 10.0 10.0 100.0% 0 21.11s 8,334 1,822 2,951
Spesifik domain Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token input Token output Token penalaran
Claude Sonnet 5 5.3 7.2 44.4% 1 3.28s 975 933 0
Gemma 4 31B 7.7 10.0 66.7% 0 38.48s 876 4,349 8,985
Kecerdasan umum Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token input Token output Token penalaran
Claude Sonnet 5 4.7 3.1 33.3% 1 2.81s 708 272 0
Gemma 4 31B 10.0 10.0 100.0% 0 9.57s 567 105 888
Kepatuhan instruksi Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token input Token output Token penalaran
Claude Sonnet 5 6.4 10.0 50.0% 0 2.58s 909 103 0
Gemma 4 31B 10.0 10.0 100.0% 0 12.76s 777 533 2,035
Pemecahan teka-teki Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token input Token output Token penalaran
Claude Sonnet 5 6.0 7.4 55.6% 1 3.22s 894 778 0
Gemma 4 31B 9.9 10.0 100.0% 0 26.91s 801 1,795 5,595
Pemanggilan alat Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token input Token output Token penalaran
Claude Sonnet 5 10.0 10.0 100.0% 0 6.80s 12,351 522 0
Gemma 4 31B 3.0 10.0 0.0% 0 0ms 0 0 0
Pengetahuan umum Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token input Token output Token penalaran
Claude Sonnet 5 3.0 10.0 0.0% 0 4.31s 258 391 0
Gemma 4 31B 3.0 10.0 0.0% 0 90.14s 218 1,692 10,014

Perbandingan Cepat

Ganti Pasangan Perbandingan

Gemma 4 31BmediumTersedia gratisvsGPT-5.5noneSeed-2.0-LitenonevsGemma 4 31BmediumTersedia gratisClaude Sonnet 5nonevsNorth Mini CodemediumTersedia gratisGemma 4 31BmediumTersedia gratisvsQwen3.5-FlashnoneGemma 4 31BmediumTersedia gratisvsNemotron 3 Ultra 550b A55bnoneTersedia gratisGemma 4 31BmediumTersedia gratisvsQwen3.6 Max PreviewnoneGemma 4 31BmediumTersedia gratisvsGLM 5noneGemma 4 31BmediumTersedia gratisvsQwen3.6 FlashnoneGemma 4 31BmediumTersedia gratisvsQwen3.5-35B-A3BnoneGemma 4 31BmediumTersedia gratisvsQwen3.5-27BnoneClaude Sonnet 5nonevsGemini 3.1 Flash LiteminimalGemma 4 31BmediumTersedia gratisvsQwen3.5 Plus 2026-02-15none