Anthropic: Claude Sonnet 5 vs Google: Gemini 3.5 Flash-Lite

Claude Sonnet 5 (medium) unggul dalam skor rata-rata dengan 8.3 vs 8.1. Gemini 3.5 Flash-Lite (high) memiliki biaya benchmark lebih rendah di $0.584 vs $0.922. Gemini 3.5 Flash-Lite (high) lebih cepat di 9.48s vs 12.52s, dengan tingkat keberhasilan 80.3% vs 81.8%.

Model yang direkomendasikanGemini 3.5 Flash-Lite (high)Its score stays close to the best score here (8.1 vs 8.3), while costing about 1.6x less than Claude Sonnet 5 (medium).

Benchmark dihasilkan dari suite pengujian AI BENCHY pada: 2026-07-22

Metrik	Claude Sonnet 5 Claude Sonnet 5 medium Rilis: 2026-06-30	Gemini 3.5 Flash-Lite Gemini 3.5 Flash-Lite high Rilis: 2026-07-21

Metrik	Claude Sonnet 5 Claude Sonnet 5 medium Rilis: 2026-06-30	Gemini 3.5 Flash-Lite Gemini 3.5 Flash-Lite high Rilis: 2026-07-21
Skor	8.3	8.1
Peringkat	#26	#31
Keandalan	10.0	10.0
Konsistensi	9.0	7.5
Tes benar
Tingkat lulus per percobaan	80.3%	81.8%
Tes tidak stabil	3	7
Total Run	66	66
Biaya per hasil	5.760	4.169
Total Biaya	$0.922	$0.584
Harga input	$2.000 / 1M	$0.300 / 1M
Harga output	$10.000 / 1M	$2.500 / 1M
Total token input	145,956	105,138
Token output	52,333	8,315
Token penalaran	10,874	212,507
Waktu respons (rata-rata)	12.52s	9.48s
Waktu respons (maks)	66.71s	43.93s
Waktu respons (total)	275.42s	208.52s

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#26 Claude Sonnet 5

medium

Biaya: $0.007
Waktu: 6.4s
Token: 832 tok

#31 Gemini 3.5 Flash-Lite

high

Biaya: $0.023
Waktu: 23.6s
Token: 9,128 tok

Model teratas berdasarkan skor

Skor vs Total Biaya

Waktu respons (rata-rata)

Skor vs Waktu respons (rata-rata)

Total token output

Skor vs Total token output

Rincian Kategori

Kategori:

Trik anti-AI	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Claude Sonnet 5	10.0	10.0	100.0%	0		3.80s	834	1,220	446
Gemini 3.5 Flash-Lite	10.0	10.0	100.0%	0		1.98s	516	166	7,464

Pemrograman	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Claude Sonnet 5	9.0	7.9	88.9%	1		17.28s	10,590	13,153	2,379
Gemini 3.5 Flash-Lite	8.6	7.6	88.9%	1		15.09s	8,136	452	55,603

Gabungan	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Claude Sonnet 5	7.3	6.0	83.3%	1		51.86s	107,934	23,169	5,371
Gemini 3.5 Flash-Lite	7.3	5.8	83.3%	1		29.22s	80,577	6,767	62,928

Parsing dan ekstraksi data	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Claude Sonnet 5	10.0	10.0	100.0%	0		3.16s	10,503	312	0
Gemini 3.5 Flash-Lite	10.0	10.0	100.0%	0		2.71s	7,269	279	5,104

Spesifik domain	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Claude Sonnet 5	7.7	10.0	66.7%	0		20.38s	975	12,140	1,994
Gemini 3.5 Flash-Lite	5.3	7.2	44.4%	1		19.53s	651	16	51,792

Kecerdasan umum	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Claude Sonnet 5	4.8	3.2	33.3%	1		4.32s	708	264	0
Gemini 3.5 Flash-Lite	5.4	2.5	66.7%	1		3.40s	492	114	2,361

Kepatuhan instruksi	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Claude Sonnet 5	9.9	10.0	100.0%	0		3.10s	909	318	269
Gemini 3.5 Flash-Lite	8.5	6.8	83.3%	1		1.87s	627	70	3,533

Pemecahan teka-teki	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Claude Sonnet 5	7.7	10.0	66.7%	0		2.98s	894	407	121
Gemini 3.5 Flash-Lite	8.2	7.2	88.9%	1		1.85s	576	172	4,371

Pemanggilan alat	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Claude Sonnet 5	10.0	10.0	100.0%	0		10.70s	12,351	433	90
Gemini 3.5 Flash-Lite	10.0	10.0	100.0%	0		4.05s	6,132	269	3,356

Pengetahuan umum	Skor	Konsistensi	Tingkat lulus per percobaan	Tes tidak stabil	Tes benar	Waktu respons (rata-rata)	Token input	Token output	Token penalaran
Claude Sonnet 5	3.0	10.0	0.0%	0		7.06s	258	917	204
Gemini 3.5 Flash-Lite	2.8	1.6	33.3%	1		16.11s	162	10	15,995

Perbandingan Cepat

Ganti Pasangan Perbandingan