Navigasi
AI BENCHY
Advertise here

AI BENCHY Compare

Anthropic: Claude Opus 4.7 vs Google: Gemini 3.5 Flash

Ringkasan

Perbandingan benchmark Claude Opus 4.7 vs Gemini 3.5 Flash: Gemini 3.5 Flash unggul dalam skor rata-rata dengan 9.2 vs 8.7. Gemini 3.5 Flash memiliki biaya benchmark lebih rendah di $0.349 vs $0.679. Gemini 3.5 Flash lebih cepat di 3.27s vs 4.73s, dengan tingkat keberhasilan 82.5% vs 90.5%.

Model yang direkomendasikan: Gemini 3.5 Flash - It has the best score here (9.2), while costing about 1.9x less than Claude Opus 4.7.

Benchmark dihasilkan dari suite pengujian AI BENCHY pada: 2026-07-02

Metrik Claude Opus 4.7 Claude Opus 4.7 medium Rilis: 2026-04-16 Gemini 3.5 Flash Gemini 3.5 Flash low Rilis: 2026-05-19
Skor 8.7 9.2
Peringkat #13 #5
Keandalan 10.0 10.0
Konsistensi 9.6 10.0
Tes benar
Tingkat lulus per percobaan 82.5% 90.5%
Tes tidak stabil 1 0
Total Run 63 63
Biaya per hasil 3.991 1.834
Total Biaya $0.679 $0.349
Harga input $5.000 / 1M $1.500 / 1M
Harga output $25.000 / 1M $9.000 / 1M
Total token input 65,406 36,938
Token output 11,858 2,033
Token penalaran 2,198 30,519
Waktu respons (rata-rata) 4.73s 3.27s
Waktu respons (maks) 23.18s 9.05s
Waktu respons (total) 94.51s 68.65s

Showcase generasi

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#13 Claude Opus 4.7

medium
Biaya
$0.059
Waktu
26.8s
Token
2,475 tok

#5 Gemini 3.5 Flash

low
Biaya
$0.068
Waktu
39.1s
Token
7,588 tok

Model teratas berdasarkan skor

Skor vs Total Biaya

Waktu respons (rata-rata)

Skor vs Waktu respons (rata-rata)

Total token output

Skor vs Total token output

Rincian Kategori

Trik anti-AI Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token input Token output Token penalaran
Claude Opus 4.7 8.3 10.0 75.0% 0 1.85s 894 348 0
Gemini 3.5 Flash 10.0 10.0 100.0% 0 2.52s 494 209 2,536
Pemrograman Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token input Token output Token penalaran
Claude Opus 4.7 7.6 7.2 77.8% 1 12.96s 10,635 7,629 1,114
Gemini 3.5 Flash 7.8 10.0 66.7% 0 6.71s 8,118 458 13,420
Gabungan Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token input Token output Token penalaran
Claude Opus 4.7 10.0 10.0 100.0% 0 21.45s 24,501 2,369 1,084
Gemini 3.5 Flash 10.0 10.0 100.0% 0 6.44s 12,873 351 3,050
Parsing dan ekstraksi data Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token input Token output Token penalaran
Claude Opus 4.7 10.0 10.0 100.0% 0 2.37s 10,533 324 0
Gemini 3.5 Flash 10.0 10.0 100.0% 0 1.81s 7,548 279 1,164
Spesifik domain Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token input Token output Token penalaran
Claude Opus 4.7 7.7 10.0 66.7% 0 1.17s 630 51 0
Gemini 3.5 Flash 7.7 10.0 66.7% 0 3.39s 633 12 4,538
Kecerdasan umum Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token input Token output Token penalaran
Claude Opus 4.7 10.0 10.0 100.0% 0 2.87s 723 256 0
Gemini 3.5 Flash 10.0 10.0 100.0% 0 2.27s 486 119 916
Kepatuhan instruksi Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token input Token output Token penalaran
Claude Opus 4.7 10.0 10.0 100.0% 0 1.57s 939 114 0
Gemini 3.5 Flash 9.9 10.0 100.0% 0 1.86s 615 71 1,652
Pemecahan teka-teki Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token input Token output Token penalaran
Claude Opus 4.7 10.0 10.0 100.0% 0 2.43s 939 370 0
Gemini 3.5 Flash 10.0 10.0 100.0% 0 2.35s 558 288 2,150
Pemanggilan alat Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token input Token output Token penalaran
Claude Opus 4.7 10.0 10.0 100.0% 0 4.17s 15,339 373 0
Gemini 3.5 Flash 10.0 10.0 100.0% 0 3.27s 5,457 234 403
Pengetahuan umum Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token input Token output Token penalaran
Claude Opus 4.7 3.0 10.0 0.0% 0 2.25s 273 24 0
Gemini 3.5 Flash 10.0 10.0 100.0% 0 1.88s 156 12 690

Perbandingan Cepat

Ganti Pasangan Perbandingan