Navigasi
AI BENCHY
AD
Track all your projects in one dashboard. Get 📊stats, 🔥heatmaps and 👀recordings in one self-hosted dashboard.
uxwizz.com

AI BENCHY Compare

Anthropic: Claude Sonnet 5 vs OpenAI: GPT-4o-mini

Ringkasan

Perbandingan benchmark Claude Sonnet 5 vs GPT-4o-mini: Claude Sonnet 5 unggul dalam skor rata-rata dengan 5.7 vs 5.0. GPT-4o-mini memiliki biaya benchmark lebih rendah di $0.006 vs $0.287. GPT-4o-mini lebih cepat di 1.77s vs 4.74s, dengan tingkat keberhasilan 42.9% vs 23.8%.

Model yang direkomendasikan: GPT-4o-mini - Its score stays close to the best score here (5.0 vs 5.7), while costing about 48.5x less than Claude Sonnet 5.

Benchmark dihasilkan dari suite pengujian AI BENCHY pada: 2026-07-02

Metrik Claude Sonnet 5 Claude Sonnet 5 none Rilis: 2026-06-30 GPT-4o-mini GPT-4o-mini none Rilis: 2024-07-18
Skor 5.7 5.0
Peringkat #118 #144
Keandalan 10.0 10.0
Konsistensi 8.6 9.9
Tes benar
Tingkat lulus per percobaan 42.9% 23.8%
Tes tidak stabil 4 0
Total Run 63 63
Biaya per hasil 4.098 0.119
Total Biaya $0.287 $0.006
Harga input $2.000 / 1M $0.150 / 1M
Harga output $10.000 / 1M $0.600 / 1M
Total token input 76,797 31,518
Token output 13,325 1,982
Token penalaran 0 0
Waktu respons (rata-rata) 4.74s 1.77s
Waktu respons (maks) 29.46s 7.58s
Waktu respons (total) 99.46s 24.80s

Showcase generasi

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#118 Claude Sonnet 5

none
Biaya
$0.061
Waktu
53.7s
Token
6,172 tok

#144 GPT-4o-mini

none
Biaya
$0.001
Waktu
6.6s
Token
742 tok

Model teratas berdasarkan skor

Skor vs Total Biaya

Waktu respons (rata-rata)

Skor vs Waktu respons (rata-rata)

Total token output

Skor vs Total token output

Rincian Kategori

Trik anti-AI Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token input Token output Token penalaran
Claude Sonnet 5 5.3 10.0 25.0% 0 3.60s 834 1,813 0
GPT-4o-mini 4.8 10.0 25.0% 0 1.34s 618 186 0
Pemrograman Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token input Token output Token penalaran
Claude Sonnet 5 4.6 7.9 22.2% 1 3.67s 10,590 1,864 0
GPT-4o-mini 3.2 9.6 0.0% 0 1.63s 7,314 367 0
Gabungan Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token input Token output Token penalaran
Claude Sonnet 5 3.0 10.0 0.0% 0 29.46s 38,775 6,340 0
GPT-4o-mini 3.0 10.0 0.0% 0 7.58s 8,298 568 0
Parsing dan ekstraksi data Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token input Token output Token penalaran
Claude Sonnet 5 10.0 10.0 100.0% 0 3.01s 10,503 309 0
GPT-4o-mini 10.0 10.0 100.0% 0 1.27s 7,161 183 0
Spesifik domain Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token input Token output Token penalaran
Claude Sonnet 5 5.3 7.2 44.4% 1 3.28s 975 933 0
GPT-4o-mini 3.0 10.0 0.0% 0 637ms 732 15 0
Kecerdasan umum Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token input Token output Token penalaran
Claude Sonnet 5 4.7 3.1 33.3% 1 2.81s 708 272 0
GPT-4o-mini 4.0 10.0 0.0% 0 909ms 480 66 0
Kepatuhan instruksi Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token input Token output Token penalaran
Claude Sonnet 5 6.4 10.0 50.0% 0 2.58s 909 103 0
GPT-4o-mini 6.3 10.0 50.0% 0 1.11s 666 69 0
Pemecahan teka-teki Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token input Token output Token penalaran
Claude Sonnet 5 6.0 7.4 55.6% 1 3.22s 894 778 0
GPT-4o-mini 3.5 10.0 0.0% 0 1.21s 651 308 0
Pemanggilan alat Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token input Token output Token penalaran
Claude Sonnet 5 10.0 10.0 100.0% 0 6.80s 12,351 522 0
GPT-4o-mini 10.0 10.0 100.0% 0 2.51s 5,400 205 0
Pengetahuan umum Skor Konsistensi Tingkat lulus per percobaan Tes tidak stabil Tes benar Waktu respons (rata-rata) Token input Token output Token penalaran
Claude Sonnet 5 3.0 10.0 0.0% 0 4.31s 258 391 0
GPT-4o-mini 3.0 10.0 0.0% 0 794ms 198 15 0

Perbandingan Cepat

Ganti Pasangan Perbandingan

CobuddymediumvsGPT-4o-mininoneClaude Sonnet 5nonevsNorth Mini CodemediumTersedia gratisMistral Small 4mediumvsGPT-4o-mininoneMiniMax M2.5mediumvsGPT-4o-mininoneMiniMax M2.7mediumvsGPT-4o-mininoneGPT-4o-mininonevsQwen3 Coder NextmediumClaude Sonnet 5nonevsGemini 3.1 Flash LiteminimalClaude Sonnet 5nonevsMiniMax M2.7mediumClaude Sonnet 5nonevsMistral Small 4mediumClaude Sonnet 5nonevsQwen3.5-35B-A3BmediumClaude Sonnet 5nonevsGemma 4 31BmediumTersedia gratisClaude Sonnet 5nonevsNemotron 3 SupermediumTersedia gratis