AI BENCHY
Your ad here

Kegagalan kategori AI BENCHY

Pemrograman: Kesalahan API

Pemrograman
Kesalahan API

Lihat model AI mana yang paling mungkin mengalami Kesalahan API di Pemrograman, agar Anda bisa menemukan titik lemahnya lebih cepat. Urutkan berdasarkan: Waktu respons (rata-rata) ↓.

Model yang ditampilkan

6

Total kegagalan

6

Model yang paling terdampak

Gemini 3 PRO Preview 1

Alasan kegagalan

Jawaban salah26 Kedaluwarsa12 Kesalahan API6 Tidak mengikuti instruksi2

Kategori

Parsing dan ekstraksi data6 Pemanggilan alat6 Pemrograman6 Gabungan5 Spesifik domain2 Kepatuhan instruksi1 Pemecahan teka-teki1
Peringkat Model Perusahaan Jumlah Kesalahan API Skor kategori Tes benar Waktu respons (rata-rata)
#10 Gemini 3 PRO Preview medium Google 1 3.0 0/1 0ms
#18 Qwen3.6 Plus medium Qwen 1 3.0 0/1 0ms
#47 Hunter Alpha medium OpenRouter 1 3.0 0/1 0ms
#48 Nemotron 3 Super medium NVIDIA 1 3.0 0/1 0ms
#68 Hunter Alpha none OpenRouter 1 3.0 0/1 0ms
#93 Step 3.5 Flash none Stepfun 1 3.0 0/1 0ms

Model teratas menurut Jumlah Kesalahan API

Jumlah Kesalahan API vs Skor

Model teratas menurut Waktu respons (rata-rata)

Model teratas menurut Perkiraan biaya terbuang