Navigation
AD
Track all your projects in one dashboard. Get 📊stats, 🔥heatmaps and 👀recordings in one self-hosted dashboard.
uxwizz.com

KAT-Coder-Pro V2.5 (default) vs Beam 1.0 501B A23B (high)

Le score moyen est pratiquement à égalité avec 6.1 vs 6.1. Beam 1.0 501B A23B (high) a le coût de benchmark le plus bas avec $0.674 vs $0.742. Beam 1.0 501B A23B (high) est plus rapide avec 9.03s vs 24.96s, avec des taux de réussite de 68.1% vs 59.4%.

Benchmarks générés à partir des suites de tests AI BENCHY le: 2026-10-17

Modèles comparés

Rang
#273
Total des jetons de sortie
139,572
Temps de réponse (moy.)
24.96s
Coût total
$0.742
Rang
#266
Total des jetons de sortie
147,207
Temps de réponse (moy.)
9.03s
Coût total
$0.674
Modèle recommandé Beam 1.0 501B A23B (high)

Il obtient le meilleur score ici (6.1) et répond environ 2.8x plus vite que KAT-Coder-Pro V2.5 (default).

Comparaison détaillée

Métrique KAT-Coder-Pro V2.5 KAT-Coder-Pro V2.5 default Sortie: 2026-07-14 Beam 1.0 501B A23B Beam 1.0 501B A23B high Sortie: 2026-10-17
Score 6.1 6.1
Rang #273 #266
Fiabilité 10.0 10.0
Cohérence 7.1 8.3
Tentatives 69/69 69/69
Tests corrects
Taux de réussite par tentative 68.1% 59.4%
Tests instables 8 5
Exécutions totales 69 69
Coût par résultat 4.419 6.126
Coût total $0.742 $0.674
Prix d'entrée $0.740 / 1M $1.000 / 1M
Prix de sortie $2.960 / 1M $3.000 / 1M
Prix de lecture du cache $0.150 / 1M $0.100 / 1M
Prix d’écriture du cache N/D N/D
Total des jetons d'entrée 98,508 232,218
Jetons de sortie 8,088 4,944
Jetons de raisonnement 131,484 142,263
Temps de réponse (moy.) 24.96s 9.03s
Temps de réponse (max) 335.41s 36.04s
Temps de réponse (total) 574.12s 207.67s
Paramètres ~700B au total (~72B actifs) 501B au total (23B actifs)
Disponibilité Source fermée Open source

Les prix du cache concernent les tokens d’entrée. La lecture réutilise les prompts en cache ; l’écriture les stocke et peut coûter plus cher. Les tokens de sortie utilisent le prix de sortie.

Génération showcase de modèles

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#273 KAT-Coder-Pro V2.5

default
Coût
$0.010
Temps
29.0s
Tokens
3,439 tok

#266 Beam 1.0 501B A23B

high
Coût
$0.008
Temps
15.6s
Tokens
6,162 tok

Meilleurs modèles par score

Score vs coût total

Temps de réponse (moy.)

Score vs Temps de réponse (moy.)

Total des jetons de sortie

Score vs Total des jetons de sortie

Répartition par catégorie

Programmation Score Cohérence Taux de réussite par tentative Tests instables Tests corrects Temps de réponse (moy.) Jetons d'entrée Jetons de sortie Jetons de raisonnement
KAT-Coder-Pro V2.5 6.1 4.7 66.7% 2 22.52s 7,893 451 21,989
Beam 1.0 501B A23B 8.4 7.4 88.9% 1 21.05s 7,800 559 44,608

Changer la paire de comparaison