Navigatie
AI BENCHY
Advertise here

AI BENCHY Compare

Kwaipilot: KAT-Coder-Pro V2.5 vs Nemotron 3 Ultra 550b A55b

Samenvatting

Nemotron 3 Ultra 550b A55b (medium) leidt in gemiddelde score met 8.1 vs 8.0. Nemotron 3 Ultra 550b A55b (medium) heeft lagere benchmarkkosten met $0.158 vs $0.220. KAT-Coder-Pro V2.5 (low) is sneller met 10.44s vs 15.05s, met slagingspercentages van 71.4% vs 69.8%.

Aanbevolen modelNemotron 3 Ultra 550b A55b (medium)Het heeft de sterkste score in deze vergelijking (8.1) en de beste balans tussen kosten en responstijd over alle 2 modellen.

Benchmarks gegenereerd uit AI BENCHY-testsuites op: 2026-07-14

Metriek KAT-Coder-Pro V2.5 KAT-Coder-Pro V2.5 low Releasedatum: 2026-07-14 Nemotron 3 Ultra 550b A55b Nemotron 3 Ultra 550b A55b medium Releasedatum: 2026-06-04 Gratis beschikbaar
Score 8.0 8.1
Rang #35 #31
Betrouwbaarheid 9.9 9.7
Consistentie 7.3 8.8
Correcte tests
Slaagpercentage per poging 71.4% 69.8%
Instabiele tests 7 3
Totaal runs 63 63
Kosten per resultaat 1.991 0.000
Totale kosten $0.220 $0.158
Invoerprijs $0.740 / 1M $0.500 / 1M
Uitvoerprijs $2.960 / 1M $2.200 / 1M
Totaal aantal invoer-tokens 42,750 46,813
Uitvoer-tokens 2,167 18,002
Redeneer-tokens 61,133 53,091
Responstijd (gem.) 10.44s 15.05s
Responstijd (max) 51.34s 43.93s
Responstijd (totaal) 219.17s 316.09s

Generatie-showcase

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#35 KAT-Coder-Pro V2.5

low
Kosten
$0.016
Tijd
47.6s
Tokens
5,182 tok

#31 Nemotron 3 Ultra 550b A55b

medium
Ongeldige SVG
Kosten
$0.000
Tijd
300.0s
Tokens
0 tok

Topmodellen op score

Score vs totale kosten

Responstijd (gem.)

Score vs Responstijd (gem.)

Totaal aantal uitvoer-tokens

Score vs Totaal aantal uitvoer-tokens

Categorie-uitsplitsing

Programmeren Score Consistentie Slaagpercentage per poging Instabiele tests Correcte tests Responstijd (gem.) Invoer-tokens Uitvoer-tokens Redeneer-tokens
KAT-Coder-Pro V2.5 7.8 10.0 66.7% 0 24.87s 7,893 402 24,945
Nemotron 3 Ultra 550b A55b 8.4 7.4 88.9% 1 26.53s 7,686 2,854 17,725

Snelle vergelijking

Vergelijkingspaar wisselen