Navigatie
AI BENCHY
Advertise here

AI BENCHY Compare

Kwaipilot: KAT-Coder-Air V2.5 vs Nemotron 3 Ultra 550b A55b

Samenvatting

Nemotron 3 Ultra 550b A55b (medium) leidt in gemiddelde score met 8.1 vs 4.9. KAT-Coder-Air V2.5 heeft lagere benchmarkkosten met $0.037 vs $0.158. KAT-Coder-Air V2.5 is sneller met 6.99s vs 15.05s, met slagingspercentages van 38.1% vs 69.8%.

Aanbevolen modelNemotron 3 Ultra 550b A55b (medium)Het heeft de sterkste score in deze vergelijking (8.1) en de beste balans tussen kosten en responstijd over alle 2 modellen.

Benchmarks gegenereerd uit AI BENCHY-testsuites op: 2026-07-14

Metriek KAT-Coder-Air V2.5 KAT-Coder-Air V2.5 none Releasedatum: 2026-07-14 Nemotron 3 Ultra 550b A55b Nemotron 3 Ultra 550b A55b medium Releasedatum: 2026-06-04 Gratis beschikbaar
Score 4.9 8.1
Rang #168 #31
Betrouwbaarheid 10.0 9.7
Consistentie 7.1 8.8
Correcte tests
Slaagpercentage per poging 38.1% 69.8%
Instabiele tests 7 3
Totaal runs 63 63
Kosten per resultaat 0.724 0.000
Totale kosten $0.037 $0.158
Invoerprijs $0.150 / 1M $0.500 / 1M
Uitvoerprijs $0.600 / 1M $2.200 / 1M
Totaal aantal invoer-tokens 41,328 46,813
Uitvoer-tokens 49,933 18,002
Redeneer-tokens 0 53,091
Responstijd (gem.) 6.99s 15.05s
Responstijd (max) 24.94s 43.93s
Responstijd (totaal) 146.78s 316.09s

Generatie-showcase

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#168 KAT-Coder-Air V2.5

none
Kosten
$0.002
Tijd
14.5s
Tokens
2,619 tok

#31 Nemotron 3 Ultra 550b A55b

medium
Ongeldige SVG
Kosten
$0.000
Tijd
300.0s
Tokens
0 tok

Topmodellen op score

Score vs totale kosten

Responstijd (gem.)

Score vs Responstijd (gem.)

Totaal aantal uitvoer-tokens

Score vs Totaal aantal uitvoer-tokens

Categorie-uitsplitsing

Programmeren Score Consistentie Slaagpercentage per poging Instabiele tests Correcte tests Responstijd (gem.) Invoer-tokens Uitvoer-tokens Redeneer-tokens
KAT-Coder-Air V2.5 3.3 9.6 0.0% 0 14.31s 6,472 16,918 0
Nemotron 3 Ultra 550b A55b 8.4 7.4 88.9% 1 26.53s 7,686 2,854 17,725

Snelle vergelijking

Vergelijkingspaar wisselen