Navigation
AI BENCHY
Advertise here

AI BENCHY Compare

Kwaipilot: KAT-Coder-Pro V2.5 vs Nemotron 3 Ultra 550b A55b

Zusammenfassung

Nemotron 3 Ultra 550b A55b (medium) führt beim Durchschnittsscore mit 8.1 vs 7.5. Nemotron 3 Ultra 550b A55b (medium) hat die niedrigeren Benchmark-Kosten mit $0.158 vs $0.275. KAT-Coder-Pro V2.5 (medium) ist schneller mit 12.95s vs 15.05s, mit Erfolgsraten von 65.1% vs 69.8%.

Empfohlenes ModellNemotron 3 Ultra 550b A55b (medium)Es hat hier die beste Punktzahl (8.1) und kostet etwa 1.7x weniger als KAT-Coder-Pro V2.5 (medium).

Benchmarks aus AI BENCHY-Test-Suites generiert am: 2026-07-14

Metrik KAT-Coder-Pro V2.5 KAT-Coder-Pro V2.5 medium Veröffentlichung: 2026-07-14 Nemotron 3 Ultra 550b A55b Nemotron 3 Ultra 550b A55b medium Veröffentlichung: 2026-06-04 Kostenlos verfügbar
Punktzahl 7.5 8.1
Rang #60 #31
Zuverlässigkeit 10.0 9.7
Konsistenz 7.7 8.8
Korrekte Tests
Erfolgsquote pro Versuch 65.1% 69.8%
Instabile Tests 6 3
Gesamtläufe 63 63
Kosten pro Ergebnis 2.498 0.000
Gesamtkosten $0.275 $0.158
Eingabepreis $0.740 / 1M $0.500 / 1M
Ausgabepreis $2.960 / 1M $2.200 / 1M
Gesamte Eingabe-Token 42,750 46,813
Ausgabe-Token 2,098 18,002
Denk-Token 80,027 53,091
Antwortzeit (Durchschnitt) 12.95s 15.05s
Antwortzeit (Maximum) 81.45s 43.93s
Antwortzeit (Gesamt) 271.92s 316.09s

Generierungs-Showcase

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#60 KAT-Coder-Pro V2.5

medium
Kosten
$0.009
Zeit
25.6s
Token
2,939 tok

#31 Nemotron 3 Ultra 550b A55b

medium
Ungültiges SVG
Kosten
$0.000
Zeit
300.0s
Token
0 tok

Top-Modelle nach Score

Score vs. Gesamtkosten

Antwortzeit (Durchschnitt)

Punktzahl vs Antwortzeit (Durchschnitt)

Gesamte Ausgabe-Token

Punktzahl vs Gesamte Ausgabe-Token

Kategorieaufschlüsselung

Programmierung Punktzahl Konsistenz Erfolgsquote pro Versuch Instabile Tests Korrekte Tests Antwortzeit (Durchschnitt) Eingabe-Token Ausgabe-Token Denk-Token
KAT-Coder-Pro V2.5 7.8 10.0 66.7% 0 33.10s 7,893 416 33,658
Nemotron 3 Ultra 550b A55b 8.4 7.4 88.9% 1 26.53s 7,686 2,854 17,725

Schnellvergleich

Vergleichspaar wechseln