Navigatie
Advertise here

Mercury 2.5 Preview (high) vs KAT-Coder-Pro V2.5 (low)

KAT-Coder-Pro V2.5 (low) leidt in gemiddelde score met 6.5 vs 6.5. Mercury 2.5 Preview (high) heeft lagere benchmarkkosten met $0.039 vs $0.400. Mercury 2.5 Preview (high) is sneller met 7.61s vs 19.40s, met slagingspercentages van 65.2% vs 65.2%.

Benchmarks gegenereerd uit AI BENCHY-testsuites op: 2026-10-01

Vergeleken modellen

Rang
#194
Totaal aantal uitvoer-tokens
180,597
Responstijd (gem.)
7.61s
Totale kosten
$0.039
Rang
#191
Totaal aantal uitvoer-tokens
113,193
Responstijd (gem.)
19.40s
Totale kosten
$0.400
Aanbevolen model Mercury 2.5 Preview (high)

De score blijft dicht bij de beste score hier (6.5 vs 6.5) en het kost ongeveer 10.5x minder dan KAT-Coder-Pro V2.5 (low).

Gedetailleerde vergelijking

Metriek Mercury 2.5 Preview Mercury 2.5 Preview high Releasedatum: 2026-09-02 KAT-Coder-Pro V2.5 KAT-Coder-Pro V2.5 low Releasedatum: 2026-07-14
Score 6.5 6.5
Rang #194 #191
Betrouwbaarheid 9.9 10.0
Consistentie 8.0 7.1
Pogingen 69/69 69/69
Correcte tests
Slaagpercentage per poging 65.2% 65.2%
Instabiele tests 6 8
Totaal runs 69 69
Kosten per resultaat 0.319 3.636
Totale kosten $0.039 $0.400
Invoerprijs $0.000 / 1M $0.740 / 1M
Uitvoerprijs $0.000 / 1M $2.960 / 1M
Totaal aantal invoer-tokens 298,512 87,682
Uitvoer-tokens 3,178 7,166
Redeneer-tokens 177,419 106,027
Responstijd (gem.) 7.61s 19.40s
Responstijd (max) 86.84s 209.15s
Responstijd (totaal) 175.08s 446.11s
Parameters ~100B ~700B totaal (~72B actief)
Beschikbaarheid Gesloten broncode Gesloten broncode

Model generatie-showcase

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#194 Mercury 2.5 Preview

high
Kosten
$0.001
Tijd
4.5s
Tokens
3,851 tok

#191 KAT-Coder-Pro V2.5

low
Kosten
$0.016
Tijd
47.6s
Tokens
5,182 tok

Topmodellen op score

Score vs totale kosten

Responstijd (gem.)

Score vs Responstijd (gem.)

Totaal aantal uitvoer-tokens

Score vs Totaal aantal uitvoer-tokens

Categorie-uitsplitsing

Programmeren Score Consistentie Slaagpercentage per poging Instabiele tests Correcte tests Responstijd (gem.) Invoer-tokens Uitvoer-tokens Redeneer-tokens
Mercury 2.5 Preview 6.7 7.8 55.6% 1 6.13s 7,751 485 42,569
KAT-Coder-Pro V2.5 7.8 10.0 66.7% 0 24.87s 7,893 402 24,945

Snelle vergelijking

Vergelijkingspaar wisselen