Navigatie
Advertise here

Mercury 2.5 Preview (low) vs KAT Coder AIR V2.5 (medium)

KAT Coder AIR V2.5 (medium) leidt in gemiddelde score met 5.1 vs 5.0. Mercury 2.5 Preview (low) heeft lagere benchmarkkosten met $0.015 vs $0.048. Mercury 2.5 Preview (low) is sneller met 4.92s vs 8.32s, met slagingspercentages van 44.9% vs 43.5%.

Benchmarks gegenereerd uit AI BENCHY-testsuites op: 2026-10-01

Vergeleken modellen

Rang
#297
Totaal aantal uitvoer-tokens
36,870
Responstijd (gem.)
4.92s
Totale kosten
$0.015
Rang
#294
Totaal aantal uitvoer-tokens
66,576
Responstijd (gem.)
8.32s
Totale kosten
$0.048
Aanbevolen model Mercury 2.5 Preview (low)

De score blijft dicht bij de beste score hier (5.0 vs 5.1) en het kost ongeveer 3.3x minder dan KAT Coder AIR V2.5 (medium).

Gedetailleerde vergelijking

Metriek Mercury 2.5 Preview Mercury 2.5 Preview low Releasedatum: 2026-09-02 KAT Coder AIR V2.5 KAT Coder AIR V2.5 medium Releasedatum: 2026-07-14
Score 5.0 5.1
Rang #297 #294
Betrouwbaarheid 9.9 9.6
Consistentie 7.1 8.9
Pogingen 69/69 69/69
Correcte tests
Slaagpercentage per poging 44.9% 43.5%
Instabiele tests 8 3
Totaal runs 69 69
Kosten per resultaat 0.244 0.596
Totale kosten $0.015 $0.048
Invoerprijs $0.000 / 1M $0.000 / 1M
Uitvoerprijs $0.000 / 1M $0.000 / 1M
Totaal aantal invoer-tokens 235,438 51,369
Uitvoer-tokens 8,136 8,008
Redeneer-tokens 28,734 58,568
Responstijd (gem.) 4.92s 8.32s
Responstijd (max) 84.47s 48.19s
Responstijd (totaal) 113.24s 191.40s
Parameters ~100B ~35B totaal (~3B actief)
Beschikbaarheid Gesloten broncode Gesloten broncode

Model generatie-showcase

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#297 Mercury 2.5 Preview

low
Kosten
$0.001
Tijd
1.5s
Tokens
1,169 tok

#294 KAT Coder AIR V2.5

medium
Kosten
$0.003
Tijd
23.7s
Tokens
4,924 tok

Topmodellen op score

Score vs totale kosten

Responstijd (gem.)

Score vs Responstijd (gem.)

Totaal aantal uitvoer-tokens

Score vs Totaal aantal uitvoer-tokens

Categorie-uitsplitsing

Programmeren Score Consistentie Slaagpercentage per poging Instabiele tests Correcte tests Responstijd (gem.) Invoer-tokens Uitvoer-tokens Redeneer-tokens
Mercury 2.5 Preview 5.5 10.0 33.3% 0 972ms 7,794 695 2,263
KAT Coder AIR V2.5 3.6 7.0 22.2% 1 23.37s 7,893 5,199 29,973

Snelle vergelijking

Vergelijkingspaar wisselen