AI BENCHY Compare

Inception: Mercury 2 vs OpenAI: GPT-5 Nano

Benchmarks gegenereerd uit AI BENCHY-testsuites op: 2026-04-16

Metriek	Mercury 2 Mercury 2 none Releasedatum: 2026-02-24	GPT-5 Nano GPT-5 Nano medium Releasedatum: 2025-08-07

Metriek	Mercury 2 Mercury 2 none Releasedatum: 2026-02-24	GPT-5 Nano GPT-5 Nano medium Releasedatum: 2025-08-07
Score	4.8	6.3
Rang	#89	#56
Consistentie	9.0	6.5
Correcte tests
Slaagpercentage per poging	27.8%	59.3%
Instabiele tests	2	8
Totaal runs	54	54
Kosten per resultaat	0.165	0.942
Totale kosten	$0.007	$0.066
Invoerprijs	$0.250 / 1M	$0.050 / 1M
Uitvoerprijs	$0.750 / 1M	$0.400 / 1M
Uitvoer-tokens	1,625	4,980
Redeneer-tokens	0	156,288
Responstijd (gem.)	613ms	44.13s
Responstijd (max)	1.27s	204.02s
Responstijd (totaal)	11.04s	485.47s

Topmodellen op score

Score vs totale kosten

Responstijd (gem.)

Score vs Responstijd (gem.)

Totaal aantal uitvoer-tokens

Score vs Totaal aantal uitvoer-tokens

Categorie-uitsplitsing

Anti-AI-trucs	Score	Consistentie	Slaagpercentage per poging	Instabiele tests	Correcte tests	Responstijd (gem.)	Uitvoer-tokens	Redeneer-tokens
Mercury 2	3.0	10.0	0.0%	0		483ms	286	0
GPT-5 Nano	6.5	7.9	58.3%	1		25.50s	1,221	21,184

Programmeren	Score	Consistentie	Slaagpercentage per poging	Instabiele tests	Correcte tests	Responstijd (gem.)	Uitvoer-tokens	Redeneer-tokens
Mercury 2	3.6	8.9	0.0%	0		969ms	310	0
GPT-5 Nano	6.7	3.5	66.7%	1		40.73s	480	12,992

Gecombineerd	Score	Consistentie	Slaagpercentage per poging	Instabiele tests	Correcte tests	Responstijd (gem.)	Uitvoer-tokens	Redeneer-tokens
Mercury 2	3.0	10.0	0.0%	0		606ms	131	0
GPT-5 Nano	10.0	10.0	100.0%	0		65.96s	578	17,984

Gegevensparsering en extractie	Score	Consistentie	Slaagpercentage per poging	Instabiele tests	Correcte tests	Responstijd (gem.)	Uitvoer-tokens	Redeneer-tokens
Mercury 2	7.3	5.9	83.3%	1		667ms	180	0
GPT-5 Nano	3.7	1.7	50.0%	2		21.42s	453	10,560

Domeinspecifiek	Score	Consistentie	Slaagpercentage per poging	Instabiele tests	Correcte tests	Responstijd (gem.)	Uitvoer-tokens	Redeneer-tokens
Mercury 2	5.3	7.2	44.4%	1		534ms	46	0
GPT-5 Nano	5.2	4.4	55.6%	2		204.02s	237	64,448

Algemene intelligentie	Score	Consistentie	Slaagpercentage per poging	Instabiele tests	Correcte tests	Responstijd (gem.)	Uitvoer-tokens	Redeneer-tokens
Mercury 2	4.8	10.0	0.0%	0		628ms	159	0
GPT-5 Nano	4.1	10.0	0.0%	0		17.51s	202	4,608

Instructies opvolgen	Score	Consistentie	Slaagpercentage per poging	Instabiele tests	Correcte tests	Responstijd (gem.)	Uitvoer-tokens	Redeneer-tokens
Mercury 2	6.5	10.0	50.0%	0		551ms	82	0
GPT-5 Nano	8.5	6.8	83.3%	1		11.90s	382	4,096

Puzzeloplossing	Score	Consistentie	Slaagpercentage per poging	Instabiele tests	Correcte tests	Responstijd (gem.)	Uitvoer-tokens	Redeneer-tokens
Mercury 2	3.1	10.0	0.0%	0		533ms	234	0
GPT-5 Nano	5.3	7.2	44.4%	1		19.81s	869	13,440

Toolaanroepen	Score	Consistentie	Slaagpercentage per poging	Instabiele tests	Correcte tests	Responstijd (gem.)	Uitvoer-tokens	Redeneer-tokens
Mercury 2	10.0	10.0	100.0%	0		1.27s	197	0
GPT-5 Nano	10.0	10.0	100.0%	0		33.30s	558	6,976

Snelle vergelijking

Vergelijkingspaar wisselen

GPT-5 NanomediumvsGLM 5V Turbonone GPT-5 NanomediumvsQwen3.5-Flashnone Mercury 2nonevsQwen3 Coder Nextmedium Gemma 4 26B A4BnoneGratis beschikbaarvsGPT-5 Nanomedium Seed-2.0-LitenonevsGPT-5 Nanomedium Gemini 2.5 FlashnonevsGPT-5 Nanomedium GPT-5 NanomediumvsQwen3.5-35B-A3Bnone DeepSeek V3.2nonevsGPT-5 Nanomedium Mercury 2nonevsGLM 4.7 Flashmedium GPT-5 NanomediumvsMiMo-V2-Omninone GPT-5 NanomediumvsMiMo-V2-Pronone GPT-5 NanomediumvsQwen3.5-27Bnone