Navigare
AI BENCHY
Your ad here

AI BENCHY Compare

Inception: Mercury 2 vs OpenAI: GPT-5.4 Nano

Benchmark-urile au fost generate din suitele de teste AI BENCHY la: 2026-04-29

Metrică Mercury 2 Mercury 2 none Lansare: 2026-02-24 GPT-5.4 Nano GPT-5.4 Nano none Lansare: 2026-03-17
Scor 4.8 4.5
Rang #121 #128
Fiabilitate N/D N/D
Consistență 9.0 7.1
Teste corecte
Rată de trecere pe încercare 27.8% 31.5%
Teste instabile 2 7
Rulări totale 54 54
Cost per rezultat 0.165 0.448
Cost total $0.007 $0.009
Preț de intrare $0.250 / 1M $0.200 / 1M
Preț de ieșire $0.750 / 1M $1.250 / 1M
Tokenuri de ieșire 1,625 2,762
Tokenuri de raționament 0 0
Timp de răspuns (mediu) 613ms 1.40s
Timp de răspuns (maxim) 1.27s 3.84s
Timp de răspuns (total) 11.04s 25.14s

Top modele după scor

Scor vs cost total

Timp de răspuns (mediu)

Scor vs Timp de răspuns (mediu)

Total tokenuri de ieșire

Scor vs Total tokenuri de ieșire

Defalcare pe categorii

Trucuri anti-AI Scor Consistență Rată de trecere pe încercare Teste instabile Teste corecte Timp de răspuns (mediu) Tokenuri de ieșire Tokenuri de raționament
Mercury 2 3.0 10.0 0.0% 0 483ms 286 0
GPT-5.4 Nano 3.5 8.0 16.7% 1 1.18s 800 0
Programare Scor Consistență Rată de trecere pe încercare Teste instabile Teste corecte Timp de răspuns (mediu) Tokenuri de ieșire Tokenuri de raționament
Mercury 2 3.6 8.9 0.0% 0 969ms 310 0
GPT-5.4 Nano 7.1 3.7 66.7% 1 1.43s 577 0
Combinat Scor Consistență Rată de trecere pe încercare Teste instabile Teste corecte Timp de răspuns (mediu) Tokenuri de ieșire Tokenuri de raționament
Mercury 2 3.0 10.0 0.0% 0 606ms 131 0
GPT-5.4 Nano 3.0 10.0 0.0% 0 3.84s 280 0
Parsare și extragere de date Scor Consistență Rată de trecere pe încercare Teste instabile Teste corecte Timp de răspuns (mediu) Tokenuri de ieșire Tokenuri de raționament
Mercury 2 7.3 5.9 83.3% 1 667ms 180 0
GPT-5.4 Nano 6.5 10.0 50.0% 0 1.11s 219 0
Specific domeniului Scor Consistență Rată de trecere pe încercare Teste instabile Teste corecte Timp de răspuns (mediu) Tokenuri de ieșire Tokenuri de raționament
Mercury 2 5.3 7.2 44.4% 1 534ms 46 0
GPT-5.4 Nano 2.9 4.4 22.2% 2 926ms 52 0
Inteligență generală Scor Consistență Rată de trecere pe încercare Teste instabile Teste corecte Timp de răspuns (mediu) Tokenuri de ieșire Tokenuri de raționament
Mercury 2 4.8 10.0 0.0% 0 628ms 159 0
GPT-5.4 Nano 3.8 2.5 33.3% 1 1.31s 180 0
Respectarea instrucțiunilor Scor Consistență Rată de trecere pe încercare Teste instabile Teste corecte Timp de răspuns (mediu) Tokenuri de ieșire Tokenuri de raționament
Mercury 2 6.5 10.0 50.0% 0 551ms 82 0
GPT-5.4 Nano 5.0 6.8 33.3% 1 787ms 84 0
Rezolvare de puzzle-uri Scor Consistență Rată de trecere pe încercare Teste instabile Teste corecte Timp de răspuns (mediu) Tokenuri de ieșire Tokenuri de raționament
Mercury 2 3.1 10.0 0.0% 0 533ms 234 0
GPT-5.4 Nano 3.7 7.3 22.2% 1 1.29s 348 0
Apelare instrumente Scor Consistență Rată de trecere pe încercare Teste instabile Teste corecte Timp de răspuns (mediu) Tokenuri de ieșire Tokenuri de raționament
Mercury 2 10.0 10.0 100.0% 0 1.27s 197 0
GPT-5.4 Nano 10.0 10.0 100.0% 0 3.40s 222 0

Comparație rapidă

Schimbă perechea de comparație