AI BENCHY
Advertise here
#125

Mercury 2

Inception Sortie: 2026-02-24 Testé le: 2026-08-14 03:05 inception/mercury-2::medium
~100BAutreSource ferméeEstimé
(medium) (none)

Résumé

Mercury 2 obtient 7.0 sur AI BENCHY et se classe #125. Il affiche une fiabilité de 10.0, un taux de réussite de 53.0%, un coût total de $0.094 et un temps de réponse moyen de 2.95s.

Ce qui rend Mercury 2 unique : Il se distingue surtout en Suivi des instructions, où il se classe #1, tandis que Résolution d'énigmes est son point le plus faible avec #16.

Données du modèle

Date de recherche : 2026-08-12

Estimé
Paramètres
~100B
Architecture
Autre
Disponibilité
Source fermée
Licence
-

Meilleure estimation fondée sur les informations publiques ; le fournisseur n’a pas communiqué toutes les valeurs.

Score

7.0

Cohérence

8.4

Fiabilité

10.0

Total des jetons de sortie

87,554

Total des jetons d'entrée

110,515

Prix d'entrée

$0.250 / 1M

Prix de sortie

$0.750 / 1M

Tests corrects

Tests incorrects: 12

Taux de réussite par tentative: 53.0%

Tests instables

4

Les tests instables ont eu des résultats mixtes entre exécutions (au moins une réussite et un échec).

Temps de réponse (moy.)

2.95s

Temps de réponse (max): 14.63s

Temps de réponse (total): 61.89s

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#125 Mercury 2

medium
Coût
$0.002
Temps
2.1s
Tokens
1,702 tok

Historique des runs

Testé le Score Fiabilité Tests corrects Coût total Comparer
2026-08-14 03:05 Nouveau test 7.0 10.0 $0.094 Exécution actuelle
2026-07-16 23:14 Nouveau test ajouté 7.0 10.0 $0.093 Comparer
2026-06-04 14:27 Nouveau test ajouté 6.6 10.0 $0.058 Comparer
2026-05-22 00:40 Nouveau test 6.3 10.0 $0.055 Comparer
2026-04-11 01:44 Première exécution enregistrée 6.5 N/D $0.047 Comparer

Ce run a utilisé une suite de benchmark différente. Gardez ce changement de suite à l'esprit lorsque vous lisez l'historique.

Historique des prix

Données historiques de tarification pour ce modèle provenant d'OpenRouter.

Date Prix d'entrée Prix de sortie
2026-08-14 12:51 $0.250 / 1M $0.750 / 1M

Graphiques

Choisissez d'abord le premier modèle, puis cliquez sur un second modèle pour ouvrir une page côte à côte.

Total des jetons de sortie

Score vs Total des jetons de sortie

Comparaison rapide

Répartition par catégorie

Catégorie Score Cohérence Tests corrects
Astuces anti-IA 6.9 9.9
Programmation 8.2 7.7
Combiné 6.7 9.1
Analyse et extraction des données 7.3 5.9
Spécifique au domaine 2.9 4.4
Intelligence générale 4.8 10.0
Suivi des instructions 10.0 10.0
Résolution d'énigmes 5.4 10.0
Appel d'outils 10.0 10.0
Culture générale 3.0 10.0

Modèles comparés