Navigation
Advertise here

Seed-2.0-Code vs Mistral Small 4 (medium)

Seed-2.0-Code mène au score moyen avec 5.3 vs 5.1. Mistral Small 4 (medium) a le coût de benchmark le plus bas avec $0.097 vs $0.151. Mistral Small 4 (medium) est plus rapide avec 10.80s vs 14.67s, avec des taux de réussite de 36.4% vs 43.9%.

Benchmarks générés à partir des suites de tests AI BENCHY le: 2026-09-24

Modèles comparés

Rang
#288
Total des jetons de sortie
23,433
Temps de réponse (moy.)
14.67s
Coût total
$0.151
Rang
#297
Total des jetons de sortie
133,597
Temps de réponse (moy.)
10.80s
Coût total
$0.097
Modèle recommandé Mistral Small 4 (medium)

Son score reste proche du meilleur score ici (5.1 vs 5.3) tout en coûtant environ 1.6x moins que Seed-2.0-Code.

Comparaison détaillée

Métrique Seed-2.0-Code Seed-2.0-Code none Sortie: 2026-08-12 Mistral Small 4 Mistral Small 4 medium Sortie: 2026-03-16
Score 5.3 5.1
Rang #288 #297
Fiabilité 8.6 10.0
Cohérence 8.1 7.0
Tentatives 66/66 66/66
Tests corrects
Taux de réussite par tentative 36.4% 43.9%
Tests instables 5 8
Exécutions totales 66 66
Coût par résultat 2.503 1.923
Coût total $0.151 $0.097
Prix d'entrée $0.500 / 1M $0.150 / 1M
Prix de sortie $3.000 / 1M $0.600 / 1M
Total des jetons d'entrée 159,749 140,559
Jetons de sortie 23,433 40,268
Jetons de raisonnement 0 93,329
Temps de réponse (moy.) 14.67s 10.80s
Temps de réponse (max) 132.84s 59.15s
Temps de réponse (total) 322.71s 237.60s
Paramètres ~200B au total (~20B actifs) 119B au total (6B actifs)
Disponibilité Source fermée Open source

Génération showcase de modèles

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#288 Seed-2.0-Code

none
Coût
$0.030
Temps
140.6s
Tokens
9,924 tok

#297 Mistral Small 4

medium
Coût
$0.006
Temps
47.9s
Tokens
9,857 tok

Meilleurs modèles par score

Score vs coût total

Temps de réponse (moy.)

Score vs Temps de réponse (moy.)

Total des jetons de sortie

Score vs Total des jetons de sortie

Répartition par catégorie

Programmation Score Cohérence Taux de réussite par tentative Tests instables Tests corrects Temps de réponse (moy.) Jetons d'entrée Jetons de sortie Jetons de raisonnement
Seed-2.0-Code 3.6 9.8 0.0% 0 13.42s 7,230 505 0
Mistral Small 4 4.4 5.1 33.3% 2 39.98s 7,636 11,635 54,715

Comparaison rapide

Changer la paire de comparaison