AI BENCHY Compare

Anthropic: Claude Sonnet 4.6 vs ByteDance Seed: Seed-2.0-Mini

Résumé

Seed-2.0-Mini (medium) mène au score moyen avec 7.4 vs 7.3. Seed-2.0-Mini (medium) a le coût de benchmark le plus bas avec $0.044 vs $0.316. Claude Sonnet 4.6 est plus rapide avec 5.04s vs 80.22s, avec des taux de réussite de 55.6% vs 57.1%.

Modèle recommandéClaude Sonnet 4.6Son score reste proche du meilleur score ici (7.3 vs 7.4) et il répond environ 15.9x plus vite que Seed-2.0-Mini (medium).

Benchmarks générés à partir des suites de tests AI BENCHY le: 2026-07-14

Métrique	Claude Sonnet 4.6 Claude Sonnet 4.6 none Sortie: 2026-02-17	Seed-2.0-Mini Seed-2.0-Mini medium Sortie: 2026-02-14

Métrique	Claude Sonnet 4.6 Claude Sonnet 4.6 none Sortie: 2026-02-17	Seed-2.0-Mini Seed-2.0-Mini medium Sortie: 2026-02-14
Score	7.3	7.4
Rang	#71	#66
Fiabilité	10.0	6.7
Cohérence	9.7	9.3
Tests corrects
Taux de réussite par tentative	55.6%	57.1%
Tests instables	1	2
Exécutions totales	63	63
Coût par résultat	2.870	0.397
Coût total	$0.316	$0.044
Prix d'entrée	$3.000 / 1M	$0.100 / 1M
Prix de sortie	$15.000 / 1M	$0.400 / 1M
Total des jetons d'entrée	57,886	41,904
Jetons de sortie	9,465	2,555
Jetons de raisonnement	0	95,974
Temps de réponse (moy.)	5.04s	80.22s
Temps de réponse (max)	23.84s	262.83s
Temps de réponse (total)	70.60s	1363.72s

Génération showcase

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#71 Claude Sonnet 4.6

none

Coût: $0.038
Temps: 27.3s
Tokens: 2,598 tok

#66 Seed-2.0-Mini

medium

Coût: $0.002
Temps: 161.7s
Tokens: 4,379 tok

Meilleurs modèles par score

Score vs coût total

Temps de réponse (moy.)

Score vs Temps de réponse (moy.)

Total des jetons de sortie

Score vs Total des jetons de sortie

Répartition par catégorie

Catégorie:

Astuces anti-IA	Score	Cohérence	Taux de réussite par tentative	Tests instables	Tests corrects	Temps de réponse (moy.)	Jetons d'entrée	Jetons de sortie	Jetons de raisonnement
Claude Sonnet 4.6	4.8	10.0	25.0%	0		2.94s	636	1,214	0
Seed-2.0-Mini	6.6	10.0	50.0%	0		74.75s	791	360	9,520

Programmation	Score	Cohérence	Taux de réussite par tentative	Tests instables	Tests corrects	Temps de réponse (moy.)	Jetons d'entrée	Jetons de sortie	Jetons de raisonnement
Claude Sonnet 4.6	5.5	10.0	33.3%	0		5.19s	8,522	2,127	0
Seed-2.0-Mini	5.5	9.8	33.3%	0		220.48s	3,823	464	34,964

Combiné	Score	Cohérence	Taux de réussite par tentative	Tests instables	Tests corrects	Temps de réponse (moy.)	Jetons d'entrée	Jetons de sortie	Jetons de raisonnement
Claude Sonnet 4.6	9.5	10.0	100.0%	0		23.84s	26,024	3,766	0
Seed-2.0-Mini	10.0	10.0	100.0%	0		262.83s	16,533	404	29,806

Analyse et extraction des données	Score	Cohérence	Taux de réussite par tentative	Tests instables	Tests corrects	Temps de réponse (moy.)	Jetons d'entrée	Jetons de sortie	Jetons de raisonnement
Claude Sonnet 4.6	10.0	10.0	100.0%	0		3.43s	8,574	252	0
Seed-2.0-Mini	10.0	10.0	100.0%	0		24.27s	8,568	246	2,743

Spécifique au domaine	Score	Cohérence	Taux de réussite par tentative	Tests instables	Tests corrects	Temps de réponse (moy.)	Jetons d'entrée	Jetons de sortie	Jetons de raisonnement
Claude Sonnet 4.6	7.7	10.0	66.7%	0		3.54s	759	413	0
Seed-2.0-Mini	3.0	10.0	0.0%	0		0ms	0	0	0

Intelligence générale	Score	Cohérence	Taux de réussite par tentative	Tests instables	Tests corrects	Temps de réponse (moy.)	Jetons d'entrée	Jetons de sortie	Jetons de raisonnement
Claude Sonnet 4.6	6.1	3.1	66.7%	1		2.56s	513	192	0
Seed-2.0-Mini	5.1	3.4	33.3%	1		36.65s	585	213	4,210

Suivi des instructions	Score	Cohérence	Taux de réussite par tentative	Tests instables	Tests corrects	Temps de réponse (moy.)	Jetons d'entrée	Jetons de sortie	Jetons de raisonnement
Claude Sonnet 4.6	6.5	10.0	50.0%	0		1.96s	690	90	0
Seed-2.0-Mini	10.0	10.0	100.0%	0		17.47s	840	69	2,050

Résolution d'énigmes	Score	Cohérence	Taux de réussite par tentative	Tests instables	Tests corrects	Temps de réponse (moy.)	Jetons d'entrée	Jetons de sortie	Jetons de raisonnement
Claude Sonnet 4.6	7.7	10.0	66.7%	0		2.53s	663	533	0
Seed-2.0-Mini	8.2	7.2	88.9%	1		31.79s	903	527	5,667

Appel d'outils	Score	Cohérence	Taux de réussite par tentative	Tests instables	Tests corrects	Temps de réponse (moy.)	Jetons d'entrée	Jetons de sortie	Jetons de raisonnement
Claude Sonnet 4.6	10.0	10.0	100.0%	0		4.11s	11,301	447	0
Seed-2.0-Mini	10.0	10.0	100.0%	0		88.68s	9,585	222	5,235

Culture générale	Score	Cohérence	Taux de réussite par tentative	Tests instables	Tests corrects	Temps de réponse (moy.)	Jetons d'entrée	Jetons de sortie	Jetons de raisonnement
Claude Sonnet 4.6	3.0	10.0	0.0%	0		4.67s	204	431	0
Seed-2.0-Mini	3.0	10.0	0.0%	0		56.76s	276	50	1,779

Comparaison rapide

Changer la paire de comparaison