Navigation
AI BENCHY
Advertise here

AI BENCHY Compare

Anthropic: Claude Sonnet 4.6 vs Nemotron 3 Ultra 550b A55b

Résumé

Comparaison benchmark Claude Sonnet 4.6 vs Nemotron 3 Ultra 550b A55b : Nemotron 3 Ultra 550b A55b mène au score moyen avec 8.1 vs 7.8. Nemotron 3 Ultra 550b A55b a le coût de benchmark le plus bas avec $0.158 vs $1.418. Nemotron 3 Ultra 550b A55b est plus rapide avec 15.05s vs 17.06s, avec des taux de réussite de 65.1% vs 69.8%.

Modèle recommandé: Nemotron 3 Ultra 550b A55b - Il obtient le meilleur score ici (8.1) tout en coûtant environ 9.0x moins que Claude Sonnet 4.6.

Benchmarks générés à partir des suites de tests AI BENCHY le: 2026-07-02

Métrique Claude Sonnet 4.6 Claude Sonnet 4.6 medium Sortie: 2026-02-17 Nemotron 3 Ultra 550b A55b Nemotron 3 Ultra 550b A55b medium Sortie: 2026-06-04 Disponible gratuitement
Score 7.8 8.1
Rang #32 #26
Fiabilité 10.0 9.7
Cohérence 9.1 8.8
Tests corrects
Taux de réussite par tentative 65.1% 69.8%
Tests instables 2 3
Exécutions totales 63 63
Coût par résultat 10.904 0.000
Coût total $1.418 $0.158
Prix d'entrée $3.000 / 1M $0.500 / 1M
Prix de sortie $15.000 / 1M $2.200 / 1M
Total des jetons d'entrée 49,112 46,813
Jetons de sortie 54,703 18,002
Jetons de raisonnement 29,970 53,091
Temps de réponse (moy.) 17.06s 15.05s
Temps de réponse (max) 46.35s 43.93s
Temps de réponse (total) 221.83s 316.09s

Génération showcase

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#32 Claude Sonnet 4.6

medium
SVG invalide
Coût
$0.000
Temps
300.0s
Tokens
0 tok

#26 Nemotron 3 Ultra 550b A55b

medium
SVG invalide
Coût
$0.000
Temps
300.0s
Tokens
0 tok

Meilleurs modèles par score

Score vs coût total

Temps de réponse (moy.)

Score vs Temps de réponse (moy.)

Total des jetons de sortie

Score vs Total des jetons de sortie

Répartition par catégorie

Astuces anti-IA Score Cohérence Taux de réussite par tentative Tests instables Tests corrects Temps de réponse (moy.) Jetons d'entrée Jetons de sortie Jetons de raisonnement
Claude Sonnet 4.6 6.5 10.0 50.0% 0 2.98s 789 1,046 1,093
Nemotron 3 Ultra 550b A55b 10.0 10.0 100.0% 0 8.62s 780 835 1,485
Programmation Score Cohérence Taux de réussite par tentative Tests instables Tests corrects Temps de réponse (moy.) Jetons d'entrée Jetons de sortie Jetons de raisonnement
Claude Sonnet 4.6 5.7 6.6 44.4% 1 33.29s 6,995 16,089 3,686
Nemotron 3 Ultra 550b A55b 8.4 7.4 88.9% 1 26.53s 7,686 2,854 17,725
Combiné Score Cohérence Taux de réussite par tentative Tests instables Tests corrects Temps de réponse (moy.) Jetons d'entrée Jetons de sortie Jetons de raisonnement
Claude Sonnet 4.6 10.0 10.0 100.0% 0 46.35s 18,351 5,871 3,962
Nemotron 3 Ultra 550b A55b 9.8 10.0 100.0% 0 43.93s 17,574 1,040 3,590
Analyse et extraction des données Score Cohérence Taux de réussite par tentative Tests instables Tests corrects Temps de réponse (moy.) Jetons d'entrée Jetons de sortie Jetons de raisonnement
Claude Sonnet 4.6 10.0 10.0 100.0% 0 13.90s 8,676 649 742
Nemotron 3 Ultra 550b A55b 10.0 10.0 100.0% 0 5.68s 7,989 473 1,285
Spécifique au domaine Score Cohérence Taux de réussite par tentative Tests instables Tests corrects Temps de réponse (moy.) Jetons d'entrée Jetons de sortie Jetons de raisonnement
Claude Sonnet 4.6 2.9 7.2 11.1% 1 0ms 471 25,790 16,919
Nemotron 3 Ultra 550b A55b 3.5 4.4 33.3% 2 24.90s 858 11,169 16,249
Intelligence générale Score Cohérence Taux de réussite par tentative Tests instables Tests corrects Temps de réponse (moy.) Jetons d'entrée Jetons de sortie Jetons de raisonnement
Claude Sonnet 4.6 10.0 10.0 100.0% 0 4.94s 564 256 433
Nemotron 3 Ultra 550b A55b 3.7 9.5 0.0% 0 2.52s 360 70 235
Suivi des instructions Score Cohérence Taux de réussite par tentative Tests instables Tests corrects Temps de réponse (moy.) Jetons d'entrée Jetons de sortie Jetons de raisonnement
Claude Sonnet 4.6 10.0 10.0 100.0% 0 2.61s 792 318 552
Nemotron 3 Ultra 550b A55b 9.8 10.0 100.0% 0 6.35s 765 182 1,243
Résolution d'énigmes Score Cohérence Taux de réussite par tentative Tests instables Tests corrects Temps de réponse (moy.) Jetons d'entrée Jetons de sortie Jetons de raisonnement
Claude Sonnet 4.6 10.0 10.0 100.0% 0 5.31s 816 592 646
Nemotron 3 Ultra 550b A55b 5.5 9.9 33.3% 0 3.54s 792 771 2,055
Appel d'outils Score Cohérence Taux de réussite par tentative Tests instables Tests corrects Temps de réponse (moy.) Jetons d'entrée Jetons de sortie Jetons de raisonnement
Claude Sonnet 4.6 10.0 10.0 100.0% 0 7.48s 11,454 655 351
Nemotron 3 Ultra 550b A55b 10.0 10.0 100.0% 0 7.72s 9,781 304 984
Culture générale Score Cohérence Taux de réussite par tentative Tests instables Tests corrects Temps de réponse (moy.) Jetons d'entrée Jetons de sortie Jetons de raisonnement
Claude Sonnet 4.6 3.0 10.0 0.0% 0 30.09s 204 3,437 1,586
Nemotron 3 Ultra 550b A55b 3.0 10.0 0.0% 0 38.47s 228 304 8,240

Comparaison rapide

Changer la paire de comparaison