Navigation
Advertise here

LongCat 2.0 (medium) vs Step 3.7 Flash (low)

Le score moyen est pratiquement à égalité avec 7.2 vs 7.2. Step 3.7 Flash (low) a le coût de benchmark le plus bas avec $0.449 vs $0.593. Step 3.7 Flash (low) est plus rapide avec 20.72s vs 144.88s, avec des taux de réussite de 59.4% vs 63.8%.

Benchmarks générés à partir des suites de tests AI BENCHY le: 2026-10-01

Modèles comparés

Rang
#145
Total des jetons de sortie
422,234
Temps de réponse (moy.)
144.88s
Coût total
$0.593
Rang
#147
Total des jetons de sortie
339,108
Temps de réponse (moy.)
20.72s
Coût total
$0.449
Modèle recommandé Step 3.7 Flash (low)

Il obtient le meilleur score ici (7.2) et répond environ 7.0x plus vite que LongCat 2.0 (medium).

Comparaison détaillée

Métrique LongCat 2.0 LongCat 2.0 medium Sortie: 2026-07-20 Step 3.7 Flash Step 3.7 Flash low Sortie: 2026-05-29
Score 7.2 7.2
Rang #145 #147
Fiabilité 10.0 10.0
Cohérence 9.0 7.9
Tentatives 69/69 69/69
Tests corrects
Taux de réussite par tentative 59.4% 63.8%
Tests instables 3 6
Exécutions totales 69 69
Coût par résultat 4.942 4.078
Coût total $0.593 $0.449
Prix d'entrée $0.300 / 1M $0.200 / 1M
Prix de sortie $1.200 / 1M $1.150 / 1M
Total des jetons d'entrée 287,669 292,685
Jetons de sortie 47,204 339,108
Jetons de raisonnement 375,030 0
Temps de réponse (moy.) 144.88s 20.72s
Temps de réponse (max) 939.52s 124.75s
Temps de réponse (total) 3332.19s 476.67s
Paramètres 1.6T au total (48B actifs) 198B au total (11B actifs)
Disponibilité Open source Open source

Génération showcase de modèles

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#145 LongCat 2.0

medium
Coût
$0.016
Temps
285.1s
Tokens
13,057 tok

#147 Step 3.7 Flash

low
SVG invalide
Coût
$0.004
Temps
25.3s
Tokens
3,072 tok

Meilleurs modèles par score

Score vs coût total

Temps de réponse (moy.)

Score vs Temps de réponse (moy.)

Total des jetons de sortie

Score vs Total des jetons de sortie

Répartition par catégorie

Programmation Score Cohérence Taux de réussite par tentative Tests instables Tests corrects Temps de réponse (moy.) Jetons d'entrée Jetons de sortie Jetons de raisonnement
LongCat 2.0 10.0 10.0 100.0% 0 455.00s 7,419 533 214,143
Step 3.7 Flash 8.2 7.2 88.9% 1 9.46s 7,437 18,685 0

Comparaison rapide

Changer la paire de comparaison