- Rang
- #191
- Total tokenuri de ieșire
- 113,193
- Timp de răspuns (mediu)
- 19.40s
- Cost total
- $0.400
KAT-Coder-Pro V2.5 (low) vs Step 3.7 Flash (high)
Scorul mediu este practic egal la 6.5 vs 6.6. KAT-Coder-Pro V2.5 (low) are costul de benchmark mai mic, $0.400 vs $1.350. KAT-Coder-Pro V2.5 (low) este mai rapid cu 19.40s vs 72.72s, cu rate de reușită de 65.2% vs 58.0%.
Modele comparate
- Rang
- #190
- Total tokenuri de ieșire
- 1,100,052
- Timp de răspuns (mediu)
- 72.72s
- Cost total
- $1.350
Model recomandat
KAT-Coder-Pro V2.5 (low)
Are cel mai bun scor aici (6.5) și costă de aproximativ 3.4x mai puțin decât Step 3.7 Flash (high).
Comparație detaliată
| Metrică | KAT-Coder-Pro V2.5 KAT-Coder-Pro V2.5 low | Step 3.7 Flash Step 3.7 Flash high |
|---|---|---|
| Scor | 6.5 | 6.6 |
| Rang | #191 | #190 |
| Fiabilitate | 10.0 | 10.0 |
| Consistență | 7.1 | 8.5 |
| Încercări | 69/69 | 69/69 |
| Teste corecte | ||
| Rată de trecere pe încercare | 65.2% | 58.0% |
| Teste instabile | 8 | 4 |
| Rulări totale | 69 | 69 |
| Cost per rezultat | 3.636 | 12.267 |
| Cost total | $0.400 | $1.350 |
| Preț de intrare | $0.740 / 1M | $0.200 / 1M |
| Preț de ieșire | $2.960 / 1M | $1.150 / 1M |
| Total tokenuri de intrare | 87,682 | 421,200 |
| Tokenuri de ieșire | 7,166 | 1,100,052 |
| Tokenuri de raționament | 106,027 | 0 |
| Timp de răspuns (mediu) | 19.40s | 72.72s |
| Timp de răspuns (maxim) | 209.15s | 364.99s |
| Timp de răspuns (total) | 446.11s | 1672.53s |
| Parametri | ~700B în total (~72B activi) | 198B în total (11B activi) |
| Disponibilitate | Închis | Sursă deschisă |
Prezentare generare modele
Hamster playing table tennis
Prompt: Create a detailed SVG illustration of a hamster playing table tennis.
#191 KAT-Coder-Pro V2.5
low- Cost
- $0.016
- Timp
- 47.6s
- Tokenuri
- 5,182 tok
#190 Step 3.7 Flash
high- Cost
- $0.007
- Timp
- 63.6s
- Tokenuri
- 6,030 tok
Top modele după scor
Scor vs cost total
Timp de răspuns (mediu)
Scor vs Timp de răspuns (mediu)
Total tokenuri de ieșire
Scor vs Total tokenuri de ieșire
Defalcare pe categorii
| Sarcini agentice | Scor | Consistență | Rată de trecere pe încercare | Teste instabile | Teste corecte | Timp de răspuns (mediu) | Tokenuri de intrare | Tokenuri de ieșire | Tokenuri de raționament |
|---|---|---|---|---|---|---|---|---|---|
| KAT-Coder-Pro V2.5 | 3.0 | 10.0 | 0.0% | 0 | 1.75s | 0 | 0 | 0 | |
| Step 3.7 Flash | 5.4 | 9.6 | 0.0% | 0 | 130.38s | 322,500 | 49,152 | 0 |
| Trucuri anti-AI | Scor | Consistență | Rată de trecere pe încercare | Teste instabile | Teste corecte | Timp de răspuns (mediu) | Tokenuri de intrare | Tokenuri de ieșire | Tokenuri de raționament |
|---|---|---|---|---|---|---|---|---|---|
| KAT-Coder-Pro V2.5 | 6.9 | 5.8 | 75.0% | 2 | 4.20s | 672 | 277 | 4,228 | |
| Step 3.7 Flash | 10.0 | 10.0 | 100.0% | 0 | 13.40s | 696 | 42,656 | 0 |
| Programare | Scor | Consistență | Rată de trecere pe încercare | Teste instabile | Teste corecte | Timp de răspuns (mediu) | Tokenuri de intrare | Tokenuri de ieșire | Tokenuri de raționament |
|---|---|---|---|---|---|---|---|---|---|
| KAT-Coder-Pro V2.5 | 7.8 | 10.0 | 66.7% | 0 | 24.87s | 7,893 | 402 | 24,945 | |
| Step 3.7 Flash | 4.0 | 6.0 | 22.2% | 1 | 206.21s | 6,057 | 327,340 | 0 |
| Combinat | Scor | Consistență | Rată de trecere pe încercare | Teste instabile | Teste corecte | Timp de răspuns (mediu) | Tokenuri de intrare | Tokenuri de ieșire | Tokenuri de raționament |
|---|---|---|---|---|---|---|---|---|---|
| KAT-Coder-Pro V2.5 | 6.4 | 5.8 | 66.7% | 1 | 111.87s | 60,055 | 5,393 | 43,732 | |
| Step 3.7 Flash | 8.7 | 6.9 | 83.3% | 1 | 41.23s | 73,938 | 49,842 | 0 |
| Parsare și extragere de date | Scor | Consistență | Rată de trecere pe încercare | Teste instabile | Teste corecte | Timp de răspuns (mediu) | Tokenuri de intrare | Tokenuri de ieșire | Tokenuri de raționament |
|---|---|---|---|---|---|---|---|---|---|
| KAT-Coder-Pro V2.5 | 10.0 | 10.0 | 100.0% | 0 | 4.19s | 7,776 | 288 | 1,917 | |
| Step 3.7 Flash | 10.0 | 10.0 | 100.0% | 0 | 14.72s | 7,368 | 23,113 | 0 |
| Specific domeniului | Scor | Consistență | Rată de trecere pe încercare | Teste instabile | Teste corecte | Timp de răspuns (mediu) | Tokenuri de intrare | Tokenuri de ieșire | Tokenuri de raționament |
|---|---|---|---|---|---|---|---|---|---|
| KAT-Coder-Pro V2.5 | 3.5 | 4.4 | 33.3% | 2 | 22.86s | 780 | 35 | 21,430 | |
| Step 3.7 Flash | 3.6 | 7.2 | 22.2% | 1 | 189.35s | 792 | 429,007 | 0 |
| Inteligență generală | Scor | Consistență | Rată de trecere pe încercare | Teste instabile | Teste corecte | Timp de răspuns (mediu) | Tokenuri de intrare | Tokenuri de ieșire | Tokenuri de raționament |
|---|---|---|---|---|---|---|---|---|---|
| KAT-Coder-Pro V2.5 | 4.1 | 2.7 | 33.3% | 1 | 2.32s | 516 | 99 | 412 | |
| Step 3.7 Flash | 5.5 | 10.0 | 0.0% | 0 | 4.17s | 510 | 2,862 | 0 |
| Respectarea instrucțiunilor | Scor | Consistență | Rată de trecere pe încercare | Teste instabile | Teste corecte | Timp de răspuns (mediu) | Tokenuri de intrare | Tokenuri de ieșire | Tokenuri de raționament |
|---|---|---|---|---|---|---|---|---|---|
| KAT-Coder-Pro V2.5 | 10.0 | 10.0 | 100.0% | 0 | 2.53s | 699 | 83 | 1,008 | |
| Step 3.7 Flash | 9.8 | 10.0 | 100.0% | 0 | 1.52s | 705 | 2,010 | 0 |
| Rezolvare de puzzle-uri | Scor | Consistență | Rată de trecere pe încercare | Teste instabile | Teste corecte | Timp de răspuns (mediu) | Tokenuri de intrare | Tokenuri de ieșire | Tokenuri de raționament |
|---|---|---|---|---|---|---|---|---|---|
| KAT-Coder-Pro V2.5 | 6.4 | 4.4 | 77.8% | 2 | 3.11s | 696 | 289 | 1,820 | |
| Step 3.7 Flash | 5.3 | 7.2 | 44.4% | 1 | 10.22s | 711 | 25,422 | 0 |
| Apelare instrumente | Scor | Consistență | Rată de trecere pe încercare | Teste instabile | Teste corecte | Timp de răspuns (mediu) | Tokenuri de intrare | Tokenuri de ieșire | Tokenuri de raționament |
|---|---|---|---|---|---|---|---|---|---|
| KAT-Coder-Pro V2.5 | 10.0 | 10.0 | 100.0% | 0 | 18.45s | 8,391 | 282 | 834 | |
| Step 3.7 Flash | 10.0 | 10.0 | 100.0% | 0 | 2.79s | 7,701 | 1,172 | 0 |
| Cultură generală | Scor | Consistență | Rată de trecere pe încercare | Teste instabile | Teste corecte | Timp de răspuns (mediu) | Tokenuri de intrare | Tokenuri de ieșire | Tokenuri de raționament |
|---|---|---|---|---|---|---|---|---|---|
| KAT-Coder-Pro V2.5 | 3.0 | 10.0 | 0.0% | 0 | 17.06s | 204 | 18 | 5,701 | |
| Step 3.7 Flash | 3.0 | 10.0 | 0.0% | 0 | 149.34s | 222 | 147,476 | 0 |
Comparație rapidă
Schimbă perechea de comparație
Mercury 2mediumvsStep 3.7 FlashhighMercury 2mediumvsKAT-Coder-Pro V2.5lowLongCat 2.0lowvsStep 3.7 FlashhighClaude Sonnet 5.5mediumvsKAT-Coder-Pro V2.5lowQwen3.7 FlashmediumvsStep 3.7 FlashhighKAT-Coder-Pro V2.5lowvsQwen3.6 35B A3BmediumClaude Sonnet 5.5mediumvsStep 3.7 FlashhighMercury 2.5 PreviewhighvsKAT-Coder-Pro V2.5lowKAT-Coder-Pro V2.5lowvsQwen3.7 FlashmediumQwen3.6 35B A3BmediumvsStep 3.7 FlashhighStep 3.7 FlashhighvsGLM 5.2noneMercury 2.5highvsKAT-Coder-Pro V2.5low