- Rang
- #222
- Total tokenuri de ieșire
- 37,748
- Timp de răspuns (mediu)
- 8.03s
- Cost total
- $1.100
Claude Sonnet 5.5 (medium) vs Beam 1.0 501B A23B (medium)
Scorul mediu este practic egal la 6.5 vs 6.6. Beam 1.0 501B A23B (medium) are costul de benchmark mai mic, $0.499 vs $1.100. Beam 1.0 501B A23B (medium) este mai rapid cu 6.27s vs 8.03s, cu rate de reușită de 40.6% vs 65.2%.
Modele comparate
- Rang
- #220
- Total tokenuri de ieșire
- 98,521
- Timp de răspuns (mediu)
- 6.27s
- Cost total
- $0.499
Model recomandat
Beam 1.0 501B A23B (medium)
Are cel mai bun scor aici (6.6) și costă de aproximativ 2.2x mai puțin decât Claude Sonnet 5.5 (medium).
Comparație detaliată
| Metrică | Claude Sonnet 5.5 Claude Sonnet 5.5 medium | Beam 1.0 501B A23B Beam 1.0 501B A23B medium |
|---|---|---|
| Scor | 6.5 | 6.6 |
| Rang | #222 | #220 |
| Fiabilitate | 10.0 | 10.0 |
| Consistență | 9.7 | 9.3 |
| Încercări | 69/69 | 69/69 |
| Teste corecte | ||
| Rată de trecere pe încercare | 40.6% | 65.2% |
| Teste instabile | 1 | 2 |
| Rulări totale | 69 | 69 |
| Cost per rezultat | 12.221 | 3.561 |
| Cost total | $1.100 | $0.499 |
| Preț de intrare | $2.000 / 1M | $1.000 / 1M |
| Preț de ieșire | $10.000 / 1M | $3.000 / 1M |
| Preț citire cache | $0.200 / 1M | $0.100 / 1M |
| Preț scriere cache | $2.500 / 1M | N/D |
| Total tokenuri de intrare | 361,183 | 202,937 |
| Tokenuri de ieșire | 26,609 | 4,328 |
| Tokenuri de raționament | 11,139 | 94,193 |
| Timp de răspuns (mediu) | 8.03s | 6.27s |
| Timp de răspuns (maxim) | 51.18s | 31.55s |
| Timp de răspuns (total) | 184.80s | 144.28s |
| Parametri | ~1T în total (~100B activi) | 501B în total (23B activi) |
| Disponibilitate | Închis | Sursă deschisă |
Prețurile de cache se aplică tokenurilor de intrare. Citirea reutilizează prompturi salvate; scrierea le stochează și poate costa în plus. Tokenurile de ieșire folosesc prețul de ieșire.
Prezentare generare modele
Hamster playing table tennis
Prompt: Create a detailed SVG illustration of a hamster playing table tennis.
#222 Claude Sonnet 5.5
medium- Cost
- $0.024
- Timp
- 17.4s
- Tokenuri
- 2,525 tok
#220 Beam 1.0 501B A23B
medium- Cost
- $0.005
- Timp
- 11.8s
- Tokenuri
- 4,267 tok
Defalcare pe categorii
| Sarcini agentice | Scor | Consistență | Rată de trecere pe încercare | Teste instabile | Teste corecte | Timp de răspuns (mediu) | Tokenuri de intrare | Tokenuri de ieșire | Tokenuri de raționament |
|---|---|---|---|---|---|---|---|---|---|
| Claude Sonnet 5.5 | 10.0 | 10.0 | 100.0% | 0 | 51.18s | 190,412 | 3,424 | 1,344 | |
| Beam 1.0 501B A23B | 3.0 | 10.0 | 0.0% | 0 | 31.55s | 172,837 | 2,588 | 9,026 |
| Trucuri anti-AI | Scor | Consistență | Rată de trecere pe încercare | Teste instabile | Teste corecte | Timp de răspuns (mediu) | Tokenuri de intrare | Tokenuri de ieșire | Tokenuri de raționament |
|---|---|---|---|---|---|---|---|---|---|
| Claude Sonnet 5.5 | 6.5 | 10.0 | 50.0% | 0 | 2.54s | 858 | 1,697 | 0 | |
| Beam 1.0 501B A23B | 10.0 | 10.0 | 100.0% | 0 | 1.62s | 1,113 | 232 | 4,706 |
| Programare | Scor | Consistență | Rată de trecere pe încercare | Teste instabile | Teste corecte | Timp de răspuns (mediu) | Tokenuri de intrare | Tokenuri de ieșire | Tokenuri de raționament |
|---|---|---|---|---|---|---|---|---|---|
| Claude Sonnet 5.5 | 3.4 | 9.7 | 0.0% | 0 | 6.07s | 10,608 | 6,767 | 0 | |
| Beam 1.0 501B A23B | 10.0 | 10.0 | 100.0% | 0 | 11.81s | 7,791 | 440 | 27,204 |
| Combinat | Scor | Consistență | Rată de trecere pe încercare | Teste instabile | Teste corecte | Timp de răspuns (mediu) | Tokenuri de intrare | Tokenuri de ieșire | Tokenuri de raționament |
|---|---|---|---|---|---|---|---|---|---|
| Claude Sonnet 5.5 | 8.5 | 10.0 | 50.0% | 0 | 23.58s | 133,232 | 7,780 | 5,241 | |
| Beam 1.0 501B A23B | 3.0 | 10.0 | 0.0% | 0 | 2.62s | 7,665 | 132 | 2,087 |
| Parsare și extragere de date | Scor | Consistență | Rată de trecere pe încercare | Teste instabile | Teste corecte | Timp de răspuns (mediu) | Tokenuri de intrare | Tokenuri de ieșire | Tokenuri de raționament |
|---|---|---|---|---|---|---|---|---|---|
| Claude Sonnet 5.5 | 6.5 | 10.0 | 50.0% | 0 | 2.56s | 10,515 | 696 | 0 | |
| Beam 1.0 501B A23B | 10.0 | 10.0 | 100.0% | 0 | 1.24s | 7,993 | 279 | 1,614 |
| Specific domeniului | Scor | Consistență | Rată de trecere pe încercare | Teste instabile | Teste corecte | Timp de răspuns (mediu) | Tokenuri de intrare | Tokenuri de ieșire | Tokenuri de raționament |
|---|---|---|---|---|---|---|---|---|---|
| Claude Sonnet 5.5 | 3.0 | 10.0 | 0.0% | 0 | 8.78s | 990 | 4,137 | 2,729 | |
| Beam 1.0 501B A23B | 2.9 | 7.2 | 11.1% | 1 | 11.66s | 1,113 | 71 | 29,077 |
| Inteligență generală | Scor | Consistență | Rată de trecere pe încercare | Teste instabile | Teste corecte | Timp de răspuns (mediu) | Tokenuri de intrare | Tokenuri de ieșire | Tokenuri de raționament |
|---|---|---|---|---|---|---|---|---|---|
| Claude Sonnet 5.5 | 5.1 | 3.4 | 33.3% | 1 | 2.27s | 714 | 324 | 0 | |
| Beam 1.0 501B A23B | 4.7 | 1.6 | 66.7% | 1 | 1.87s | 615 | 96 | 1,532 |
| Respectarea instrucțiunilor | Scor | Consistență | Rată de trecere pe încercare | Teste instabile | Teste corecte | Timp de răspuns (mediu) | Tokenuri de intrare | Tokenuri de ieșire | Tokenuri de raționament |
|---|---|---|---|---|---|---|---|---|---|
| Claude Sonnet 5.5 | 6.3 | 10.0 | 50.0% | 0 | 1.88s | 921 | 346 | 0 | |
| Beam 1.0 501B A23B | 9.8 | 10.0 | 100.0% | 0 | 1.24s | 918 | 102 | 1,834 |
| Rezolvare de puzzle-uri | Scor | Consistență | Rată de trecere pe încercare | Teste instabile | Teste corecte | Timp de răspuns (mediu) | Tokenuri de intrare | Tokenuri de ieșire | Tokenuri de raționament |
|---|---|---|---|---|---|---|---|---|---|
| Claude Sonnet 5.5 | 7.7 | 10.0 | 66.7% | 0 | 2.43s | 912 | 876 | 0 | |
| Beam 1.0 501B A23B | 10.0 | 10.0 | 100.0% | 0 | 3.91s | 1,029 | 281 | 9,130 |
| Apelare instrumente | Scor | Consistență | Rată de trecere pe încercare | Teste instabile | Teste corecte | Timp de răspuns (mediu) | Tokenuri de intrare | Tokenuri de ieșire | Tokenuri de raționament |
|---|---|---|---|---|---|---|---|---|---|
| Claude Sonnet 5.5 | 10.0 | 10.0 | 100.0% | 0 | 4.75s | 11,757 | 354 | 0 | |
| Beam 1.0 501B A23B | 3.0 | 10.0 | 0.0% | 0 | 1.95s | 1,530 | 72 | 440 |
| Cultură generală | Scor | Consistență | Rată de trecere pe încercare | Teste instabile | Teste corecte | Timp de răspuns (mediu) | Tokenuri de intrare | Tokenuri de ieșire | Tokenuri de raționament |
|---|---|---|---|---|---|---|---|---|---|
| Claude Sonnet 5.5 | 3.0 | 10.0 | 0.0% | 0 | 8.57s | 264 | 208 | 1,825 | |
| Beam 1.0 501B A23B | 3.0 | 10.0 | 0.0% | 0 | 10.13s | 333 | 35 | 7,543 |
Comparație rapidă
Schimbă perechea de comparație
KAT-Coder-Pro V2.5lowvsBeam 1.0 501B A23BmediumBeam 1.0 501B A23BmediumvsStep 3.7 FlashhighClaude Sonnet 5.5mediumvsMercury 2.5 PreviewhighClaude Sonnet 5.5mediumvsMercury 2.5highClaude Sonnet 5.5mediumvsBeam 1.0 501B A23BxhighClaude Sonnet 5.5mediumvsKAT-Coder-Pro V2.5lowClaude Sonnet 5.5mediumvsGLM 5.3lowLongCat 2.0lowvsBeam 1.0 501B A23BmediumClaude Sonnet 5.5mediumvsGLM 5.1noneClaude Sonnet 5.5mediumvsStep 3.7 FlashhighClaude Sonnet 5.5mediumvsKAT-Coder-Pro V2.5highMercury 2.5 PreviewhighvsBeam 1.0 501B A23Bmedium