- Rang
- #232
- Total tokenuri de ieșire
- 760,441
- Timp de răspuns (mediu)
- 70.11s
- Cost total
- $0.195
Nemotron 3.5 Lightning (medium) vs GPT-4o-mini
Nemotron 3.5 Lightning (medium) conduce la scorul mediu cu 5.1 vs 5.0. GPT-4o-mini are costul de benchmark mai mic, $0.010 vs $0.195. GPT-4o-mini este mai rapid cu 1.92s vs 70.11s, cu rate de reușită de 48.5% vs 22.7%.
- Rang
- #243
- Total tokenuri de ieșire
- 2,913
- Timp de răspuns (mediu)
- 1.92s
- Cost total
- $0.010
Model recomandat
GPT-4o-mini
Scorul rămâne aproape de cel mai bun scor de aici (5.0 vs 5.1) și costă de aproximativ 20.0x mai puțin decât Nemotron 3.5 Lightning (medium).
Comparație detaliată
| Metrică | Nemotron 3.5 Lightning Nemotron 3.5 Lightning medium Disponibil gratuit | GPT-4o-mini GPT-4o-mini none |
|---|---|---|
| Scor | 5.1 | 5.0 |
| Rang | #232 | #243 |
| Fiabilitate | 9.9 | 10.0 |
| Consistență | 6.0 | 9.9 |
| Încercări | 66/66 | 66/66 |
| Teste corecte | ||
| Rată de trecere pe încercare | 48.5% | 22.7% |
| Teste instabile | 11 | 0 |
| Rulări totale | 66 | 66 |
| Cost per rezultat | 0.000 | 0.195 |
| Cost total | $0.195 | $0.010 |
| Preț de intrare | $0.100 / 1M | $0.150 / 1M |
| Preț de ieșire | $0.250 / 1M | $0.600 / 1M |
| Total tokenuri de intrare | 126,330 | 53,145 |
| Tokenuri de ieșire | 165,702 | 2,913 |
| Tokenuri de raționament | 594,739 | 0 |
| Timp de răspuns (mediu) | 70.11s | 1.92s |
| Timp de răspuns (maxim) | 437.11s | 7.58s |
| Timp de răspuns (total) | 1542.52s | 30.71s |
| Parametri | 30B în total (3B activi) | ~8B |
| Disponibilitate | Ponderi disponibile | Închis |
Prezentare generare modele
Hamster playing table tennis
Prompt: Create a detailed SVG illustration of a hamster playing table tennis.
#232 Nemotron 3.5 Lightning
medium- Cost
- $0.000
- Timp
- 130.5s
- Tokenuri
- 6,750 tok
#243 GPT-4o-mini
none- Cost
- $0.001
- Timp
- 6.6s
- Tokenuri
- 742 tok
Top modele după scor
Scor vs cost total
Timp de răspuns (mediu)
Scor vs Timp de răspuns (mediu)
Total tokenuri de ieșire
Scor vs Total tokenuri de ieșire
Defalcare pe categorii
| Trucuri anti-AI | Scor | Consistență | Rată de trecere pe încercare | Teste instabile | Teste corecte | Timp de răspuns (mediu) | Tokenuri de intrare | Tokenuri de ieșire | Tokenuri de raționament |
|---|---|---|---|---|---|---|---|---|---|
| Nemotron 3.5 Lightning | 6.9 | 7.9 | 66.7% | 1 | 12.34s | 696 | 6,904 | 20,862 | |
| GPT-4o-mini | 4.8 | 10.0 | 25.0% | 0 | 1.34s | 618 | 186 | 0 |
| Programare | Scor | Consistență | Rată de trecere pe încercare | Teste instabile | Teste corecte | Timp de răspuns (mediu) | Tokenuri de intrare | Tokenuri de ieșire | Tokenuri de raționament |
|---|---|---|---|---|---|---|---|---|---|
| Nemotron 3.5 Lightning | 4.4 | 5.1 | 33.3% | 2 | 285.47s | 7,623 | 78,065 | 297,359 | |
| GPT-4o-mini | 3.2 | 9.6 | 0.0% | 0 | 1.63s | 7,314 | 367 | 0 |
| Combinat | Scor | Consistență | Rată de trecere pe încercare | Teste instabile | Teste corecte | Timp de răspuns (mediu) | Tokenuri de intrare | Tokenuri de ieșire | Tokenuri de raționament |
|---|---|---|---|---|---|---|---|---|---|
| Nemotron 3.5 Lightning | 6.2 | 5.8 | 66.7% | 1 | 136.91s | 98,571 | 15,769 | 112,376 | |
| GPT-4o-mini | 3.0 | 10.0 | 0.0% | 0 | 6.32s | 29,916 | 1,497 | 0 |
| Parsare și extragere de date | Scor | Consistență | Rată de trecere pe încercare | Teste instabile | Teste corecte | Timp de răspuns (mediu) | Tokenuri de intrare | Tokenuri de ieșire | Tokenuri de raționament |
|---|---|---|---|---|---|---|---|---|---|
| Nemotron 3.5 Lightning | 3.7 | 1.7 | 50.0% | 2 | 23.24s | 7,944 | 4,195 | 30,097 | |
| GPT-4o-mini | 10.0 | 10.0 | 100.0% | 0 | 1.27s | 7,161 | 183 | 0 |
| Specific domeniului | Scor | Consistență | Rată de trecere pe încercare | Teste instabile | Teste corecte | Timp de răspuns (mediu) | Tokenuri de intrare | Tokenuri de ieșire | Tokenuri de raționament |
|---|---|---|---|---|---|---|---|---|---|
| Nemotron 3.5 Lightning | 2.9 | 4.4 | 22.2% | 2 | 74.73s | 798 | 54,657 | 91,174 | |
| GPT-4o-mini | 3.0 | 10.0 | 0.0% | 0 | 743ms | 741 | 17 | 0 |
| Inteligență generală | Scor | Consistență | Rată de trecere pe încercare | Teste instabile | Teste corecte | Timp de răspuns (mediu) | Tokenuri de intrare | Tokenuri de ieșire | Tokenuri de raționament |
|---|---|---|---|---|---|---|---|---|---|
| Nemotron 3.5 Lightning | 5.5 | 10.0 | 0.0% | 0 | 4.36s | 516 | 3,127 | 3,157 | |
| GPT-4o-mini | 4.0 | 10.0 | 0.0% | 0 | 909ms | 480 | 66 | 0 |
| Respectarea instrucțiunilor | Scor | Consistență | Rată de trecere pe încercare | Teste instabile | Teste corecte | Timp de răspuns (mediu) | Tokenuri de intrare | Tokenuri de ieșire | Tokenuri de raționament |
|---|---|---|---|---|---|---|---|---|---|
| Nemotron 3.5 Lightning | 8.5 | 6.8 | 83.3% | 1 | 3.75s | 723 | 531 | 4,404 | |
| GPT-4o-mini | 6.3 | 10.0 | 50.0% | 0 | 1.11s | 666 | 69 | 0 |
| Rezolvare de puzzle-uri | Scor | Consistență | Rată de trecere pe încercare | Teste instabile | Teste corecte | Timp de răspuns (mediu) | Tokenuri de intrare | Tokenuri de ieșire | Tokenuri de raționament |
|---|---|---|---|---|---|---|---|---|---|
| Nemotron 3.5 Lightning | 4.2 | 4.4 | 44.5% | 2 | 10.49s | 726 | 1,170 | 18,195 | |
| GPT-4o-mini | 3.5 | 10.0 | 0.0% | 0 | 1.21s | 651 | 308 | 0 |
| Apelare instrumente | Scor | Consistență | Rată de trecere pe încercare | Teste instabile | Teste corecte | Timp de răspuns (mediu) | Tokenuri de intrare | Tokenuri de ieșire | Tokenuri de raționament |
|---|---|---|---|---|---|---|---|---|---|
| Nemotron 3.5 Lightning | 10.0 | 10.0 | 100.0% | 0 | 4.92s | 8,526 | 154 | 2,518 | |
| GPT-4o-mini | 10.0 | 10.0 | 100.0% | 0 | 2.51s | 5,400 | 205 | 0 |
| Cultură generală | Scor | Consistență | Rată de trecere pe încercare | Teste instabile | Teste corecte | Timp de răspuns (mediu) | Tokenuri de intrare | Tokenuri de ieșire | Tokenuri de raționament |
|---|---|---|---|---|---|---|---|---|---|
| Nemotron 3.5 Lightning | 3.0 | 10.0 | 0.0% | 0 | 44.02s | 207 | 1,130 | 14,597 | |
| GPT-4o-mini | 3.0 | 10.0 | 0.0% | 0 | 794ms | 198 | 15 | 0 |
Comparație rapidă
Schimbă perechea de comparație
Mistral Small 4nonevsNemotron 3.5 LightningmediumDisponibil gratuitNemotron 3.5 LightningmediumDisponibil gratuitvsQwen3 Coder NextnoneGPT-4o-mininonevsLaguna S 2.1lowDisponibil gratuitNemotron 3.5 LightningmediumDisponibil gratuitvsMiMo-V2.5noneNemotron 3.5 LightningmediumDisponibil gratuitvsQwen3.5-9BnoneNemotron 3.5 LightningmediumDisponibil gratuitvsInklingnoneDots 3 Note PreviewnoneDisponibil gratuitvsNemotron 3.5 LightningmediumDisponibil gratuitNorth Mini CodenoneDisponibil gratuitvsNemotron 3.5 LightningmediumDisponibil gratuitMiniMax M2.7mediumvsGPT-4o-mininoneNemotron 3.5 LightningmediumDisponibil gratuitvsQwen3.6 35B A3BnoneNemotron 3.5 LightninglowDisponibil gratuitvsGPT-4o-mininoneLing-2.6-1TnonevsNemotron 3.5 LightningmediumDisponibil gratuit