- Rang
- #297
- Total tokenuri de ieșire
- 66,576
- Timp de răspuns (mediu)
- 8.32s
- Cost total
- $0.048
KAT Coder AIR V2.5 (medium) vs GPT-4o-mini
KAT Coder AIR V2.5 (medium) conduce la scorul mediu cu 5.1 vs 5.0. GPT-4o-mini are costul de benchmark mai mic, $0.024 vs $0.048. GPT-4o-mini este mai rapid cu 4.16s vs 8.32s, cu rate de reușită de 43.5% vs 21.7%.
Modele comparate
- Rang
- #304
- Total tokenuri de ieșire
- 3,627
- Timp de răspuns (mediu)
- 4.16s
- Cost total
- $0.024
Model recomandat
GPT-4o-mini
Scorul rămâne aproape de cel mai bun scor de aici (5.0 vs 5.1) și costă de aproximativ 2.0x mai puțin decât KAT Coder AIR V2.5 (medium).
Comparație detaliată
| Metrică | KAT Coder AIR V2.5 KAT Coder AIR V2.5 medium | GPT-4o-mini GPT-4o-mini none |
|---|---|---|
| Scor | 5.1 | 5.0 |
| Rang | #297 | #304 |
| Fiabilitate | 9.6 | 10.0 |
| Consistență | 8.9 | 9.9 |
| Încercări | 69/69 | 69/69 |
| Teste corecte | ||
| Rată de trecere pe încercare | 43.5% | 21.7% |
| Teste instabile | 3 | 0 |
| Rulări totale | 69 | 69 |
| Cost per rezultat | 0.596 | 0.480 |
| Cost total | $0.048 | $0.024 |
| Preț de intrare | $0.150 / 1M | $0.150 / 1M |
| Preț de ieșire | $0.600 / 1M | $0.600 / 1M |
| Preț citire cache | N/D | $0.075 / 1M |
| Preț scriere cache | N/D | N/D |
| Total tokenuri de intrare | 51,369 | 145,180 |
| Tokenuri de ieșire | 8,008 | 3,627 |
| Tokenuri de raționament | 58,568 | 0 |
| Timp de răspuns (mediu) | 8.32s | 4.16s |
| Timp de răspuns (maxim) | 48.19s | 39.99s |
| Timp de răspuns (total) | 191.40s | 70.70s |
| Parametri | ~35B în total (~3B activi) | ~8B |
| Disponibilitate | Închis | Închis |
Prețurile de cache se aplică tokenurilor de intrare. Citirea reutilizează prompturi salvate; scrierea le stochează și poate costa în plus. Tokenurile de ieșire folosesc prețul de ieșire.
Prezentare generare modele
Hamster playing table tennis
Prompt: Create a detailed SVG illustration of a hamster playing table tennis.
#297 KAT Coder AIR V2.5
medium- Cost
- $0.003
- Timp
- 23.7s
- Tokenuri
- 4,924 tok
#304 GPT-4o-mini
none- Cost
- $0.001
- Timp
- 6.6s
- Tokenuri
- 742 tok
Top modele după scor
Scor vs cost total
Timp de răspuns (mediu)
Scor vs Timp de răspuns (mediu)
Total tokenuri de ieșire
Scor vs Total tokenuri de ieșire
Defalcare pe categorii
| Sarcini agentice | Scor | Consistență | Rată de trecere pe încercare | Teste instabile | Teste corecte | Timp de răspuns (mediu) | Tokenuri de intrare | Tokenuri de ieșire | Tokenuri de raționament |
|---|---|---|---|---|---|---|---|---|---|
| KAT Coder AIR V2.5 | 3.0 | 10.0 | 0.0% | 0 | 1.05s | 0 | 0 | 0 | |
| GPT-4o-mini | 5.0 | 10.0 | 0.0% | 0 | 39.99s | 92,035 | 714 | 0 |
| Trucuri anti-AI | Scor | Consistență | Rată de trecere pe încercare | Teste instabile | Teste corecte | Timp de răspuns (mediu) | Tokenuri de intrare | Tokenuri de ieșire | Tokenuri de raționament |
|---|---|---|---|---|---|---|---|---|---|
| KAT Coder AIR V2.5 | 8.7 | 8.0 | 91.7% | 1 | 3.79s | 672 | 549 | 4,194 | |
| GPT-4o-mini | 4.8 | 10.0 | 25.0% | 0 | 1.34s | 618 | 186 | 0 |
| Programare | Scor | Consistență | Rată de trecere pe încercare | Teste instabile | Teste corecte | Timp de răspuns (mediu) | Tokenuri de intrare | Tokenuri de ieșire | Tokenuri de raționament |
|---|---|---|---|---|---|---|---|---|---|
| KAT Coder AIR V2.5 | 3.6 | 7.0 | 22.2% | 1 | 23.37s | 7,893 | 5,199 | 29,973 | |
| GPT-4o-mini | 3.2 | 9.6 | 0.0% | 0 | 1.63s | 7,314 | 367 | 0 |
| Combinat | Scor | Consistență | Rată de trecere pe încercare | Teste instabile | Teste corecte | Timp de răspuns (mediu) | Tokenuri de intrare | Tokenuri de ieșire | Tokenuri de raționament |
|---|---|---|---|---|---|---|---|---|---|
| KAT Coder AIR V2.5 | 6.5 | 10.0 | 50.0% | 0 | 19.56s | 23,854 | 435 | 6,811 | |
| GPT-4o-mini | 3.0 | 10.0 | 0.0% | 0 | 6.32s | 29,916 | 1,497 | 0 |
| Parsare și extragere de date | Scor | Consistență | Rată de trecere pe încercare | Teste instabile | Teste corecte | Timp de răspuns (mediu) | Tokenuri de intrare | Tokenuri de ieșire | Tokenuri de raționament |
|---|---|---|---|---|---|---|---|---|---|
| KAT Coder AIR V2.5 | 6.5 | 10.0 | 50.0% | 0 | 3.65s | 7,776 | 268 | 1,881 | |
| GPT-4o-mini | 10.0 | 10.0 | 100.0% | 0 | 1.27s | 7,161 | 183 | 0 |
| Specific domeniului | Scor | Consistență | Rată de trecere pe încercare | Teste instabile | Teste corecte | Timp de răspuns (mediu) | Tokenuri de intrare | Tokenuri de ieșire | Tokenuri de raționament |
|---|---|---|---|---|---|---|---|---|---|
| KAT Coder AIR V2.5 | 3.0 | 10.0 | 0.0% | 0 | 6.58s | 668 | 673 | 4,670 | |
| GPT-4o-mini | 3.0 | 10.0 | 0.0% | 0 | 743ms | 741 | 17 | 0 |
| Inteligență generală | Scor | Consistență | Rată de trecere pe încercare | Teste instabile | Teste corecte | Timp de răspuns (mediu) | Tokenuri de intrare | Tokenuri de ieșire | Tokenuri de raționament |
|---|---|---|---|---|---|---|---|---|---|
| KAT Coder AIR V2.5 | 5.0 | 10.0 | 0.0% | 0 | 9.81s | 516 | 189 | 557 | |
| GPT-4o-mini | 4.0 | 10.0 | 0.0% | 0 | 909ms | 480 | 66 | 0 |
| Respectarea instrucțiunilor | Scor | Consistență | Rată de trecere pe încercare | Teste instabile | Teste corecte | Timp de răspuns (mediu) | Tokenuri de intrare | Tokenuri de ieșire | Tokenuri de raționament |
|---|---|---|---|---|---|---|---|---|---|
| KAT Coder AIR V2.5 | 10.0 | 10.0 | 100.0% | 0 | 1.50s | 699 | 93 | 730 | |
| GPT-4o-mini | 6.3 | 10.0 | 50.0% | 0 | 1.11s | 666 | 69 | 0 |
| Rezolvare de puzzle-uri | Scor | Consistență | Rată de trecere pe încercare | Teste instabile | Teste corecte | Timp de răspuns (mediu) | Tokenuri de intrare | Tokenuri de ieșire | Tokenuri de raționament |
|---|---|---|---|---|---|---|---|---|---|
| KAT Coder AIR V2.5 | 3.6 | 7.2 | 22.2% | 1 | 1.87s | 696 | 265 | 1,184 | |
| GPT-4o-mini | 3.5 | 10.0 | 0.0% | 0 | 1.21s | 651 | 308 | 0 |
| Apelare instrumente | Scor | Consistență | Rată de trecere pe încercare | Teste instabile | Teste corecte | Timp de răspuns (mediu) | Tokenuri de intrare | Tokenuri de ieșire | Tokenuri de raționament |
|---|---|---|---|---|---|---|---|---|---|
| KAT Coder AIR V2.5 | 10.0 | 10.0 | 100.0% | 0 | 4.77s | 8,391 | 317 | 906 | |
| GPT-4o-mini | 10.0 | 10.0 | 100.0% | 0 | 2.51s | 5,400 | 205 | 0 |
| Cultură generală | Scor | Consistență | Rată de trecere pe încercare | Teste instabile | Teste corecte | Timp de răspuns (mediu) | Tokenuri de intrare | Tokenuri de ieșire | Tokenuri de raționament |
|---|---|---|---|---|---|---|---|---|---|
| KAT Coder AIR V2.5 | 3.0 | 10.0 | 0.0% | 0 | 15.74s | 204 | 20 | 7,662 | |
| GPT-4o-mini | 3.0 | 10.0 | 0.0% | 0 | 794ms | 198 | 15 | 0 |
Comparație rapidă
Schimbă perechea de comparație
Mercury 2.5lowvsKAT Coder AIR V2.5mediumKAT Coder AIR V2.5lowvsGPT-4o-mininoneKAT Coder AIR V2.5mediumvsMiMo-V2.5-PrononeMiniMax M2.7mediumvsGPT-4o-mininoneKAT Coder AIR V2.5mediumvsMistral Small 4noneApodex 1.1 MininoneDisponibil gratuitvsKAT Coder AIR V2.5mediumMercury 2.5 PreviewlowvsGPT-4o-mininoneGPT-4o-mininonevsLaguna S 2.1highDisponibil gratuitGPT-4o-mininonevsLaguna S 2.1mediumDisponibil gratuitKAT Coder AIR V2.5mediumvsNemotron 3.5 LightninghighDisponibil gratuitMercury 2.5 PreviewlowvsKAT Coder AIR V2.5mediumLing 3.0 FlashnonevsKAT Coder AIR V2.5medium