#139 MiMo-V2.5
none- Custo
- $0.007
- Tempo
- 267.4s
- Tokens
- 25,283 tok
Resumo
MiMo-V2.5 marca 4.8 no AI BENCHY e fica em #139. Tem fiabilidade 10.0, taxa de acerto de 26.7%, custo total de $0.021 e tempo médio de resposta de 2.20s.
O que torna MiMo-V2.5 único: O custo total do benchmark é invulgarmente baixo para este nível de pontuação. É notavelmente rápido em comparação com modelos semelhantes.
Pesquisado em 2026-08-12
4.8
Consistência
9.3
10.0
$0.021
Total de tokens de saída
2,258
Total de tokens de entrada
0
Preço de entrada
$0.400 / 1M
Preço de saída
$2.000 / 1M
Testes instáveis
2
Testes instáveis tiveram resultados mistos entre execuções (pelo menos um acerto e uma falha).
Prompt: Create a detailed SVG illustration of a hamster playing table tennis.
Histórico de execuções
| Testado em | Pontuação | Confiabilidade | Testes corretos | Custo total | Comparar |
|---|---|---|---|---|---|
| 2026-08-14 02:25 Novo teste | 5.1 | 10.0 | $0.025 ↓ | Comparar | |
| 2026-07-16 22:42 Novo teste adicionado | 5.1 | 10.0 | $0.025 ↓ | Comparar | |
| 2026-06-04 13:48 Novo teste adicionado | 4.9 | 10.0 | $0.007 ↓ | Comparar | |
| 2026-05-22 12:51 Novo teste adicionado | 4.8 | 10.0 | $0.021 | Execução atual | |
| 2026-05-08 15:33 Suite alterada | 4.9 | 10.0 | $0.019 | Comparar | |
| 2026-04-22 21:39 Primeira execução registrada | 5.1 | N/D | $0.019 | Comparar |
Esta execução usou uma suite de benchmark diferente. Considere as mudanças na suite ao analisar a evolução histórica.
Comparação de execuções
| Execução | Cobertura do benchmark | Pontuação | Consistência | Confiabilidade | Testes corretos | Testes instáveis | Total de tokens de saída | Total de tokens de entrada | Custo total | Tempo de resposta (médio) |
|---|---|---|---|---|---|---|---|---|---|---|
| 2026-05-22 12:51 · Novo teste adicionado | 60/60 tentativas | 4.8 | 9.3 | 10.0 | 4/20 | 2 | 2,258 | 0 | $0.021 | 2.20s |
| 2026-08-14 02:25 · Novo teste | 66/66 tentativas | 5.1 | 9.2 | 10.0 | 5/22 | 2 | 16,464 | 141,052 | $0.025 | 4.68s |
| Diferença | — | -0.3 | +0.1 | 0.0 | -1 | 0 | -14206 | -141052 | -$0.005 | -2484ms |
A cobertura do benchmark é diferente: 60/60 tentativas (Meta: 3 repetições por teste) contra 66/66 tentativas (Meta: 3 repetições por teste). Totais e métricas sensíveis a repetições não são diretamente comparáveis.
Estas duas execuções usaram suites de benchmark diferentes, então as diferenças refletem tanto mudanças do modelo quanto da suite.
Escolha o primeiro modelo e depois clique em um segundo modelo para abrir uma página lado a lado.
| Categoria | Pontuação | Consistência | Testes corretos |
|---|---|---|---|
| Truques anti-IA | 3.5 | 8.0 | |
| Programação | 6.8 | 10.0 | |
| Combinado | 3.0 | 10.0 | |
| Análise e extração de dados | 6.5 | 10.0 | |
| Específico do domínio | 3.0 | 10.0 | |
| Inteligência geral | 4.4 | 9.9 | |
| Seguimento de instruções | 6.5 | 10.0 | |
| Resolução de quebra-cabeças | 4.2 | 7.7 | |
| Chamada de ferramentas | 10.0 | 10.0 | |
| Conhecimentos gerais | 3.0 | 10.0 |