AI BENCHY
Advertise here
#69

DeepSeek V3.2

DeepSeek Lançamento: 2025-12-01 Testado em: 2026-04-20 17:48 deepseek/deepseek-v3.2::none
(medium) (none)

Resumo

DeepSeek V3.2 marca 6.1 no AI BENCHY e fica em #69. Tem fiabilidade N/D, taxa de acerto de 50.0%, custo total de $0.016 e tempo médio de resposta de 12.09s.

O que torna DeepSeek V3.2 único: Destaca-se mais em Resolução de quebra-cabeças, onde fica em #3, enquanto Truques anti-IA é a área mais fraca em #18. O custo total do benchmark é invulgarmente baixo para este nível de pontuação.

Consistência

8.1

Confiabilidade

N/D

Total de tokens de saída

8,384

Total de tokens de entrada

0

Preço de entrada

$0.252 / 1M

Preço de saída

$0.378 / 1M

Testes corretos

Testes errados: 11

Taxa de acerto por tentativa: 50.0%

Testes instáveis

4

Testes instáveis tiveram resultados mistos entre execuções (pelo menos um acerto e uma falha).

Tempo de resposta (médio)

12.09s

Tempo de resposta (máx.): 115.89s

Tempo de resposta (total): 217.56s

Geração showcase

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#69 DeepSeek V3.2

none
Custo
$0.002
Tempo
7.0s
Tokens
1,046 tok

Histórico de execuções

Testado em Pontuação Confiabilidade Testes corretos Custo total Comparar
2026-07-16 23:15 Novo teste adicionado 5.0 10.0 $0.054 Comparar
2026-06-04 14:22 Novo teste adicionado 5.2 10.0 $0.017 Comparar
2026-05-22 00:35 Suite alterada 5.6 10.0 $0.018 Comparar
2026-05-08 15:31 Suite alterada 5.7 10.0 $0.016 Comparar
2026-04-20 17:48 Primeira execução registrada 6.1 N/D $0.016 Execução atual

Comparação de execuções

ExecuçãoPontuaçãoConsistênciaConfiabilidadeTestes corretosTestes instáveisTotal de tokens de saídaTotal de tokens de entradaCusto totalTempo de resposta (médio)
2026-04-20 17:48 · Primeira execução registrada6.18.1N/D7/1848,3840$0.01612.09s
2026-07-16 23:15 · Novo teste adicionado5.07.710.06/22642,097135,780$0.05418.25s
Diferença+1.1+0.4+1-2-33713-135780-$0.038-6168ms

Estas duas execuções usaram suites de benchmark diferentes, então as diferenças refletem tanto mudanças do modelo quanto da suite.

Gráficos

Escolha o primeiro modelo e depois clique em um segundo modelo para abrir uma página lado a lado.

Total de tokens de saída

Pontuação vs Total de tokens de saída

Comparação rápida

Detalhamento por categoria

Categoria Pontuação Consistência Testes corretos
Truques anti-IA 3.2 9.8
Programação 2.4 1.3
Combinado 6.5 10.0
Análise e extração de dados 6.3 5.8
Específico do domínio 3.6 7.2
Inteligência geral 10.0 10.0
Seguimento de instruções 10.0 10.0
Resolução de quebra-cabeças 8.5 7.5
Chamada de ferramentas 10.0 10.0

Modelos comparados