Ranking de modelos de Programação

Veja quais modelos de IA vão melhor em Programação, quais permanecem confiáveis e onde aparecem as maiores diferenças. Ordenar por: Métrica ↑.

Modelos exibidos

Média de Pontuação de Programação

0.6

Melhor modelo

Gemini 3.1 Flash Lite Preview 0.0

Motivos de falha

Com motivo de falha Resposta incorreta456 Com motivo de falha Erro de API64 Com motivo de falha Sem resposta47 Com motivo de falha Não seguiu as instruções44 Com motivo de falha Formatação extra36 Com motivo de falha Tempo esgotado24

408/408

Posição	Modelo	Empresa	Pontuação de Programação	Pontuação	Custo total	Testes corretos	Tempo de resposta (médio)
#390	Command A+ high	Cohere	0.3	0.3	$0.079	0/3	92.7s
Total de testes 3 Testes errados 3 Custo total $0.079 Tempo de resposta (médio) 92.7s
#393	Command A+ none	Cohere	0.3	0.3	$0.000	0/3	80.8s
Total de testes 3 Testes errados 3 Custo total $0.000 Tempo de resposta (médio) 80.8s
#394	Command A+ low	Cohere	0.3	0.3	$0.073	0/3	86.4s
Total de testes 3 Testes errados 3 Custo total $0.073 Tempo de resposta (médio) 86.4s
#342	DeepSeek V3.2 none	DeepSeek	0.3	0.5	$0.119	0/3	14.5s
Total de testes 3 Testes errados 3 Custo total $0.119 Tempo de resposta (médio) 14.5s
#375	Nemotron 3.5 Lightning none	NVIDIA	0.3	0.4	$0.009	0/3	1.55s
Total de testes 3 Testes errados 3 Custo total $0.009 Tempo de resposta (médio) 1.55s
#284	Nemotron 3 Super medium	NVIDIA	0.3	0.6	$0.081	0/3	147.3s
Total de testes 3 Testes errados 3 Custo total $0.081 Tempo de resposta (médio) 147.3s
#322	GPT-4o-mini default	OpenAI	0.3	0.5	$0.024	0/3	1.63s
Total de testes 3 Testes errados 3 Custo total $0.024 Tempo de resposta (médio) 1.63s
#178	Claude Sonnet 5.5 low	Anthropic	0.3	0.7	$0.909	0/3	5.81s
Total de testes 3 Testes errados 3 Custo total $0.909 Tempo de resposta (médio) 5.81s
#363	GLM 4.7 Flash medium	Z.ai	0.3	0.4	$0.193	0/3	55.3s
Total de testes 3 Testes errados 3 Custo total $0.193 Tempo de resposta (médio) 55.3s
#333	Mimo V2 Omni medium	Xiaomi	0.3	0.5	$0.683	0/3	183.9s
Total de testes 3 Testes errados 3 Custo total $0.683 Tempo de resposta (médio) 183.9s
#355	Nemotron 3 Super none	NVIDIA	0.3	0.4	$0.016	0/3	2.64s
Total de testes 3 Testes errados 3 Custo total $0.016 Tempo de resposta (médio) 2.64s
#356	KAT Coder AIR V2.5 default	Kwaipilot	0.3	0.4	$0.070	0/3	14.3s
Total de testes 3 Testes errados 3 Custo total $0.070 Tempo de resposta (médio) 14.3s
#292	Claude Opus 4.7 none	Anthropic	0.3	0.5	$0.505	1/1	2.84s
Total de testes 1 Testes errados 0 Custo total $0.505 Tempo de resposta (médio) 2.84s
#324	Grok 4.20 Beta medium	X AI	0.3	0.5	$0.750	1/1	31.4s
Total de testes 1 Testes errados 0 Custo total $0.750 Tempo de resposta (médio) 31.4s
#344	Gemini 3.1 Flash Lite high	Google	0.3	0.5	$2.044	1/1	137.6s
Total de testes 1 Testes errados 0 Custo total $2.044 Tempo de resposta (médio) 137.6s

Ranking de Programação

Filtrar modelos

Melhores modelos por Pontuação de Programação

Pontuação de Programação vs custo total

Melhores modelos por Tempo de resposta (médio)