Leaderboard do AI Benchy

Name: Resultados de benchmark de modelos AI BENCHY
Creator: AI BENCHY
License: https://aibenchy.com/methodology/

Benchmarks gerados a partir das suítes de teste do AI BENCHY em: 2026-10-17 Modelos avaliados: 442

Modelos recomendados

GPT-6.1 Sol xhigh Inteligente Taxa de acerto por tentativa 97.1% Testes corretos 22 / 23 Pontuação 9.9/10 Gemini 3.7 Flash low Rápido Tempo de resposta (médio) 6.24s Total de tokens de saída 38,453 Pontuação 9.4/10 GPT-6 Luna high Acessível Preço de entrada $0.100 / 1M Preço de saída $0.500 / 1M Preço de leitura do cache $0.010 / 1M Preço de escrita no cache $0.125 / 1M Pontuação 7.7/10

442/442

Posição	Modelo	Pontuação	Empresa	Custo total	Tempo de resposta (médio)
#435#435	Gemini 3 Flash Previewhigh	1.8	Google	$0.105	52.45s
Ver cartão do modelo Total de testes 1 Testes errados 0 Confiabilidade 10.0 Taxa de acerto por tentativa 4.4% Testes instáveis 0 Tokens de entrada 134,050 Tokens de saída 1,029 Tokens de raciocínio 11,528 Tempo de resposta (médio) 52.45s Tempo de resposta (total) 52.45s Tempo de resposta (máx.) 52.45s Tarefas de agentes : 10.0 Truques anti-IA : 0.0 Programação : 0.0 Combinado : 0.0 Análise e extração de dados : 0.0 Específico do domínio : 0.0 Inteligência geral : 0.0 Seguimento de instruções : 0.0 Resolução de quebra-cabeças : 0.0 Chamada de ferramentas : 0.0 Conhecimentos gerais : 0.0
#442#442	Claude Opus 5.5none	0.2	Anthropic	$0.015	13.58s
Ver cartão do modelo Total de testes 1 Testes errados 0 Confiabilidade 10.0 Taxa de acerto por tentativa 4.4% Testes instáveis 0 Tokens de entrada 73 Tokens de saída 6 Tokens de raciocínio 729 Tempo de resposta (médio) 13.58s Tempo de resposta (total) 13.58s Tempo de resposta (máx.) 13.58s Tarefas de agentes : 0.0 Truques anti-IA : 0.0 Programação : 0.0 Combinado : 0.0 Análise e extração de dados : 0.0 Específico do domínio : 3.3 Inteligência geral : 0.0 Seguimento de instruções : 0.0 Resolução de quebra-cabeças : 0.0 Chamada de ferramentas : 0.0 Conhecimentos gerais : 0.0
#1🥇 #1	Gemini 3.6 Flashhigh	9.9	Google	$0.900 ↓	18.93s
Ver cartão do modelo Total de testes 23 Testes errados 1 Confiabilidade 10.0 Taxa de acerto por tentativa 98.6% Testes instáveis 1 Tokens de entrada 238,080 Tokens de saída 4,211 Tokens de raciocínio 188,109 Tempo de resposta (médio) 18.93s Tempo de resposta (total) 435.48s Tempo de resposta (máx.) 104.15s Resposta incorreta: 1 Tarefas de agentes : 10.0 Truques anti-IA : 10.0 Programação : 10.0 Combinado : 10.0 Análise e extração de dados : 10.0 Específico do domínio : 8.2 Inteligência geral : 10.0 Seguimento de instruções : 10.0 Resolução de quebra-cabeças : 10.0 Chamada de ferramentas : 10.0 Conhecimentos gerais : 10.0
#2🥈 #2	Gemini 3.8 Flashhigh	9.9	Google	$1.927	40.60s
Ver cartão do modelo Total de testes 23 Testes errados 1 Confiabilidade 10.0 Taxa de acerto por tentativa 98.6% Testes instáveis 1 Tokens de entrada 334,568 Tokens de saída 11,394 Tokens de raciocínio 435,334 Tempo de resposta (médio) 40.60s Tempo de resposta (total) 933.73s Tempo de resposta (máx.) 177.08s Sem resposta: 1 Tarefas de agentes : 10.0 Truques anti-IA : 10.0 Programação : 10.0 Combinado : 10.0 Análise e extração de dados : 10.0 Específico do domínio : 8.2 Inteligência geral : 10.0 Seguimento de instruções : 10.0 Resolução de quebra-cabeças : 10.0 Chamada de ferramentas : 10.0 Conhecimentos gerais : 10.0
#3🥉 #3	GPT-6 Solhigh	9.9	OpenAI	$0.921	23.56s
Ver cartão do modelo Total de testes 23 Testes errados 1 Confiabilidade 10.0 Taxa de acerto por tentativa 95.7% Testes instáveis 0 Tokens de entrada 182,698 Tokens de saída 5,647 Tokens de raciocínio 49,872 Tempo de resposta (médio) 23.56s Tempo de resposta (total) 541.85s Tempo de resposta (máx.) 136.22s Resposta incorreta: 1 Tarefas de agentes : 10.0 Truques anti-IA : 10.0 Programação : 10.0 Combinado : 10.0 Análise e extração de dados : 10.0 Específico do domínio : 7.7 Inteligência geral : 10.0 Seguimento de instruções : 10.0 Resolução de quebra-cabeças : 10.0 Chamada de ferramentas : 10.0 Conhecimentos gerais : 10.0
#4#4	GPT-6.1 Solmax	9.9	OpenAI	$1.006	61.98s
Ver cartão do modelo Total de testes 23 Testes errados 1 Confiabilidade 9.7 Taxa de acerto por tentativa 95.7% Testes instáveis 0 Tokens de entrada 183,607 Tokens de saída 5,741 Tokens de raciocínio 58,082 Tempo de resposta (médio) 61.98s Tempo de resposta (total) 1425.65s Tempo de resposta (máx.) 960.01s Tempo esgotado: 1 Tarefas de agentes : 10.0 Truques anti-IA : 10.0 Programação : 10.0 Combinado : 10.0 Análise e extração de dados : 10.0 Específico do domínio : 7.7 Inteligência geral : 10.0 Seguimento de instruções : 10.0 Resolução de quebra-cabeças : 10.0 Chamada de ferramentas : 10.0 Conhecimentos gerais : 10.0
#5#5	GPT-6 Astramax	9.9	OpenAI	$5.044	61.63s
Ver cartão do modelo Total de testes 23 Testes errados 1 Confiabilidade 9.6 Taxa de acerto por tentativa 95.7% Testes instáveis 0 Tokens de entrada 181,223 Tokens de saída 5,707 Tokens de raciocínio 58,909 Tempo de resposta (médio) 61.63s Tempo de resposta (total) 1417.51s Tempo de resposta (máx.) 960.01s Tempo esgotado: 1 Tarefas de agentes : 10.0 Truques anti-IA : 10.0 Programação : 10.0 Combinado : 10.0 Análise e extração de dados : 10.0 Específico do domínio : 7.7 Inteligência geral : 10.0 Seguimento de instruções : 10.0 Resolução de quebra-cabeças : 10.0 Chamada de ferramentas : 10.0 Conhecimentos gerais : 10.0
#6#6	GPT-6.1 Solxhigh	9.9	OpenAI	$1.377	33.11s
Ver cartão do modelo Total de testes 23 Testes errados 1 Confiabilidade 10.0 Taxa de acerto por tentativa 97.1% Testes instáveis 1 Tokens de entrada 175,712 Tokens de saída 5,640 Tokens de raciocínio 96,842 Tempo de resposta (médio) 33.11s Tempo de resposta (total) 761.52s Tempo de resposta (máx.) 491.85s Resposta incorreta: 1 Tarefas de agentes : 10.0 Truques anti-IA : 10.0 Programação : 10.0 Combinado : 10.0 Análise e extração de dados : 10.0 Específico do domínio : 7.6 Inteligência geral : 10.0 Seguimento de instruções : 10.0 Resolução de quebra-cabeças : 10.0 Chamada de ferramentas : 10.0 Conhecimentos gerais : 10.0
#7#7	GPT-6 Astrahigh	9.9	OpenAI	$4.458	20.16s
Ver cartão do modelo Total de testes 23 Testes errados 1 Confiabilidade 9.9 Taxa de acerto por tentativa 97.1% Testes instáveis 1 Tokens de entrada 167,805 Tokens de saída 5,651 Tokens de raciocínio 49,944 Tempo de resposta (médio) 20.16s Tempo de resposta (total) 463.68s Tempo de resposta (máx.) 254.93s Resposta incorreta: 1 Tarefas de agentes : 10.0 Truques anti-IA : 10.0 Programação : 10.0 Combinado : 10.0 Análise e extração de dados : 10.0 Específico do domínio : 7.6 Inteligência geral : 10.0 Seguimento de instruções : 10.0 Resolução de quebra-cabeças : 10.0 Chamada de ferramentas : 10.0 Conhecimentos gerais : 10.0
#8#8	GPT-6 Astraxhigh	9.9	OpenAI	$6.213	29.67s
Ver cartão do modelo Total de testes 23 Testes errados 1 Confiabilidade 9.9 Taxa de acerto por tentativa 97.1% Testes instáveis 1 Tokens de entrada 170,731 Tokens de saída 5,865 Tokens de raciocínio 84,230 Tempo de resposta (médio) 29.67s Tempo de resposta (total) 682.42s Tempo de resposta (máx.) 381.11s Resposta incorreta: 1 Tarefas de agentes : 10.0 Truques anti-IA : 10.0 Programação : 10.0 Combinado : 10.0 Análise e extração de dados : 10.0 Específico do domínio : 7.6 Inteligência geral : 10.0 Seguimento de instruções : 10.0 Resolução de quebra-cabeças : 10.0 Chamada de ferramentas : 10.0 Conhecimentos gerais : 10.0
#9#9	Gemini 3.7 Flashhigh	9.8	Google	$0.528	15.10s
Ver cartão do modelo Total de testes 23 Testes errados 2 Confiabilidade 10.0 Taxa de acerto por tentativa 95.7% Testes instáveis 2 Tokens de entrada 233,400 Tokens de saída 6,922 Tokens de raciocínio 173,178 Tempo de resposta (médio) 15.10s Tempo de resposta (total) 347.23s Tempo de resposta (máx.) 91.63s Resposta incorreta: 2 Tarefas de agentes : 10.0 Truques anti-IA : 10.0 Programação : 10.0 Combinado : 10.0 Análise e extração de dados : 10.0 Específico do domínio : 5.8 Inteligência geral : 10.0 Seguimento de instruções : 10.0 Resolução de quebra-cabeças : 10.0 Chamada de ferramentas : 10.0 Conhecimentos gerais : 10.0
#10#10	Gemini 3.6 Flashmedium	9.8	Google	$0.577 ↓	14.03s
Ver cartão do modelo Total de testes 23 Testes errados 2 Confiabilidade 10.0 Taxa de acerto por tentativa 95.7% Testes instáveis 2 Tokens de entrada 188,003 Tokens de saída 2,914 Tokens de raciocínio 113,210 Tempo de resposta (médio) 14.03s Tempo de resposta (total) 322.73s Tempo de resposta (máx.) 77.15s Resposta incorreta: 2 Tarefas de agentes : 10.0 Truques anti-IA : 10.0 Programação : 10.0 Combinado : 10.0 Análise e extração de dados : 10.0 Específico do domínio : 5.8 Inteligência geral : 10.0 Seguimento de instruções : 10.0 Resolução de quebra-cabeças : 10.0 Chamada de ferramentas : 10.0 Conhecimentos gerais : 10.0
#11#11	GPT-6.1 Solmedium	9.6	OpenAI	$0.530	8.90s
Ver cartão do modelo Total de testes 23 Testes errados 2 Confiabilidade 10.0 Taxa de acerto por tentativa 94.2% Testes instáveis 1 Tokens de entrada 172,860 Tokens de saída 5,172 Tokens de raciocínio 13,179 Tempo de resposta (médio) 8.90s Tempo de resposta (total) 204.78s Tempo de resposta (máx.) 51.03s Resposta incorreta: 2 Tarefas de agentes : 10.0 Truques anti-IA : 10.0 Programação : 10.0 Combinado : 10.0 Análise e extração de dados : 10.0 Específico do domínio : 7.7 Inteligência geral : 10.0 Seguimento de instruções : 10.0 Resolução de quebra-cabeças : 10.0 Chamada de ferramentas : 10.0 Conhecimentos gerais : 4.7
#12#12	GPT-6.1 Solhigh	9.6	OpenAI	$0.755	15.46s
Ver cartão do modelo Total de testes 23 Testes errados 2 Confiabilidade 10.0 Taxa de acerto por tentativa 94.2% Testes instáveis 1 Tokens de entrada 174,960 Tokens de saída 5,780 Tokens de raciocínio 34,728 Tempo de resposta (médio) 15.46s Tempo de resposta (total) 355.66s Tempo de resposta (máx.) 139.76s Resposta incorreta: 2 Tarefas de agentes : 10.0 Truques anti-IA : 10.0 Programação : 10.0 Combinado : 10.0 Análise e extração de dados : 10.0 Específico do domínio : 7.7 Inteligência geral : 10.0 Seguimento de instruções : 10.0 Resolução de quebra-cabeças : 10.0 Chamada de ferramentas : 10.0 Conhecimentos gerais : 4.7
#14#14	GPT-6 Astralow	9.6	OpenAI	$2.160	7.01s
Ver cartão do modelo Total de testes 23 Testes errados 2 Confiabilidade 9.9 Taxa de acerto por tentativa 91.3% Testes instáveis 0 Tokens de entrada 159,023 Tokens de saída 4,935 Tokens de raciocínio 6,454 Tempo de resposta (médio) 7.01s Tempo de resposta (total) 161.20s Tempo de resposta (máx.) 49.16s Resposta incorreta: 2 Tarefas de agentes : 10.0 Truques anti-IA : 10.0 Programação : 10.0 Combinado : 10.0 Análise e extração de dados : 10.0 Específico do domínio : 7.7 Inteligência geral : 10.0 Seguimento de instruções : 10.0 Resolução de quebra-cabeças : 10.0 Chamada de ferramentas : 10.0 Conhecimentos gerais : 3.0
#15#15	Gemini 3 Flash Previewmedium	9.6	Google	$0.876	21.57s
Ver cartão do modelo Total de testes 23 Testes errados 2 Confiabilidade 10.0 Taxa de acerto por tentativa 94.2% Testes instáveis 1 Tokens de entrada 235,726 Tokens de saída 6,669 Tokens de raciocínio 245,867 Tempo de resposta (médio) 21.57s Tempo de resposta (total) 496.12s Tempo de resposta (máx.) 117.26s Resposta incorreta: 2 Tarefas de agentes : 10.0 Truques anti-IA : 10.0 Programação : 8.6 Combinado : 10.0 Análise e extração de dados : 10.0 Específico do domínio : 7.7 Inteligência geral : 10.0 Seguimento de instruções : 10.0 Resolução de quebra-cabeças : 10.0 Chamada de ferramentas : 10.0 Conhecimentos gerais : 10.0
#16#16	GPT-6.1 Sollow	9.6	OpenAI	$0.460	7.15s
Ver cartão do modelo Total de testes 23 Testes errados 2 Confiabilidade 10.0 Taxa de acerto por tentativa 92.8% Testes instáveis 1 Tokens de entrada 163,900 Tokens de saída 4,958 Tokens de raciocínio 8,180 Tempo de resposta (médio) 7.15s Tempo de resposta (total) 164.47s Tempo de resposta (máx.) 46.57s Resposta incorreta: 2 Tarefas de agentes : 10.0 Truques anti-IA : 10.0 Programação : 10.0 Combinado : 10.0 Análise e extração de dados : 10.0 Específico do domínio : 7.7 Inteligência geral : 10.0 Seguimento de instruções : 10.0 Resolução de quebra-cabeças : 10.0 Chamada de ferramentas : 10.0 Conhecimentos gerais : 2.8
#17#17	Gemini 4 Argonhigh	9.5	Google	$1.802	19.03s
Ver cartão do modelo Total de testes 23 Testes errados 2 Confiabilidade 9.9 Taxa de acerto por tentativa 97.1% Testes instáveis 2 Tokens de entrada 240,264 Tokens de saída 5,707 Tokens de raciocínio 126,366 Tempo de resposta (médio) 19.03s Tempo de resposta (total) 437.77s Tempo de resposta (máx.) 82.53s Erro de API: 1 Resposta incorreta: 1 Tarefas de agentes : 10.0 Truques anti-IA : 10.0 Programação : 10.0 Combinado : 7.3 Análise e extração de dados : 10.0 Específico do domínio : 8.2 Inteligência geral : 10.0 Seguimento de instruções : 10.0 Resolução de quebra-cabeças : 10.0 Chamada de ferramentas : 10.0 Conhecimentos gerais : 10.0
#18#18	Gemini 3.7 Flashmedium	9.5	Google	$0.278	8.16s
Ver cartão do modelo Total de testes 23 Testes errados 2 Confiabilidade 10.0 Taxa de acerto por tentativa 94.2% Testes instáveis 1 Tokens de entrada 202,347 Tokens de saída 6,660 Tokens de raciocínio 68,002 Tempo de resposta (médio) 8.16s Tempo de resposta (total) 187.58s Tempo de resposta (máx.) 58.39s Resposta incorreta: 2 Tarefas de agentes : 10.0 Truques anti-IA : 10.0 Programação : 8.4 Combinado : 10.0 Análise e extração de dados : 10.0 Específico do domínio : 7.7 Inteligência geral : 10.0 Seguimento de instruções : 10.0 Resolução de quebra-cabeças : 10.0 Chamada de ferramentas : 10.0 Conhecimentos gerais : 10.0
#19#19	GPT-6 Solmedium	9.5	OpenAI	$0.703	12.12s
Ver cartão do modelo Total de testes 23 Testes errados 2 Confiabilidade 10.0 Taxa de acerto por tentativa 94.2% Testes instáveis 1 Tokens de entrada 194,520 Tokens de saída 5,396 Tokens de raciocínio 25,991 Tempo de resposta (médio) 12.12s Tempo de resposta (total) 278.70s Tempo de resposta (máx.) 82.74s Resposta incorreta: 2 Tarefas de agentes : 10.0 Truques anti-IA : 10.0 Programação : 8.2 Combinado : 10.0 Análise e extração de dados : 10.0 Específico do domínio : 7.7 Inteligência geral : 10.0 Seguimento de instruções : 10.0 Resolução de quebra-cabeças : 10.0 Chamada de ferramentas : 10.0 Conhecimentos gerais : 10.0
#26#26	Gemini 3.7 Flashlow	9.4	Google	$0.183	6.24s
Ver cartão do modelo Total de testes 23 Testes errados 2 Confiabilidade 10.0 Taxa de acerto por tentativa 95.7% Testes instáveis 2 Tokens de entrada 188,519 Tokens de saída 7,694 Tokens de raciocínio 30,759 Tempo de resposta (médio) 6.24s Tempo de resposta (total) 143.56s Tempo de resposta (máx.) 58.75s Resposta incorreta: 2 Tarefas de agentes : 10.0 Truques anti-IA : 10.0 Programação : 7.6 Combinado : 10.0 Análise e extração de dados : 10.0 Específico do domínio : 8.2 Inteligência geral : 10.0 Seguimento de instruções : 10.0 Resolução de quebra-cabeças : 10.0 Chamada de ferramentas : 10.0 Conhecimentos gerais : 10.0
#21#21	GPT-6 Astramedium	9.5	OpenAI	$2.707	9.90s
Ver cartão do modelo Total de testes 23 Testes errados 3 Confiabilidade 9.9 Taxa de acerto por tentativa 91.3% Testes instáveis 2 Tokens de entrada 165,464 Tokens de saída 5,591 Tokens de raciocínio 15,454 Tempo de resposta (médio) 9.90s Tempo de resposta (total) 227.67s Tempo de resposta (máx.) 73.48s Resposta incorreta: 3 Tarefas de agentes : 10.0 Truques anti-IA : 10.0 Programação : 10.0 Combinado : 10.0 Análise e extração de dados : 10.0 Específico do domínio : 5.9 Inteligência geral : 10.0 Seguimento de instruções : 10.0 Resolução de quebra-cabeças : 10.0 Chamada de ferramentas : 10.0 Conhecimentos gerais : 2.8
#23#23	GPT-5.5low	9.5	OpenAI	$1.822	11.91s
Ver cartão do modelo Total de testes 23 Testes errados 3 Confiabilidade 10.0 Taxa de acerto por tentativa 87.0% Testes instáveis 0 Tokens de entrada 177,939 Tokens de saída 6,283 Tokens de raciocínio 24,782 Tempo de resposta (médio) 11.91s Tempo de resposta (total) 273.82s Tempo de resposta (máx.) 56.19s Resposta incorreta: 3 Tarefas de agentes : 10.0 Truques anti-IA : 10.0 Programação : 10.0 Combinado : 10.0 Análise e extração de dados : 10.0 Específico do domínio : 5.3 Inteligência geral : 10.0 Seguimento de instruções : 9.9 Resolução de quebra-cabeças : 10.0 Chamada de ferramentas : 10.0 Conhecimentos gerais : 3.0
#31#31	Claude Opus 5.5medium	9.2	Anthropic	$1.804	25.85s
Ver cartão do modelo Total de testes 23 Testes errados 3 Confiabilidade 10.0 Taxa de acerto por tentativa 89.9% Testes instáveis 1 Tokens de entrada 290,117 Tokens de saída 9,805 Tokens de raciocínio 22,322 Tempo de resposta (médio) 25.85s Tempo de resposta (total) 594.63s Tempo de resposta (máx.) 90.20s Resposta incorreta: 2 Sem resposta: 1 Tarefas de agentes : 10.0 Truques anti-IA : 10.0 Programação : 8.4 Combinado : 10.0 Análise e extração de dados : 10.0 Específico do domínio : 7.7 Inteligência geral : 10.0 Seguimento de instruções : 10.0 Resolução de quebra-cabeças : 10.0 Chamada de ferramentas : 10.0 Conhecimentos gerais : 3.0
#85#85	Gemini 3.1 Pro Previewmedium	8.4	Google	$1.585	22.71s
Ver cartão do modelo Total de testes 23 Testes errados 3 Confiabilidade 9.8 Taxa de acerto por tentativa 89.9% Testes instáveis 1 Tokens de entrada 176,208 Tokens de saída 6,093 Tokens de raciocínio 96,598 Tempo de resposta (médio) 22.71s Tempo de resposta (total) 386.11s Tempo de resposta (máx.) 88.68s Resposta incorreta: 2 Tempo esgotado: 1 Tarefas de agentes : 4.7 Truques anti-IA : 10.0 Programação : 7.9 Combinado : 9.8 Análise e extração de dados : 10.0 Específico do domínio : 7.7 Inteligência geral : 10.0 Seguimento de instruções : 10.0 Resolução de quebra-cabeças : 10.0 Chamada de ferramentas : 10.0 Conhecimentos gerais : 10.0

1 2 18

→

Tendências globais do benchmark

Veja como os modelos atuais equilibram pontuação, custo, velocidade, comprimento da saída e desempenho por categoria.

Gráficos →

Fronteira de Pareto: inteligência vs custo

Evolução da melhor pontuação das empresas líderes

Fronteira de Pareto: inteligência vs velocidade de resposta

Fronteira de Pareto: pontuação vs tokens de saída

Dificuldade das categorias entre os modelos

Comparação rápida

Gemini 3.6 FlashhighvsGemini 3.8 Flashhigh Gemini 3.8 FlashhighvsGPT-6 Solhigh GPT-6 SolhighvsGPT-6.1 Solmax GPT-6.1 SolmaxvsGPT-6 Astramax GPT-6 AstramaxvsGPT-6.1 Solxhigh GPT-6.1 SolxhighvsGPT-6 Astrahigh GPT-6 AstrahighvsGemini 3.7 Flashhigh Gemini 3.7 FlashhighvsGemini 3.6 Flashmedium Gemini 3.6 FlashmediumvsGPT-6.1 Solmedium GPT-6.1 SolmediumvsGPT-6.1 Solhigh GPT-6.1 SolhighvsGPT-5.6 Sollow GPT-5.6 SollowvsGPT-6 Astralow