Verificação de modelos

O modelo que paga é o modelo que responde

Uma API mais barata só poupa dinheiro quando o modelo por trás dela é o da etiqueta. Em 11 de novembro de 2026, enviámos a todos os modelos que o endpoint da AIGROW vende os mesmos prompts que ao mesmo modelo no respetivo fabricante, e comparámos o que voltou. Todos os 9 coincidiram, e duas linhas que não coincidiram foram retiradas de serviço.

Execução de 11 de novembro de 2026, das 14:10 às 14:46 UTC. A AIGROW é independente da Anthropic, da OpenAI, da Google e da xAI.

Verificação de modelos de 11 de novembro de 2026
9 de 9modelos à venda coincidiram com o fabricante
Mesma chamada de ferramenta que o fabricante
9 de 9
Mesmos tokens de prompt que o fabricante
7 de 9
Linhas que adicionam contexto próprio
2
Linhas removidas por falharem
2
Vendedores de APIs com desconto testados
12

Claude contra a API da Anthropic; GPT, Gemini e Grok através da OpenRouter

A AIGROW verifica cada modelo que a sua API vende contra o mesmo modelo no respetivo fabricante: 12 perguntas com uma só resposta certa, uma chamada de ferramenta e os tokens de prompt indicados para um prompt fixo. Em 11 de novembro de 2026, todos os 9 modelos à venda coincidiram. Os resultados, a bateria e um script que repete o teste estão abaixo.

O que a execução encontrou

Um modelo coincide quando responde à bateria como o modelo do fabricante, faz a mesma chamada de ferramenta e indica os tokens de prompt que o fabricante indica.

  1. Todos os 9 modelos à venda atingiram a pontuação do fabricante na bateria de testes, com diferença de um item para mais ou para menos.

    8 pontuaram a menos de um item da execução do criador, sem alterar nenhuma definição. O Gemini 4 Argon pontuou assim 7 de 12 e 12 de 12 com um esforço de raciocínio definido no pedido, quando o modelo da Google pontuou 11.

  2. Um modelo mais fraco com um nome mais forte reprova: as linhas rejeitadas pontuaram 0 e 4 de 12.

    Em novembro de 2026, comprámos crédito a 12 vendedores de API com desconto e executámos estas verificações sobre o que vendem. Cada um dos 12 tinha pelo menos uma linha que falhou. Uma linha vendida como Claude Opus 5.5 pontuou 4 de 12 e uma vendida como Claude Sonnet 5.5 pontuou 0, quando os modelos da Anthropic pontuam 12.

  3. Para o mesmo prompt, 7 de 9 modelos reportaram exatamente os tokens de prompt que o criador reporta.

    As outras 2 linhas colocam contexto próprio à frente do prompt: até 258 tokens no Gemini 4 Argon e 2 094 em 3 das 8 chamadas ao Grok 4.7. Uma linha que rejeitámos reportava cerca de 12 500 tokens de prompt para uma chamada de ferramenta de cerca de 100.

  4. 2 linhas falharam nesta execução e já não servem pedidos.

    Uma linha de contingência do GPT-6.1 Sol pontuou 0 de 12, quando o modelo da OpenAI pontua 12, pelo que o GPT-6.1 Sol tem agora uma só linha e devolve um erro quando essa linha está em baixo. O Grok 4.3 reportou 21 tokens de prompt onde o endpoint da xAI reporta 197 e respondeu a uma pergunta sobre si próprio com uma frase fixa, por isso está fora de venda. O Grok 4.7 é o Grok vendido.

Cada modelo ao lado do seu fabricante

A pontuação é o número de respostas certas na bateria; ao Grok 4.7 foram enviados 5 dos 12 itens. Os tokens de prompt são os indicados para os mesmos três prompts: uma resposta de duas palavras, quatro perguntas curtas e uma chamada de ferramenta.

Resultados da verificação de modelos de 11 de novembro de 2026
ModeloAquiNo fabricanteTokens de promptChamada de ferramenta
Comparado com a API da Anthropic
Claude Fable 5.212 de 1212 de 12IgualIgual
Claude Opus 5.512 de 1212 de 12IgualIgual
Claude Sonnet 5.512 de 1212 de 12IgualIgual
Claude Fable 5.112 de 1212 de 12IgualIgual
Comparado com o mesmo modelo através do OpenRouter
GPT-6 Astra12 de 1212 de 12IgualIgual
GPT-6.1 Sol12 de 1212 de 12IgualIgual
GPT-6.1 Terra11 de 1212 de 12 com esforço definido como alto12 de 1211 de 12 com esforço definido como altoIgualIgual
Grok 4.75 de 55 de 5Até 2 094 a maisIgual
Gemini 4 Argon7 de 1212 de 12 com esforço definido como baixo11 de 126 de 12 com esforço definido como baixoAté 258 a maisIgual

Um modelo continua à venda quando a sua melhor execução aqui fica a um item da do fabricante, a chamada de ferramenta é a mesma, o bloco de raciocínio está assinado onde o fabricante assina um, e os tokens de prompt coincidem com os do fabricante ou diferem por causa de contexto próprio da linha, que esta página indica.

A bateria

12 perguntas com uma só resposta certa cada, enviadas numa única mensagem sem ferramentas. Um modelo tem de raciocinar para chegar a elas, e um modelo que adivinha acerta algumas. O prompt é mostrado exatamente como os modelos o receberam.

Solve all 12 items exactly. You have no tools; reason carefully. Reply with ONLY 12 lines in the form `N: answer` (no words, no units, no thousands separators).
1: Sum of the decimal digits of 2^200.
2: Number of integer partitions of 50.
3: Number of twin prime pairs (p, p+2) with p < 3000.
4: Determinant of the matrix [[3, -1, 4, 2], [1, 5, -9, 2], [6, 5, 3, -5], [8, 9, -7, 9]].
5: Day of the week (English) of 17 March 2031.
6: Length of the longest common subsequence of "AGGTABCXKQTRPLMZNVWY" and "GXTXAYBKQRTPLZMNWVYC".
7: Let f(n) be the number of Collatz steps to reach 1 (n -> n/2 if even, 3n+1 if odd). Let m be the n in 1..199 with the largest f(n) (smallest n on ties). Answer m*1000 + f(m).
8: The permutation at 0-indexed lexicographic position 31337 of the digits 01234567, written as 8 digits.
9: 7^222 mod 1009.
10: How many integers from 1 to 10000 have digit sum 19.
11: Number of derangements of 10 elements.
12: Number of occurrences of the letter r in: "the quick brown fox jumps over the lazy dog while seventeen irritated terriers hurriedly retrieve arbitrary forgotten rubber rings".
Respostas exatas
Uma linha conta quando é igual à resposta esperada. O Claude correu com raciocínio adaptativo. Os outros modelos correram com as definições com que o endpoint arranca, e de novo com um esforço de raciocínio definido onde os dois lados arrancavam de forma diferente.
Tokens de prompt
A utilização que cada endpoint reporta para três prompts fixos. O tokenizador de um modelo decide a contagem, por isso o modelo de outro criador reporta outro número, e uma instrução oculta acrescenta-lhe valor.
Chamada de ferramenta
Um pedido com uma ferramenta de meteorologia que recebe uma cidade e uma unidade. Os argumentos têm de ser os que o modelo do criador devolve.
Raciocínio assinado
A Anthropic assina o bloco de raciocínio de uma resposta do Claude. Todas as respostas do Claude aqui vieram com esse bloco e a respetiva assinatura.
A referência
O Claude foi comparado com a API da Anthropic, chamada com a nossa própria chave. GPT, Gemini e Grok foram comparados com o mesmo modelo através do OpenRouter, um router público.
Quando
Entre 14:10 e 14:46 UTC de 11 de novembro de 2026. Cada chamada foi uma nova conversa, em streaming, e foi enviada para a linha que serve o modelo, antes da contabilização do próprio endpoint.

Onde uma linha difere do fabricante

O mesmo modelo pode funcionar com definições diferentes. Estas são as diferenças que a execução mediu, com o que cada uma significa para a fatura.

Claude chamado diretamente
Numa chamada direta à API com raciocínio adaptativo, a linha Claude pensou durante mais tempo do que o endpoint da Anthropic em algumas execuções. Em 8 execuções da bateria, o Claude Opus 5.5 usou aqui entre 2 982 e 31 999 tokens de saída, e entre 2 883 e 7 903 em 5 execuções na Anthropic. Uma resposta do Claude Sonnet 5.5 chegou a 46 822 tokens de saída com um max_tokens de 32 000, e algumas chamadas indicaram mais 724 tokens de prompt do que a Anthropic indica para o mesmo prompt. A linha Claude corta o texto no max_tokens definido por um pedido, pelo que o endpoint não fatura saída do Claude para além desse limite. Dentro dele, a saída e esses tokens de prompt são faturados conforme reportados, por isso uma chamada direta que pensa durante mais tempo custa mais.
Claude através do Claude Code
Enviada pelo Claude Code com esforço médio, a bateria exigiu 1 438 tokens de saída no Claude Opus 5.5 e 1 992 no Claude Fable 5.2, contra 5 564 e 1 578 na Anthropic, com todas as respostas certas dos dois lados.
Esforço de raciocínio
As linhas GPT-6.1 Terra e Gemini 4 Argon partem de um esforço de raciocínio inferior ao do endpoint do fabricante quando o pedido não define nenhum. O GPT-6.1 Terra obteve 11 de 12 dessa forma e 12 com o esforço definido como high. O Gemini 4 Argon obteve 7 e depois 12 com o esforço definido. Defina reasoning_effort no pedido quando a tarefa o exigir.
Limite de saída
As linhas GPT e a linha Grok 4.7 não páram em max_tokens. Quando, mais tarde no mesmo dia, lhes foi pedido um ensaio longo com max_tokens definido como 300, cada uma devolveu o ensaio completo, entre 2 370 e 4 538 tokens de saída, quando os endpoints da OpenAI e da xAI páram no limite. Essas respostas são faturadas tal como entregues, por isso indique a extensão pretendida no prompt. O Claude e o Gemini 4 Argon páram no limite, e o Gemini 4 Argon eleva para 128 qualquer limite inferior a 128 tokens.
Contexto adicionado
Duas linhas colocam tokens próprios antes do prompt, e o endpoint retira-os do consumo que mostra e fatura: 288 no Gemini 4 Argon e 1 200 no Grok 4.7, perto dos 1 247 tokens de prompt que o endpoint da própria xAI reporta para um prompt de duas palavras. As chamadas do Grok 4.7 que reportaram mais foram faturadas pelo restante. A tabela mostra a contagem de cada linha, antes dessa subtração, pelo que o script executado através do endpoint reporta menos tokens de prompt do que o fabricante nestes dois modelos.

Execute a verificação por si

Um ficheiro para Node 18 ou posterior, sem dependências. Envia a bateria, um prompt curto e uma chamada de ferramenta a um endpoint, e também ao fabricante quando lhe indica uma chave do fabricante.

Este endpoint

Mostra a pontuação, os tokens de prompt e os argumentos da chamada de ferramenta.

MODEL_CHECK_KEY=ag_your_key node model-check.mjs claude-opus-5.5

Ao lado do fabricante

Com uma chave da Anthropic para o Claude, ou uma chave da OpenRouter para GPT, Gemini e Grok, mostra os dois lados e indica onde diferem.

MODEL_CHECK_KEY=ag_your_key MAKER_KEY=sk-ant-your_key node model-check.mjs claude-opus-5.5
MODEL_CHECK_KEY=ag_your_key MAKER_KEY=sk-or-your_key node model-check.mjs gpt-6.1-sol

Baixar model-check.mjs

Cada pedido é faturado como habitualmente. A bateria é a parte dispendiosa: alguns cêntimos de crédito na maioria dos modelos, mais quando um modelo raciocina durante muito tempo. Para testar a API de outro vendedor, indique o respetivo endereço com --base.

O que esta página não afirma

Um só dia
Os resultados são de 11 de novembro de 2026. As linhas mudam, por isso a verificação repete-se em todos os modelos à venda na primeira semana de cada mês, antes de um modelo mudar para uma nova linha e antes de um novo modelo ser posto à venda, e um modelo que falhe é retirado da venda no mesmo dia. Esta página mostra a data da sua última execução.
Modelos do mesmo fabricante
Dois modelos fortes do mesmo fabricante podem acertar todos os itens e contar os tokens da mesma forma. A bateria distingue um modelo de um substituto mais fraco e do modelo de outro fabricante. Não consegue distinguir qual de dois modelos que passam deu a resposta.
Doze itens
Uma bateria curta apanha um modelo mais fraco, mas não deteta pequenas diferenças. Uma pontuação de 11 e uma de 12 são o mesmo resultado aqui.
Itens públicos
Os itens e as respetivas respostas estão no script, pelo que um vendedor poderia ajustar uma linha a eles. Altere os números no script para criar uma bateria que ninguém tenha visto.
A referência
Só o Claude foi comparado diretamente com a API do seu fabricante. GPT, Gemini e Grok foram comparados através da OpenRouter, sem uma chave nossa na OpenAI, na Google ou na xAI.
Onde os modelos funcionam
A AIGROW disponibiliza cada modelo através de capacidade que compra a mais do que uma origem, e não as identifica. Definições como o esforço de raciocínio inicial podem diferir das do endpoint do fabricante, como mostra a secção acima.
Sem afiliação
A AIGROW é independente da Anthropic, da OpenAI, da Google e da xAI. Os seus nomes indicam o que o endpoint disponibiliza e não implicam qualquer parceria ou apoio.

Perguntas sobre modelos genuínos

Em 11 de novembro de 2026, a cada um dos 9 modelos à venda foram enviados os mesmos prompts que ao mesmo modelo no respetivo fabricante. Todos atingiram a pontuação do fabricante, com diferença de um item para mais ou para menos, em perguntas com uma única resposta certa (Gemini 4 Argon com um nível de raciocínio definido no pedido), e fizeram a mesma chamada de ferramenta; 7 reportaram exatamente os tokens de prompt do fabricante. A tabela desta página mostra cada resultado.

O vendedor envia o seu pedido para um modelo mais barato e devolve a resposta com o nome que pediu. O nome do modelo numa resposta é o que o vendedor escrever, por isso não prova nada. Perguntas com uma única resposta certa provam: as linhas reprovadas pontuaram 0 e 4 em 12, quando o modelo do criador pontua 12.

Envie-lhe perguntas com uma única resposta certa que um modelo mais fraco erra, envie ao criador o mesmo prompt e compare três coisas: a pontuação, os tokens de prompt reportados e os argumentos de uma chamada de ferramenta. O script desta página faz isso para qualquer endpoint compatível com OpenAI ou com Anthropic.

Deixa de receber pedidos. Em 11 de novembro de 2026, uma linha de recurso para GPT-6.1 Sol obteve 0 em 12 e foi removida, e o Grok 4.3 foi retirado da venda porque a contagem de tokens não coincidia com a do endpoint da xAI.

No caso do Claude, sim: a API da Anthropic, com a nossa própria chave. GPT, Gemini e Grok foram comparados com o mesmo modelo através do OpenRouter, um router público. A AIGROW é independente dos quatro criadores.

Não. Uma linha pode partir de um nível de raciocínio diferente do do endpoint do fabricante, e 2 linhas acrescentam contexto próprio, que o endpoint retira da fatura. A secção sobre o que difere indica cada caso com os respetivos números.

9 modelos, cada um verificado contra o seu fabricante.

Comece com o pacote de 25 US$ e depois execute o script com a sua própria chave.

Verificação de modelos de 11 de novembro de 2026 · resultados e script nesta página